AI Briefing

Signals, agent trace 선별

Signals: finding the most informative agent traces without LLM judges [R]

·2026.05.11 02:26

핵심 내용

Signals는 LLM judges 없이 유의미한 agent trace를 고르는 경량 기법이다.

자세히 보기

Signals는 에이전트 상호작용에서 구조화된 신호를 뽑아, 사람이나 추가 LLM judge 없이도 검토할 가치가 높은 trajectory를 먼저 골라낸다.

  • interaction, execution, environment 패턴을 묶은 taxonomy로 신호를 정의한다.
  • misalignment, stagnation, disengagement, failure, looping, exhaustion 같은 상태를 포착한다.
  • 온라인 동작은 바꾸지 않으며, GPU 없이 계산할 수 있는 경량 방식이다.

τ-bench annotation study에서는 signal-based sampling의 informativeness가 **82%**로, random sampling의 **54%**보다 높았다.

그 결과 informative trajectory당 효율이 1.52x 개선됐고, 논문은 arXiv 2604.00356으로 공개됐다. 구현체는 katanemo/plano에 있다.

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.