Claude Platform, 에이전트 관측 위해 OpenTelemetry 내보내기 지원

Anthropic이 Claude Platform에 OpenTelemetry (OTel) 네이티브 내보내기 기능을 도입했다. 개발자는 Claude Managed Agents, Messages API, Claude SDKs에서 생성된 트레이스를 OTel 호환 도구로 전송할 수 있다. 이를 통해 모델 호출, 도구 사용, MCP 서버 상호작용 등 에이전트의 모든 단계를 기존 관측 스택에서 추적할 수 있다.

통합 및 표준

트레이스는 OpenTelemetry GenAI 시맨틱 컨벤션을 따르므로, 다른 제공업체의 데이터와 동일한 대시보드에서 원활하게 연동된다. Claude Console에 대상을 추가하면 각 에이전트 턴이 지연 시간, 토큰 수, ID를 포함한 표준 OTel 트레이스로 전송된다. 개발자는 이를 통해 느리거나 실패한 단계가 모델, 도구, 외부 서비스 중 어디에서 발생했는지 인프라 전체와 함께 디버깅할 수 있다.

생태계 지원

다양한 관측 및 AI 엔지니어링 플랫폼을 지원한다:

• 디버깅 및 모니터링: Grafana Cloud, Honeycomb, Sentry, Splunk와 연동되어 에이전트 트레이스를 로그 및 메트릭과 함께 배치한다.
• 평가 및 개선: Arize AI, Braintrust, Datadog, Langfuse, LangSmith by LangChain, New Relic, PostHog 등의 도구는 트레이스를 활용해 평가(evals)를 생성하고, 품질 문제를 포착하며, 변경 사항의 영향을 측정한다.
• 조직 추적: Databricks Unity Gateway는 트레이스를 수집하여 플랫폼 및 보안 팀이 팀별 토큰 사용량을 모니터링하고 비정상적인 활동을 감지하도록 돕는다.

가용성 및 초기 성과

현재 퍼블릭 베타로 제공된다. Claude Managed Agents와 Messages API는 Claude Console에서 대상을 설정해야 하지만, Claude SDKs는 트레이스를 자동으로 내보낸다. 초기 사용자들은 상당한 이점을 보고했다. 예를 들어 Ramp은 트레이스를 내부 개선 시스템에 활용해 토큰 사용량을 10–20% 줄이고 일부 에이전트의 세션 속도를 30% 개선했다고 밝혔다. FloQast는 프롬프트 버전, 도구 호출, 지연 시간을 단일 타임라인에서 조회하여 감사 질문에 답변하고 재무 조정 워크플로우와 결합할 수 있다고 강조했다.