AI Briefing#llm-judge
#llm-judge와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#llm-judge와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
LangSmith 팀이 Jev 활용 시 비용을 $28.17에서 $0.34로 줄이는 에이전트 평가 전략을 공개했다.
문자열 매칭 기반 AI 에이전트 평가는 거짓 준수를 유발할 수 있어 실제 실행과 직접 검증을 우선해야 한다.
LangChain이 코드 문서화 에이전트 OpenWiki의 성능을 측정하기 위해 WikiBench 벤치마크를 구축했다.
오픈소스 프레임워크 promptfoo를 활용해 Amazon Bedrock 모델의 응답 품질을 체계적으로 평가하는 방법을 소개한다.
새 플랫폼 없이 기존 Hadoop 환경에 스킬과 컨텍스트 문서를 접목해 분석 절차를 자동화했다.