HuggingFace, GAIA 1위 달성한 smolagents 공개

Web browser: 웹 페이지를 마크다운(Markdown) 형식으로 변환하여 정보를 압축적으로 처리하고 탐색하는 도구.
Python interpreter: 코드 실행을 통해 논리적 추론 및 계산을 수행.

HuggingFace의 Code Agent가 까다로운 GAIA 벤치마크에서 1위를 기록했으며, 관련 기능이 smolagents 라이브러리로 독립되었다.

HuggingFace의 Code Agent가 매우 까다로운 에이전트 벤치마크인 GAIA에서 최상위 성능을 기록했다. GAIA는 단순한 질의응답을 넘어 멀티모달 능력, 복잡한 계획 수립, 도구 사용 능력을 종합적으로 평가하는 벤치마크다.

이번 성과와 함께 기존 transformers.agents 프레임워크는 독립된 라이브러리인 smolagents로 업그레이드되었다. smolagents는 기존 API와 매우 유사하여 사용자가 쉽게 전환할 수 있도록 설계되었다.

에이전트는 복잡한 문제를 해결하기 위해 다음과 같은 핵심 도구를 활용한다:

GAIA의 문제는 이미지 분석, 웹 검색, 단계별 추론이 결합된 고난도 형태를 띠며, 에이전트는 이를 해결하기 위해 고도의 계획 능력과 실행력을 보여주었다.