AI BriefingLlamaIndex, ParseBench-2 공개... LlamaParse Agentic Plus 1위
·2026.11.12 09:00
핵심 내용
ParseBench-2가 41개 파서를 평가해 LlamaParse Agentic Plus가 1위를 차지했다
자세히 보기
- LlamaIndex가 ParseBench-2를 출시함. 문서 파싱 벤치마크로, 오류의 심각도에 가중치를 부여하는 스코어링을 도입하여 결정론적 지표가 인간의 오류 영향 판단과 일치하도록 설계함.
- 데이터셋이 2.1k에서 4.3k 건으로 확장됨. 서식을 여섯 번째 평가 차원으로 추가하고, 1,025개 차트(총 36,958개 값)의 모든 값을 검증함.
- LlamaParse Agentic Plus가 89.8점으로 가장 높은 종합 점수를 기록함. 최상위 직접 비전 모델(Claude Opus 5.5, 85.7점)과 경쟁 문서 파서 중 최강인 Reducto(83.9점)를 능가함.
- 차트 영역에서 가장 큰 성능 격차가 관찰됨. 점수는 1.2점에서 92.6점까지 분포함. 프론티어 모델의 시각적 그라운딩은 여전히 과제로, 중앙값 점수가 64.5점으로 전문 파서의 83.8점에 미치지 못함.
- OCRia-1.5 모델이 LlamaParse의 Cost Effective, Agentic, Agentic Plus 모드를 구동함. Agentic Plus는 페이지당 $0.0281의 비용으로 88.4%의 정확도를 달성함. 이는 최강 직접 비전 모델보다 약 57% 낮은 비용임.
- 벤치마크는 오픈소스로, 데이터셋, 평가 코드, 연구 논문이 Hugging Face와 GitHub에서 제공됨.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.