AI는 투자 설명서(Investor Deck)를 읽지 못한다

최신 AI 모델들이 벤치마크에서는 높은 성능을 보이지만, 차트와 그래프가 포함된 실제 금융 문서를 다룰 때는 심각한 성능 저하를 보인다.

GPT-5.4, Gemini 3.1 Pro, Claude Opus 4.6를 대상으로 수익 보고서, 투자 설명서, 규제 수수료표 등 실무 금융 문서를 활용한 25개 태스크를 테스트했다. 실험은 정보를 텍스트로만 제공하는 방식과 이미지(멀티모달)로 제공하는 방식 두 가지로 나누어 진행되었다.

실험 결과, 모델들은 텍스트 기반 데이터에서는 72~80%의 높은 정확도를 보였으나, 이미지 기반 데이터에서는 56~64%로 정확도가 급격히 떨어졌다. 모델별로 이미지 제공 시 정확도가 약 16~20%p 하락하는 일관된 성능 저하가 관찰되었다.

주요 실패 유형은 다음과 같다:

• 밀집된 시각적 문서에서 수치를 잘못 읽는 경우
• 입력값은 정확하더라도 잘못된 금융 연산을 적용하는 경우

이는 최신 프론티어 모델들에게도 시각적 정보 추출(Visual Extraction)이 여전히 핵심적인 병목 구간임을 보여준다.