Anthropic, 비코딩 에이전트 실패 원인

Anthropic이 수백만 건의 실제 인간-에이전트 도구 호출(tool calls)을 분석한 결과, 플랫폼 내 에이전트 활동의 약 50%가 소프트웨어 엔지니어링에 집중되어 있음이 밝혀졌다. 반면 영업, 마케팅, 금융, 법률 등 비코딩 분야는 한 자릿수 점유율에 머물고 있다.

비코딩 환경에서 에이전트가 실패하는 핵심 이유는 모델의 추론 능력 부족이 아니라, 데이터의 비정형성에 있다.

• 코딩 에이전트의 강점: Git 저장소와 같은 구조화된 환경, 엄격한 구문 규칙, 결정론적인 터미널 환경, 그리고 오류 발생 시 명확한 컴파일러 메시지를 제공받는다.
• 비코딩 에이전트의 약점: 경쟁사 가격 변동, 형식이 맞지 않는 데이터, 그리고 컨텍스트 윈도우를 가득 채우는 무수한 HTML 태그와 트래킹 스크립트 같은 비정형 웹 데이터가 모델의 성능을 저하시키고 환각을 유발한다.

결국 성공적인 비코딩 에이전트 구축을 위해서는 모델 자체보다 데이터 전처리, 신뢰할 수 있는 스크래핑, 깨끗한 입력값 관리와 같은 인프라 작업이 핵심이다.