코딩 에이전트 환경 설계를 위한 Harness Engineering 가이드

코딩 에이전트의 성능 차이는 모델이나 프롬프트가 아닌, 에이전트를 둘러싼 **환경(Harness)**에서 결정된다. Harness Engineering은 모델과 에이전트를 블랙박스로 고정한 상태에서, 에이전트가 활용할 수 있는 컨텍스트, 도구, 그리고 주변 환경을 최적화하여 조직의 비기능적 요구사항(보안, 신뢰성, 유지보수성 등)을 충족시키는 실천을 의미한다.

핵심은 모델의 가중치에 담기지 않은 조직의 **사적 프로세스 데이터(빙산의 아랫부분)**를 에이전트에게 효과적으로 전달하는 것이다. 이를 위해 다음과 같은 12개 핵심 논제를 제시한다:

• 작업자 고정 및 환경 검증: 모델/에이전트를 고정하고 환경을 최적화함
• 사적 프로세스 데이터 활용: 조직의 고유한 절차와 데이터를 활용
• 업무 전체 소유: 분해부터 증명까지 하나의 흐름을 에이전트가 관리
• 컨텍스트 라우팅: 지식 저장소와 활성 작업 집합을 효율적으로 관리
• 도구 활용 능력: 도구의 발견부터 복구까지의 루프 완성
• 저장소를 통한 학습: 코드를 프롬프트 재료로 활용
• 자율성 및 권한: 명시된 권한 내에서 자율성 극대화
• 결과 증명 및 피드백: 실제 환경에서 결과를 검증하고 피드백을 인프라로 전환

이 방법론은 단순한 프롬프트 수정을 넘어, 에이전트가 조직의 로컬 온톨로지, 품질 기준, 예외 처리 이력 등을 이해하고 실행할 수 있도록 하는 검색 최적화 컨텍스트 번들(retrieval-optimized context bundle) 구축을 목표로 한다.