OpenAI를 활용해 수백만 명에게 맥락 기반 채용 매칭 제공

세계 최대 채용 사이트인 Indeed는 구직자와 고용주를 연결하는 과정에서 AI를 활용해 왔으며, 최근 OpenAI의 GPT 모델을 도입해 채용 매칭의 '설명 가능성(Explainability)'을 강화했다. 기존 모델은 매칭 결과만 제공했으나, 새로운 시스템은 구직자의 배경과 경력이 왜 해당 직무에 적합한지 자연어로 상세히 설명한다.

초기에는 Chat Completions API와 few-shot prompting을 사용했으나, 대규모 서비스 운영 시 발생하는 높은 token 소비 문제를 해결하기 위해 fine-tuning을 진행했다. 이를 통해 성능은 유지하면서도 token 사용량을 60% 절감한 소형 GPT 모델을 구축했다.

최적화 과정에서는 다음과 같은 기술적 단계를 거쳤다:

• GPT-4를 활용한 데이터 증강(Data Augmentation)
• 구체적인 콘텐츠 가이드라인 수립
• LLM 출력물 라벨링 및 자동 평가를 위한 ground truth 생성

Indeed는 2024년 1월부터 dedicated instances를 도입하여 개인화된 추천 기능을 확장했으며, 현재 하루 약 2,000만 건의 메시지를 처리하며 매칭 효율을 높이고 있다.