전국 3,500대 POS 실시간 모니터링 구축기

올리브영은 전국 1,370개 매장에 설치된 **3,500여 대의 POS 및 셀프계산대(SCO)**를 효율적으로 관리하기 위해 Datadog을 도입했습니다. 기존에는 매장의 제보가 있어야 장애를 인지할 수 있어 대응이 늦어지는 한계가 있었습니다.

네트워크가 불안정한 오프라인 매장 환경을 고려하여, 폐쇄망과 Public 망 사이를 잇는 프록시 서버를 구축하는 네트워크 아키텍처를 설계했습니다. 또한, 로그 포맷을 JSON 기반으로 표준화하고 사용자 이벤트와 오류 로그 중심으로 수집 대상을 선별하여 리소스 효율을 높였습니다.

설치 과정에서는 POS 원격 관리 솔루션을 활용해 스크립트로 자동 배포를 구현했으며, 네트워크 부하를 방지하기 위해 새벽 시간대에 점진적으로 확산했습니다. 그 결과, 장애 탐지 시간을 4분 30초에서 59초로 76% 단축하며 사후 대응에서 예방 중심의 운영 패러다임으로 전환하는 성과를 거두었습니다.