Airflow를 활용한 펀드 배치 시스템 구축 사례

카카오뱅크는 2024년 1월, 클라우드 네이티브 기술을 적용한 혁신적인 펀드 시스템을 퍼블릭 클라우드에 성공적으로 런칭했다. K8s, Managed Database, 분산 스토리지 등을 활용하여 설계되었으며, 금융당국으로부터 1등급 전자 금융 시스템으로 인정받았다.

기존 온프레미스 기반의 배치 시스템은 클라우드 환경을 지원하지 않는 제약이 있었다. 이에 카카오뱅크는 금융 도메인의 특수성인 감사(Auditing), 접근 제어, 고가용성, 데이터 정합성 등의 필수 요구사항을 충족하기 위해 Airflow를 도입했다.

Airflow는 복잡한 워크플로우를 코드로 정의할 수 있고, ETL 수행 및 실시간 모니터링이 용이하며, 다양한 클라우드 인프라와 매끄러운 연동이 가능하다는 장점이 있다. 이를 통해 카카오뱅크는 금융 규제를 준수하면서도 효율적인 데이터 파이프라인을 구축할 수 있었다.