AI Briefing#stream-processing
#stream-processing와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#stream-processing와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Netflix가 Flink 도입으로 라이브 광고 이벤트 파이프라인의 단일 장애점을 제거하고 초당 수십만 건을 처리한다.
Pinterest이 Iceberg 스냅샷 요약을 활용해 다운스트림의 안전한 데이터 소비를 돕는 파티션 최종화 메커니즘을 도입했다.
Netflix가 자체 개발한 오토스케일러의 한계를 극복하기 위해 Apache Flink 커뮤니티의 오픈소스 솔루션으로 전환하고 있다.
Apache Flink와 RocksDB 튜닝으로 광고 노출 집계를 1분~7일까지 실시간화했다.
처리 시간과 처리 외 시간을 분리해 Flink latency 병목을 좁히는 방법.
카카오가 Flink CDC를 활용해 DB 부하를 줄이고 실시간 데이터 일관성을 확보한 프로덕션 구현 사례를 공개했다.
광고추천팀의 실시간 데이터 처리 경험을 바탕으로 Exactly-Once 등 신뢰성 옵션 적용 사례를 소개했다.