AI Briefing#kafka
#kafka와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#kafka와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
SSE 도입으로 폴링 부하를 줄이고, zero-payload 설계로 유실과 순서 문제를 해결했다.
MSK Express Kafka 트랜잭션 병목이 코디네이터임을 확인하고 최적화 순서를 제시했다.
Netflix가 Flink 도입으로 라이브 광고 이벤트 파이프라인의 단일 장애점을 제거하고 초당 수십만 건을 처리한다.
올리브영이 배송 준비 중 주문 취소를 가능하게 해 고객센터 문의를 평시 90% 줄였다.
올리브영이 저트래픽 SMS 시스템에 CDC와 Kafka를 도입한 과도기 아키텍처의 필요성과 설계 철학을 공유했다.
올리브영이 물류 작업 할당 시점 대신 집품 완료 시점을 취소 마감으로 변경해 고객 편의성을 높였다.
kt cloud가 분산된 운영 데이터를 통합하는 레이크하우스 플랫폼 Deck을 구축했다.
Kafka 메시지 처리 실패에 대비한 Retry·DLT 설계와 운영 함정 3가지를 다룬다.
올리브영은 옴니채널 확장 과정에서 발생한 재고 데이터 처리 지연과 비효율을 해결하기 위해 이벤트 기반 아키텍처(EDA)로 파이프라인을 재설계했다.
상품·쿠폰·증정·프로모션 혜택 데이터를 Kafka로 묶어 최대 45분 지연을 수초로 줄였다.
Apache Flink와 RocksDB 튜닝으로 광고 노출 집계를 1분~7일까지 실시간화했다.
Netflix는 Cassandra-Kafka-Elasticsearch 파이프라인으로 실시간 멀티모달 영상 검색을 구현했다.
NotiHub는 Kafka·Redis·HPA로 대규모 알림을 안정적으로 중앙화했다.
개인 웹훅과 흩어진 알림 정책을 모아, 조직이 통제하는 NotiHub로 바꿨다.
흩어진 로그를 하나의 요청 흐름으로 묶어, 노출 이슈의 원인을 빠르게 찾는 내부 디버깅 도구 영원희를 만든 이야기다.
당근은 LLM 기반 Taxonomy Management System으로 카테고리와 속성을 대규모 자동 분류했다.
Spring 트랜잭션 동기화와 Kafka로 알림톡 발송을 분리해 정합성과 확장성을 높였다.
OpenTelemetry와 ClickHouse로 로그 지연을 20초 이내로 줄이고 비용을 85.6% 절감했다.
Pinterest가 데이터 지연을 줄이고 비용을 절감하기 위해 CDC 기반의 통합 DB 인제스션 프레임워크를 구축했다.