AI Briefing#kafka
#kafka와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#kafka와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
올리브영은 기존 ODI 기반 배치 시스템의 데이터 지연 문제를 해결하기 위해 OGG와 Kafka를 활용한 하이브리드 CDC 아키텍처를 구축했다.
CloudWatch와 Redis Stream으로 DynamoDB 부하를 감지해 Kafka 소비를 pause/resume했다.
롯데ON은 S3 Object Lambda와 CloudFront로 실시간 이미지 처리 서비스를 내재화했다.
올리브영이 SpringCamp 2025에 골드 후원사로 참여하여 물류 시스템 개선 사례를 발표하고 개발자들과 소통했다.
올리브영이 외부 솔루션 없이 Kafka 기반의 독자적인 글로벌 물류 시스템(GMS)을 구축하며 겪은 기술적 도전과 해결 과정을 다룬다.
Spring Batch 동기 호출을 코루틴 비동기로 바꿔 15개 API 병목을 줄였다.
올리브영은 기존 동기식 발주 시스템의 성능 저하 문제를 해결하기 위해 Kafka 기반의 비동기 요청-응답 아키텍처를 도입했다.
Flink KeyedProcessFunction으로 실시간 이벤트 조합과 무중단 배포를 구현했다.
쿠폰·상품 변경을 실시간 반영해 적용 가능 상품을 Elasticsearch에 인덱싱했다.
서버 로그 Iceberg APPEND 적재 테스트에서 zstd 레벨 9 적용 시 ORC 대비 파일 크기가 51.4% 감소했다.
AOP, MDC, Kafka Interceptor로 인터페이스 이력과 호출 스택을 추적한다.
S3+GCS 배치 파이프라인을 MSK·Protobuf 기반 준실시간 구조로 바꿨다.
카카오페이 정보플랫폼팀이 데이터 조합 및 파이프라인 처리를 위해 Spring Cloud Stream을 도입한 사례와 이점을 공유한다.
카카오페이가 RabbitMQ 기반 지연이체 서비스를 Kafka로 재설계하여 처리 속도를 8배 개선했다.
컬리 주문플랫폼개발 팀이 Spring Kafka의 ConsumerSeekAware와 Redis Pub/Sub을 결합해 컨슈머 그룹 중단 없이 오프셋을 이동하는 방식을 적용했다.
Debezium MSK Connect 운영 중 장애 발생 시 Offset 활용 및 신규 Connector 생성을 통한 데이터 정합성 유지 방법을 공유한다.
컬리가 SaaS 기반 배송 시스템을 자체 개발 시스템으로 전면 교체하며 장애 0건으로 전환을 완료했다.
SK플래닛이 기존 배치 처리의 지연 문제를 해결하기 위해 Kafka와 Spark Streaming을 결합한 실시간 데이터 파이프라인 서비스 'Router'를 개발했다.