온라인 포인트 쿼리를 위한 데이터 레이크 인덱싱

Spotify와 같은 기업은 온라인 서비스를 위해 방대한 양의 데이터를 저지연(low latency)으로 접근할 수 있는 환경이 필요하다. 이를 위해 기존의 데이터 레이크 구조를 활용하면서도 온라인 포인트 쿼리(Point Queries)를 효율적으로 처리할 수 있는 인덱싱 전략이 요구된다.

데이터 레이크는 대규모 데이터 저장에는 유리하지만, 특정 레코드를 빠르게 찾아야 하는 온라인 서비스의 요구사항을 충족하기에는 한계가 있다. 이를 해결하기 위해 데이터 레이크에 인덱싱 계층을 추가하여 데이터 접근 성능을 최적화하는 방식을 도입한다.