오픈소스 AI 에이전트용 데이터 커넥터 SurfSense 공개

AI 에이전트가 실시간 웹 데이터를 구조화된 형태로 수집할 수 있게 돕는 오픈소스 플랫폼 SurfSense가 공개되었다.

SurfSense는 AI 에이전트가 Reddit, YouTube, Instagram, Amazon 등 다양한 웹 플랫폼의 데이터를 실시간으로 가져올 수 있도록 지원하는 오픈소스 리서치 플랫폼이다.

기존의 스크래핑 방식이나 고비용의 API 호출 대신, 각 플랫폼에 최적화된 전용 엔드포인트를 제공하여 데이터를 구조화된 JSON 형태로 반환한다. 주요 특징은 다음과 같다:

다양한 데이터 소스: Reddit, YouTube, Instagram, TikTok, Amazon, Google Maps, Google Search 등 광범위한 커넥터 지원
에이전트 친화적 인터페이스: REST API뿐만 아니라 MCP(Model Context Protocol) 서버를 지원하여 Claude, Cursor 등에서 즉시 도구로 호출 가능
유연한 배포 모델: 종량제 API 방식과 함께, 사용자가 직접 인프라에 설치하여 사용할 수 있는 자체 호스팅(Self-hosting) 옵션을 무료로 제공
구조화된 출력: 게시물, 댓글, 자막, 리뷰 등을 정돈된 형태로 제공하여 에이전트가 별도의 파싱 로직 없이 바로 활용 가능하게 설계되었다.