43k뷰 성장

한 달 만에 43k 조회수를 넘기며 피드백과 버그 리포트, 개선 제안을 대거 받았고, 그 결과 webclaw가 더 큰 방향으로 확장됐다.

webclaw는 Rust로 만든 빠른 오픈소스 콘텐츠 추출 도구로, URL을 넣으면 Markdown, JSON, plain text로 정리해 돌려준다. TLS impersonation으로 fingerprinting 블록을 우회하는 것도 특징이다.

개발 과정에서도 Claude Code를 적극 활용했다. 추출 파이프라인 스캐폴딩, QuickJS sandbox 통합, 테스트 스위트 생성에 크게 기여했고, 함께 제공되는 MCP server도 Claude용으로 따로 만들었다.

업데이트 내용은 다음과 같다.

• Official SDKs 출시: 기존 코드베이스에서 더 쉽게 연동 가능
• API private beta 시작: 대규모 스크래핑 인프라 처리를 위한 API 공개
• License를 AGPL 3.0으로 변경: 프로젝트의 오픈성을 지키기 위한 조치

핵심 도구는 계속 무료로 사용할 수 있고, 전체 코드는 GitHub에서 공개되어 있다.