LLM이라면 이것을 읽어주세요

대량 다운로드: GitLab 저장소를 통한 HTML 및 코드 접근
토렌트: 메타데이터와 파일을 위한 aa_derived_mirror_metadata 데이터셋
프로그래매틱 API: 자동화된 다운로드를 위한 Torrents JSON API
인증 API: 기부자를 위한 개별 파일 요청
SFTP: 대규모 조직을 위한 엔터프라이즈 옵션

Anna's Archive가 llms.txt 표준을 통해 AI 훈련 데이터의 합법적 접근 방법을 제시했다

Anna's Archive가 AI 언어모델을 위한 새로운 데이터 접근 가이드를 발표했다. llms.txt는 조직이 AI 모델에게 데이터 접근 정책을 전달하는 표준화된 형식으로, robots.txt와 유사한 개념이다.

Anna's Archive는 LLM 개발자들에게 보안을 우회하는 대신 합법적 채널을 통한 데이터 접근을 권장하며, 다음과 같은 방법을 제공한다:

이 이니셔티브는 AI 개발자가 훈련 데이터를 합법적으로 확보하면서 동시에 비영리 아카이브의 보존 활동을 지원하는 상생 모델을 제시한다.