AI Briefing#storage
#storage와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#storage와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
OpenAI가 ChatGPT의 10억 사용자 트래픽을 처리하는 스토리지 플랫폼 Habitat을 Rust로 재작성해 성능을 대폭 개선했다.
Vercel이 Sandbox 스냅샷 저장소 비용을 월간 평균에서 일일 평균 사용량 기준으로 변경해 정산한다.
Vercel Sandbox가 샌드박스 수명 주기와 독립적으로 작동하는 지속성 스토리지인 Drive 기능을 프라이빗 베타로 출시했다.
Hugging Face가 대규모 AI 워크로드 대응을 위해 Hub 저장소 백엔드를 Git LFS에서 Xet으로 전환했다.
Hugging Face가 바이트 단위 중복 제거를 지원하는 Xet 스토리지를 도입해 대규모 파일 전송 효율을 높였다.
Hugging Face가 대용량 모델과 데이터셋의 효율적인 전송을 위해 CAS 기반의 새로운 업로드/다운로드 아키텍처를 도입한다.
쓰기 증폭 최소화 및 내부 병렬 처리 활용을 위한 SSD 개발 및 시스템 최적화 팁 29가지 요약
작은 랜덤 쓰기는 내부 프레그멘테이션을 유발해 성능을 저하시키므로, Clustered block 크기에 맞춘 대량 쓰기가 권장된다.
SLC, MLC, TLC의 수명과 레이턴시 차이를 분석하고, 지속적 랜덤 쓰기를 통한 'Pre-conditioning'의 중요성을 강조한다.
Key-Value 스토어 개발 경험을 바탕으로 SSD 내부 구조와 최적 접근 패턴을 담은 30페이지 분량의 가이드다.