Hugging Face, 데이터셋 분석용 DMT 공개

Hugging Face가 데이터셋의 품질을 측정하고 비교할 수 있는 오픈소스 도구인 **Data Measurements Tool(DMT)**을 출시했습니다.

이 도구는 오픈소스 Python 라이브러리와 노코드(no-code) 인터페이스를 함께 제공하며, Hugging Face의 Datasets 및 Spaces 허브와 Streamlit을 활용합니다. 데이터셋 제작자와 사용자가 데이터의 특성을 시각화하고, 책임감 있는 데이터 개발을 위한 핵심 메트릭을 자동으로 계산할 수 있도록 설계되었습니다.

주요 특징은 다음과 같습니다:

• 데이터셋 분석 및 비교: 데이터셋의 다양한 측면을 인터랙티브하게 탐색하고 비교할 수 있습니다.
• 책임감 있는 데이터 개발: 데이터 편향성이나 문제 있는 콘텐츠를 식별할 수 있는 지표를 제공하여 데이터 큐레이션을 돕습니다.
• 접근성 향상: 복잡한 코딩 기술 없이도 다양한 분야의 전문가들이 데이터셋을 조사하고 질문할 수 있는 환경을 제공합니다.