Hugging Face, 확률 기반 Decision Models 출시

Decision Models in Hugging Face

·2026.11.10 09:00

핵심 내용

Hugging Face가 확률 기반 Decision Models를 출시했다.

1 / 2

자세히 보기

  • Hugging Face가 Decision Models를 출시함. 텍스트 생성 대신 사전 정의된 답변에 대한 확률 분포를 반환하여 LLM 프롬프팅 시 발생하는 JSON 스키마 준수 문제와 계산 오버헤드를 회피함.
  • 인터페이스는 세 가지 질문 프리미티브를 정의함. Choice(옵션에 대한 확률 분포), Score(순서 있는 스케일에서의 기대값), Noul(이분법적 예/아니오 결과에 대한 베르누이 확률)임.
  • transformers와 llama.cpp 모두 통합된 /v1/systemone 엔드포인트를 지원함. 이를 통해 autotrust/GEV-26B-Decide와 ggml-org/Kev-4B-GGUF와 같은 모델이 모델별 적응 없이 의사결정을 제공할 수 있음.
  • Trainer API를 통한 학습을 지원함. 예컨대 choice 질문은 옵션에 대한 단순 교차 엔트로피 손실로 학습되며, Hub는 다양한 아키텍처 간 탐색을 위해 decision-model 태그를 사용함.

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.