HuggingFace, Transformers를 AI 모델 정의의 표준으로 추진

HuggingFace는 Transformers 라이브러리가 단순한 모델 저장소를 넘어, AI 생태계의 핵심 피벗(Pivot) 역할을 수행할 것이라고 발표했습니다. 모델 아키텍처가 Transformers에 지원되면, 이를 기반으로 하는 다양한 프레임워크와 엔진에서 즉시 사용 가능하도록 표준화하는 것이 목표입니다.

주요 전략은 다음과 같습니다:

• 생태계 통합: vLLM, SGLang, TGI와 같은 추론 엔진과 Axolotl, Unsloth, DeepSpeed 등 학습 프레임워크가 Transformers를 백엔드로 활용하여 상호운용성을 극대화합니다.
• 로컬 실행 최적화: llama.cpp(GGUF 지원) 및 MLX와의 긴밀한 협업을 통해 모델 학습부터 로컬 배포까지의 과정을 간소화합니다.
• 기여 장벽 완화: 모델 정의 코드를 단순화하고, 모듈화된 설계를 통해 새로운 모델이 추가될 때 필요한 코드 변경을 최소화할 계획입니다.

이를 통해 모델 사용자에게는 도구 간의 높은 상호운용성을, 모델 제작자에게는 단 한 번의 기여로 전체 생태계에 모델을 배포할 수 있는 환경을 제공하고자 합니다.