Hugging Face와 KerasHub 통합: Transformers 모델 지원

Hugging Face Hub에 저장된 30만 개 이상의 Transformers 라이브러리 기반 모델을 이제 KerasHub에서 직접 불러와 사용할 수 있다.

기존 KerasHub 사용자는 Keras 전용 모델로 사용이 제한되었으나, 이번 통합을 통해 Gemma (1, 2), Llama 3, PaliGemma 등 주요 모델을 즉시 활용할 수 있게 되었다.

주요 특징 및 이점은 다음과 같다.

• 프레임워크 유연성: KerasHub의 백엔드 지원을 통해 Transformers 모델을 TensorFlow, JAX, PyTorch 중 원하는 환경에서 즉시 구동하거나, TFLite 등으로 변환하여 배포할 수 있다.
• 자동 변환: 설정 파일, 가중치(safetensors), 토크나이저를 내부적으로 매핑하여 사용자가 별도의 변환 과정 없이 모델을 사용할 수 있도록 지원한다.
• 사용 방법: keras-hub와 keras 라이브러리를 최신 버전으로 업데이트하면 from_preset 메서드를 통해 간단히 로드할 수 있다.