Google, 오픈 LLM 'Gemma' 공개

Google이 Gemini 모델을 기반으로 한 새로운 오픈 LLM 제품군인 Gemma를 출시했다.

모델은 2B와 7B 파라미터의 두 가지 크기로 제공되며, 각각 Base 모델과 Instruction-tuned 모델로 구성된다. 모든 모델은 8K 컨텍스트 길이를 지원하며, 소비자용 GPU 및 TPU에서 효율적으로 구동 가능하다.

주요 특징 및 업데이트 사항은 다음과 같다:

• 성능: Gemma 7B는 Mistral 7B 등 기존 7B급 오픈 모델들과 대등한 성능을 보이며, Gemma 2B는 온디바이스 및 CPU 환경에 최적화되어 있다.
• 버전 업데이트: 출시 한 달 후, 코딩 능력, 사실성, 지시 이행 및 멀티턴 품질이 개선된 Gemma 1.1 버전이 추가로 공개되었다.
• 생태계 지원: Hugging Face를 통해 모델 카드, Google Cloud 통합, Inference Endpoints 지원, 🤗 TRL을 이용한 파인튜닝 예시 등을 제공한다.