Lemonade에 vLLM ROCm 추가
vLLM ROCm has been added to Lemonade as an experimental backend
·2026.05.09 03:21
Lemonade에 vLLM ROCm 실험용 백엔드가 추가됐다.
Lemonade가 vLLM ROCm을 실험용 백엔드로 추가했다.
.safetensors 기반 LLM을 GGUF 변환 전 그대로 다루는 새 엔진을 제공하며, 설치와 실행은 다음 명령으로 가능하다.
lemonade backends install vllm:rocmlemonade run Qwen3.5-0.8B-vLLM
현재는 핵심 기능만 구현된 실험용 백엔드라서, 알려진 거친 부분이 남아 있다. 빠른 시작 가이드와 GitHub 저장소도 함께 공개됐다.
이 요약은 원문 이해를 돕기 위한 큐레이션입니다. 저작권은 원저작자에게 있으며, 정확한 내용과 맥락은 원문을 확인하세요.
요약 오류, 출처 표기 문제, 삭제 요청은 문의 · 건의로 알려주세요.