llama.cpp, 샌드박스 도구 실행 지원
fantastic: latest llama.cpp server webui can now run commands for tools into rootless sandboxed containers
·2026.08.14 21:51
핵심 내용
llama.cpp 서버가 Podman이나 Docker를 활용해 샌드박스 컨테이너 내에서 도구를 실행하는 기능을 지원합니다.
자세히 보기
llama.cpp 서버(빌드 10423)에 도구 실행을 위한 새로운 실험적 옵션인 --tools-runtime이 추가되었습니다.
이 기능을 통해 --tools 옵션이 활성화된 상태에서, LLM이 생성한 쉘 명령을 호스트 시스템이 아닌 루트리스(rootless) 샌드박스 컨테이너 내에서 안전하게 실행할 수 있습니다.
주요 특징:
- 지원 환경: Podman 또는 Docker가 호스트에 설치되어 있어야 합니다.
- 사용 방법:
--tools-runtime인자에podman:alpine또는docker:alpine과 같이 컨테이너 이미지를 지정합니다. - 작동 방식: 서버가 지정된 이미지를 자동으로 다운로드하고 인스턴스를 생성하여 격리된 환경을 제공합니다.
이 업데이트는 LLM 에이전트가 외부 도구를 사용하는 과정에서 발생할 수 있는 보안 위협을 방지하기 위해 격리된 런타임을 제공하는 데 목적이 있습니다.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.