Hugging Face Jobs를 활용한 GPU 기반 CI 구축

GitHub Actions의 기본 러너는 범용 CPU 위주이며 GPU 접근이 어렵다는 한계가 있습니다. 이를 해결하기 위해 Hugging Face Jobs를 GitHub CI의 백엔드로 활용하는 아키텍처를 제안합니다.

주요 특징 및 이점:

• 하드웨어 유연성: CPU뿐만 아니라 T4, A10G, H200 등 다양한 GPU 사양을 선택하여 테스트를 수행할 수 있습니다.
• 비용 및 효율성: 필요한 경우에만 서버리스 인프라를 사용하므로 상시 가동되는 러너를 유지할 필요가 없습니다.
• 성능 향상: 실제 사례(Trackio) 적용 결과, CPU 작업 시간은 약 30% 단축되었으며, 기존에 불가능했던 GPU 기반 테스트 스위트를 실행할 수 있게 되었습니다.

작동 원리: huggingface/jobs-actions 브릿지를 통해 GitHub Actions의 워크플로우를 Hugging Face의 일시적인(ephemeral) 셀프 호스팅 러너로 연결합니다. GitHub App이 웹훅을 감지하면 Hugging Face Space가 이를 처리하여 적절한 하드웨어 사양의 Job을 실행하는 구조입니다.