Vercel Sandbox에서 Harbor 평가 실행 가능
업데이트Vercel
이제 Vercel Sandbox에서 Harbor 평가를 실행할 수 있습니다. Harbor는 Terminal-Bench의 오픈 소스 하니스로, SWE-bench, tau3-bench, OSWorld와 같은 다양한 벤치마크를 포함하고 있습니다. --env vercel 플래그를 사용하여 Harbor를 실행하면 각 시험이 독립된 Firecracker microVM에서 실행되어 로컬 머신의 성능을 넘어서는 병렬 처리가 가능합니다. 네트워크 정책은 VM 외부의 샌드박스 방화벽에서 시행되며, 선택적으로 자격 증명을 주입하여 아웃바운드 요청에 비밀을 첨부할 수 있습니다.
영향 작음·대상 Vercel 사용자 · 인프라·배포
왜 중요한가
이 기능은 개발자들이 Vercel 환경에서 보다 효율적으로 벤치마크를 수행할 수 있도록 도와줍니다. 특히, 여러 모델을 동시에 평가할 수 있는 능력은 성능 테스트와 최적화 작업에 큰 도움이 됩니다. 기존의 로컬 환경에서의 한계를 극복할 수 있어, 더 많은 데이터를 수집하고 분석할 수 있는 기회를 제공합니다.
지금 해볼 것
- Harbor 0.22.0 이상 버전이 설치되어 있는지 확인
- Vercel Sandbox에서의 설정 및 구성 방법을 검토
- AI Gateway와의 통합을 위한 API 키 설정 확인
- 각 모델에 대한 벤치마크 실행 방법을 숙지
뎁스노트의 제안
이 기능은 특히 성능 테스트를 자주 수행하는 팀에 유용할 것입니다. 초기에는 베타 테스트를 통해 안정성을 확인한 후, 본격적으로 활용하는 것이 좋습니다. 다양한 모델을 비교하고 평가하는 데 큰 도움이 될 수 있으므로, 팀 내에서 벤치마크 작업을 담당하는 개발자에게 적극적으로 권장합니다.
출처 · Vercel 공식 업데이트 · 2026.09.17
공식 원문 보기Vercel를 사용하시나요?
중요한 변경만 받아보세요.