동차 Beating 모니터링에 따르면, AI 트레이닝 플랫폼 Prime Intellect가 verifiers 0.2.0을 출시하고, 차세대 Verifiers v1의 아키텍처 프리뷰를 공개했습니다. Verifiers는 AI Agent에 문제를 출제하고 실행하며 점수를 매기는 오픈소스 프레임워크로, 능력 평가 및 강화 학습 훈련에 사용됩니다.
Prime Intellect는 또한 모델 훈련 프레임워크인 prime-rl을 오픈소스로 공개했습니다. 간단히 말해, Verifiers는 작업, 도구 및 점수 규칙을 정의하고, prime-rl은 작업 결과에 따라 모델을 훈련합니다. 개발자는 이 두 가지 도구를 직접 다운로드하여 배포할 수 있습니다.
Prime Intellect는 Environments Hub와 Lab을 동시에 운영합니다. 전자는 기성 훈련 환경을 공유 및 다운로드하는 데 사용되고, 후자는托管 훈련 서비스를 제공합니다. 개발자는 전체 도구 세트를 직접 배포하거나 Prime Intellect의 환경 및 컴퓨팅 플랫폼을 바로 사용할 수 있습니다.
구버전 Verifiers는 작업과 Agent의 실행 방식을 함께 묶었습니다. v1에서는 이를 세 가지로 분리했습니다: Taskset은 수행할 작업, 제공할 도구, 점수 평가 방법을 규정하고; Harness는 Agent가 작업을 완료하는 방식을 결정하며; Runtime은 작업이 로컬, Docker 또는 원격 샌드박스에서 실행될지를 결정합니다.
따라서 동일한 작업 세트를 Codex, Kimi Code, Terminus 2 등의 Agent로 교체하여 사용할 수 있으며, 로컬, Docker 또는 원격 샌드박스에서 실행할 수도 있습니다. 개발자는 Agent나 실행 환경을 바꿀 때마다 작업 및 점수 규칙을 다시 작성할 필요가 없습니다.
v1은 또한 하위 Agent 호출, 컨텍스트 압축 등의 분기 과정을 기록하고, 훈련에 필요한 Token ID 및 로그 확률을 저장할 수 있습니다. 새 버전은 수백 라운드에 걸친 장기 작업에 더 적합하며, Agent의 실행 궤적을 강화 학습에 직접 사용할 수 있습니다. 향후 1.0.0 버전에서는 다중 Agent 환경을 추가하고, OpenEnv, NeMo Gym 및 OpenReward 등의 환경 프레임워크에 대한 지원을 완성할 계획입니다.