동차 Beating AI 속보, AI 데이터 기업 Idler가 900만 달러 시드 투자를 완료했으며, Paradigm이 주도하고 Y Combinator, Long Journey Ventures 등이 참여했습니다. 이 회사는 주로 주요 모델 기업을 위한 평가, 벤치마크 및 강화 학습 환경을 제작하여 AI가 실제 업무와 유사한 시나리오에서 반복적으로 작업을 수행하고 피드백을 받아 지속적으로 훈련할 수 있게 합니다.
Idler는 이전에 주로 코딩 분야에 집중했습니다. 지난 1년 동안 주요 AI 연구소를 위해 수천 개의 프로그래밍 평가 및 훈련 환경을 제작했습니다. YC의 공개 자료에 따르면, Idler는 이미 주요 기초 모델 연구소와 수백만 달러 규모의 계약을 체결했습니다.
이제 이 회사는 이 방법을 실제 기업 업무로 확장하기 시작했습니다. 첫 번째 공개 벤치마크인 ShelfLife는 운영 중인 소매 기업을 직접 '디지털 트윈'으로 구현했습니다. 공식 웹사이트는 현재 200개의 작업을 제공하며, 데이터는 이 기업의 최근 10년간 실제 운영 기록에서 비롯되었습니다. Claude Opus 5의 통과율이 69.0%로 가장 높았고, GPT-5.6 Sol은 55.7%를 기록했습니다.
Idler는 또한 ShelfLife 작업 중 41개를 사용하여 NVIDIA Nemotron 3 Nano를 후속 훈련시켜 Finance Agent Benchmark에서의 성적을 30.0%에서 41.8%로 향상시켰습니다.
소매 외에도 Idler는 기업 법무 등 실제 업무 환경 제작을 시작했으며, 목표는 모델 훈련을 '문제 풀이'에서 '실제 업무 수행'으로 계속 전환하는 것입니다.
