動察 Beating AI 速報、AIデータ企業のIdlerが900万ドルのシードラウンドを完了し、Paradigmがリードし、Y Combinator、Long Journey Venturesなどが参加した。主にトップモデル企業向けに評価、ベンチマーク、強化学習環境を制作し、AIが実際の業務に近いシナリオで繰り返しタスクを実行し、フィードバックを得て、さらにトレーニングを続けることを可能にする。
Idlerはこれまで主にCodingに注力してきた。過去1年間で、トップAIラボ向けに数千件のプログラミング評価とトレーニング環境を制作してきた。YCの公開資料によると、Idlerはすでにトップ基盤モデルラボと数百万ドル規模の契約を締結している。
現在、この手法を実際の企業業務に拡大し始めている。最初の公開ベンチマーク「ShelfLife」は、運営中の小売企業を直接「デジタルツイン」化したものだ。公式サイトでは現在200のタスクを提供しており、データはこの企業の過去10年間の実際の経営記録に基づいている。Claude Opus 5の合格率が最も高く69.0%、GPT-5.6 Solは55.7%となっている。
Idlerはまた、ShelfLifeのタスクのうち41件を使用してNVIDIA Nemotron 3 Nanoをポストトレーニングし、Finance Agent Benchmarkでのスコアを30.0%から41.8%に向上させた。
小売に加えて、Idlerは企業法務などの実際の業務環境の制作も開始しており、モデルトレーニングを「問題を解く」ことから「実際に働く」ことへとさらに推進することを目指している。