PineはAI専用のコンピュータを作った：ベンチマークスコアはトップだが、実作業ではCodexやClaude Codeに負ける

動察 Beating AI 速報、Pine AI が AI Agent 専用に設計されたクラウドコンピュータ Pine Computer を発表。クラウド仮想マシン、AI モデル、操作ツールを統合している。開発者が API を通じてタスクを指示すると、AI がクラウド上でブラウザ、ソフトウェア、ファイルを操作でき、ユーザー自身のコンピュータを使う必要がない。

Pine の核心的な改善点は、コンピュータが AI に何が変化したかを主体的に伝えるようにしたことだ。従来の視覚型 Agent は通常、クリック後の結果を判断するために繰り返しスクリーンショットを撮る必要があった。Pine はブラウザと OS がタスクを実行する AI モデルに直接変化をフィードバックし、繰り返しのスクリーンショットやページ確認の回数を減らす。

Pine は、内部テストにおいて、新方式のタスク実行速度が従来方式の 2 ～ 5 倍に達したと主張している。SaaS-Bench v1.1 テストでは、Pine のチェックポイントスコアは 78.3% に達し、Claude Code の 74.3% と Codex の 71.1% を上回った。このスコアはタスク実行過程でどれだけのチェック要件を完了したかを測るものであり、タスク全体の成功率ではない。

しかし X コミュニティノートは、Pine の完全なタスク完了率はわずか 27.4% であり、むしろ Claude Code の 31.1% と Codex の 29.2% を下回っていると指摘した。Pine のモデル費用は確かに低く、タスクあたり平均約 1.02 ドルであるのに対し、Codex と Claude Code はそれぞれ 20.50 ドルと 26.50 ドルだった。ただし、これらの費用にはクラウドサーバーコストは含まれておらず、各方案が使用するモデルと実行予算も異なる。

現在、Pine Computer はまだ招待制のクローズドベータ段階にある。