動察 Beatingのモニタリングによると、Ruby on Railsの作者であるDHH氏は、同じPythonからRustへの変換タスクを用いて複数のモデルをテストしました。DeepSeek Pro V4 Maxは最終的に完了し、約2.5時間、総トークンコストは23ドルでした。Grok 4.6は55ドル、約1.5時間かかり、GPT-5.6 Solは43ドルでした。DeepSeek V4 FlashとGPT-5.6 Lunaは完了できませんでした。
最初のラウンドはFableが主導し、DHH氏はコスト約550ドル、所要時間約45分と集計しました。これはTerminalTextEffectsをPythonからRustに書き換え、合計約1100万トークンを使用しました。起動時間は87msから2msに短縮され、レンダリング速度は9.6倍向上しました。
ただし、比較には前提があります。Fableが先に483行の実装計画を作成し、Codex xhighがレビューした後、他のモデルはすべてこの計画をそのまま踏襲しました。そのため、これはむしろ異なるモデルが同じ計画を実行する際のコストと効率を比較しているようなものです。
プロジェクトはすでにオープンソース化されています。リポジトリには354件の一貫性テストが含まれており、Rust版とPython版をフレームごと、バイトごとに比較します。最終成果物は約3.3MBの静的単一ファイルにコンパイルできます。