動察 Beating AI 速報、テンセントはHy4プレビューの実エンジニアリングブラインドテスト結果も特別に公開した。163名のテンセント内部専門家が203のエンジニアリングタスクで異なるモデルをテストし、Hy4は最終的に平均2.99/4を獲得し、GLM-5.3の2.92/4とKimi K3の2.94/4を上回った。
具体的には、Hy4のGLM-5.3に対する勝率は46.8%、引き分け12.8%、敗率40.4%;Kimi K3に対する勝率は51.2%、引き分け7.9%、敗率40.9%だった。これらの問題はテンセント内部の実エンジニアリングタスクに由来し、従来の固定ベンチマークではない。
ただし、Hy4は公開ベンチマークで全面的にリードしているわけではない。テンセントが公開した評価結果によると、GLM-5.3やKimi K3などのモデルと互いに勝敗があり、DeepSWE、CyberGymなどのコードおよびサイバーセキュリティテストでは依然としてGLM-5.3に遅れを取っている。
価格はHy4の最も明らかな強みだ。100万トークンあたりの入力が6元、出力が18元で、それぞれGLM-5.3より25%と約36%安い;Kimi K3と比較すると、さらに70%と82%安い。キャッシュヒットはわずか0.3元で、GLM-5.3とKimi K3の2元より85%安い。