復旦大学の邱錫鵬（きゅう・しゃくほう）チームが10億超を調達し、《Her》型のAIアシスタントを開発へ

動察 Beating AI 速報、復旦大学教授の邱錫鵬氏が設立した模思智能は、10億元超のPre-Aラウンド資金調達を完了したと発表した。華控基金がリードインベスターを務め、国開科創、上海科創基金などが参加した。同社は2024年末に設立され、邱錫鵬氏の教え子である李世民氏がCEOを務める。今回の資金は、全モーダルリアルタイムインタラクション技術の研究開発およびグローバルな商業化に充てられる。

模思は、AIが人の話を聞き取ると同時に、人の感情や周囲の環境を理解できるようにしたいと考えている。例えば、車内で「少し寒い」と言った場合、AIは車内温度、話し手、過去の好みを組み合わせて、エアコンを調整すべきか判断する必要がある。また、いつ応答すべきか、いつ沈黙を保つべきかも知る必要がある。

技術面では、チームはすでにMOSS-AudioやMOSS-VL-Realtimeなどのモデルをオープンソース化している。前者は音声中の感情を分析し、異なる話し手や環境音を識別できる。後者は継続的に動画を視聴し、見ながら回答し、映像の変化に応じて回答を修正することができる。

現在、模思は音声、視覚、記憶、ツール呼び出し能力をMOSS Liveリアルタイムインタラクションシステムに統合し、スマートコックピットやAIハードウェアなどのシーンに向けて展開している。同社はすでに一部の企業顧客への納品を開始したと述べており、長期的な目標は映画『Her』のようなAIアシスタントを創り出し、AIがユーザーの置かれた環境を継続的に理解できるようにすることである。