クアルコム、IMSDK 2.0を発表：生成AIとマルチメディアを統合し、エッジAIアプリ開発を加速

動察 Beating AI 速報、Qualcomm は Qualcomm Intelligent Multimedia SDK（IMSDK）2.0 を発表し、Qualcomm Dragonwing および Linux エッジプラットフォーム向けの統合 AI とマルチメディア開発フレームワークを提供します。これにより、カメラ、音声・動画、センサー、AI 推論、クラウド接続などの機能統合が簡素化され、スマートカメラ、ロボット、ドローン、産業用 AI などの製品展開が加速されます。

IMSDK 2.0 には、Python および C++ の Pipeline API とアプリケーションビルダー、生成 AI 推論、コンテナ化されたマイクロサービス、AI プログラミングエージェントスキル、「ドキュメント・アズ・コード」などの新機能が追加されています。開発者は、QAIRT、ONNX Runtime、TFLite などの複数の推論ランタイムを通じて、マルチメディアパイプライン全体を再構築することなく AI モデルを切り替えることができます。

Qualcomm は、IMSDK 2.0 が GStreamer アーキテクチャに基づき、ハードウェアアクセラレーションプラグイン、ゼロコピーデータ転送、マルチストリーム・マルチモデルパイプライン機能を組み合わせ、ビジュアル AI、LLM/VLM、オーディオ AI、テキストから画像生成などのアプリケーションをサポートすると述べています。そのコンテナ化されたマイクロサービスは、推論、分析、プラットフォームサービスをカバーし、Kafka、MQTT、AWS IoT、Azure IoT などのエンタープライズ級接続もサポートします。

さらに、IMSDK 2.0 は AI プログラミングエージェントスキルを導入し、自然言語を通じて開発者がパイプライン設定、モデル統合、コンパイル、デバッグ、デプロイを支援します。Qualcomm によると、この SDK は Samsung、Amazon、Bose などの企業が関連製品の開発にすでに使用しています。