動察 Beating AI 快訊,高通發布 Qualcomm Intelligent Multimedia SDK(IMSDK)2.0,推出面向 Qualcomm Dragonwing 及 Linux 邊緣平台的統一 AI 與多媒體開發框架,旨在簡化攝影頭、音視頻、傳感器、AI 推論及雲端連接等功能的整合,加速智能相機、機器人、無人機及工業 AI 等產品落地。
IMSDK 2.0 新增 Python 和 C++ Pipeline API 及應用構建器、生成式 AI 推論、容器化微服務、AI 編程代理技能以及「文檔即碼」等功能。其中,開發者可通過 QAIRT、ONNX Runtime 和 TFLite 等多種推論運行時,在不重構整體多媒體管線的情況下切換 AI 模型。
高通表示,IMSDK 2.0 基於 GStreamer 架構,並結合硬件加速插件、零拷貝數據傳輸和多流、多模型管線能力,可支援視覺 AI、LLM/VLM、音頻 AI 及文生圖等應用。其容器化微服務還覆蓋推論、分析和平臺服務,並支援 Kafka、MQTT、AWS IoT 及 Azure IoT 等企業級連接。
此外,IMSDK 2.0 引入 AI 編程代理技能,可通過自然語言輔助開發者完成管線配置、模型接入、編譯、調試及部署。高通稱,該 SDK 已被三星、亞馬遜和 Bose 等企業用於相關產品開發。