Qualcomm ra mắt IMSDK 2.0 để tăng tốc phát triển Edge AI

Bản tin Beating AI: Qualcomm công bố Qualcomm Intelligent Multimedia SDK (IMSDK) 2.0, ra mắt khung phát triển AI và đa phương tiện thống nhất dành cho nền tảng Qualcomm Dragonwing và Linux biên, nhằm đơn giản hóa việc tích hợp các chức năng như camera, âm thanh/video, cảm biến, suy luận AI và kết nối đám mây, thúc đẩy nhanh chóng triển khai các sản phẩm như camera thông minh, robot, drone và AI công nghiệp. IMSDK 2.0 bổ sung các API Pipeline Python và C++, công cụ xây dựng ứng dụng, suy luận AI sinh thành, vi dịch vụ được đóng gói, kỹ năng đại diện lập trình AI và tính năng “tài liệu như mã”. Trong đó, nhà phát triển có thể chuyển đổi mô hình AI mà không cần tái cấu trúc toàn bộ đường ống đa phương tiện thông qua các runtime suy luận như QAIRT, ONNX Runtime và TFLite. Qualcomm cho biết IMSDK 2.0 dựa trên kiến trúc GStreamer, kết hợp các plugin tăng tốc phần cứng, truyền dữ liệu không sao chép và khả năng xử lý đa luồng, đa mô hình, hỗ trợ các ứng dụng như AI thị giác, LLM/VLM, AI âm thanh và văn bản sinh hình ảnh. Các vi dịch vụ được đóng gói còn bao gồm suy luận, phân tích và dịch vụ nền tảng, đồng thời hỗ trợ các kết nối doanh nghiệp như Kafka, MQTT, AWS IoT và Azure IoT. Ngoài ra, IMSDK 2.0 giới thiệu kỹ năng đại diện lập trình AI, hỗ trợ nhà phát triển thực hiện cấu hình đường ống, kết nối mô hình, biên dịch, gỡ lỗi và triển khai thông qua ngôn ngữ tự nhiên. Qualcomm cho biết SDK này đã được các doanh nghiệp như Samsung, Amazon và Bose sử dụng trong phát triển sản phẩm liên quan.