Qualcomm lance IMSDK 2.0 pour accélérer le développement de l'IA en périphérie

Découverte Beating AI : Qualcomm lance le Qualcomm Intelligent Multimedia SDK (IMSDK) 2.0, un cadre de développement unifié pour l'IA et les médias, dédié aux plateformes Qualcomm Dragonwing et Linux edge, visant à simplifier l'intégration de fonctionnalités telles que les caméras, l'audio et la vidéo, les capteurs, l'inférence IA et la connexion cloud, afin d'accélérer le déploiement de produits comme les caméras intelligentes, les robots, les drones et l'IA industrielle. IMSDK 2.0 introduit de nouvelles API Pipeline en Python et C++, un constructeur d'applications, l'inférence IA générative, des microservices conteneurisés, des compétences d'agent de programmation IA et la fonctionnalité « Documentation comme code ». Les développeurs peuvent désormais basculer entre des modèles IA via divers runtimes d'inférence tels que QAIRT, ONNX Runtime et TFLite, sans avoir à restructurer l'ensemble de la chaîne multimédia. Qualcomm indique que IMSDK 2.0 repose sur l'architecture GStreamer, combinée à des plugins d'accélération matérielle, une transmission de données sans copie et la capacité de gérer des flux et des modèles multiples, permettant ainsi le support d'applications telles que l'IA visuelle, les LLM/VLM, l'IA audio et la génération d'images à partir de textes. Ses microservices conteneurisés couvrent également l'inférence, l'analyse et les services plateforme, avec une compatibilité pour des connexions enterprise comme Kafka, MQTT, AWS IoT et Azure IoT. En outre, IMSDK 2.0 intègre des compétences d'agent de programmation IA permettant d'aider les développeurs par le biais du langage naturel pour configurer les pipelines, intégrer des modèles, compiler, déboguer et déployer. Qualcomm affirme que ce SDK est déjà utilisé par des entreprises telles que Samsung, Amazon et Bose pour le développement de leurs produits.