Qualcomm запускает IMSDK 2.0 для ускорения разработки Edge AI

Новости Beating AI: Qualcomm выпустила Qualcomm Intelligent Multimedia SDK (IMSDK) 2.0, представив унифицированную платформу разработки для ИИ и мультимедиа, ориентированную на платформы Qualcomm Dragonwing и Linux на краю. Цель — упростить интеграцию функций, таких как камеры, аудио- и видеопотоки, датчики, ИИ-выводы и облачные подключения, ускоряя вывод на рынок таких продуктов, как умные камеры, роботы, дроны и промышленный ИИ. IMSDK 2.0 добавляет Python и C++ Pipeline API, конструктор приложений, генеративный ИИ-вывод, контейнеризированные микросервисы, навыки ИИ-программных агентов и функцию «документ как код». Разработчики могут переключать модели ИИ с помощью различных сред выполнения вывода, таких как QAIRT, ONNX Runtime и TFLite, не перестраивая всю мультимедийную трубу. Qualcomm заявляет, что IMSDK 2.0 построен на архитектуре GStreamer и сочетает в себе аппаратно-ускоренные плагины, передачу данных без копирования, а также поддержку многопоточных и многомодельных трубопроводов, что позволяет реализовывать приложения в области визуального ИИ, LLM/VLM, аудио-ИИ и текст-в-изображение. Контейнеризированные микросервисы охватывают вывод, анализ и платформенные сервисы, поддерживая корпоративные протоколы подключения, такие как Kafka, MQTT, AWS IoT и Azure IoT. Кроме того, IMSDK 2.0 вводит навыки ИИ-программных агентов, которые помогают разработчикам с помощью естественного языка настраивать трубопроводы, подключать модели, компилировать, отлаживать и развертывать их. Qualcomm сообщает, что этот SDK уже используется компаниями Samsung, Amazon и Bose для разработки соответствующих продуктов.