Компания Xiaomi представила MiDashengLM-Spatial — новую модель в серии Dasheng. Разработчики полностью открыли веса модели и код для инференса, опубликовав их под лицензией Apache 2.0 для свободного использования.
Новинка базируется на модели MiDashengLM-7B. К стандартным функциям распознавания аудио добавлена возможность пространственного восприятия: система определяет источник звука и его распределение в помещении.
Xiaomi называет MiDashengLM-Spatial первой в индустрии открытой моделью для сквозного понимания пространственного аудио. Технология позволяет ИИ не просто распознавать контент, но и анализировать акустическую среду.
В ближайшее время модель будет внедрена в системы умного дома и автомобильные кабины Xiaomi. Это позволит улучшить взаимодействие в рамках экосистемы «человек-автомобиль-дом» за счет новых возможностей пространственного слуха.
За последние два года Xiaomi выпустила и открыла исходный код базовой модели Xiaomi Dasheng и модели MiDashengLM-7B. Эти технологии уже применяются более чем в 30 сценариях, включая распознавание речи, музыки и окружающих шумов.
