Microsoft подала патент на систему искусственного интеллекта для редактирования видео в режиме реального времени. Технология под названием «Технология презентации видео или дополненной реальности с ИИ-усилением» была подана в апреле 2025 года и обнародована в октябре 2026 года.
Система использует генеративный ИИ для анализа аудиопотока, позволяя заменять, удалять или переписывать слова. Одновременно технология корректирует мимику и артикуляцию спикера, чтобы движения губ соответствовали измененному тексту. Процесс происходит с задержкой в несколько секунд.
Среди сценариев использования — синхронный перевод с подстройкой губ, удаление слов-паразитов и исправление оговорок. Система способна фильтровать нецензурную лексику и адаптировать контент под предпочтения аудитории, используя веб-поиск для уточнения формулировок.
Microsoft предлагает применять разработку в лекциях, трансляциях спортивных событий и телепередачах для снижения затрат на постобработку. Для решения вопросов достоверности патент предусматривает сохранение исходных аудио- и видеозаписей в качестве «базовых фактов» для последующей проверки.
Также рассматривается использование цифровых меток для фиксации изменений. На данный момент это лишь патентная заявка, поэтому выпуск коммерческого продукта на основе данной технологии пока не подтвержден.
