Компания Apple представила набор функций Audio Intelligence, интегрированных в iOS 27, macOS Golden Gate и прошивки AirPods 5 и AirPods Pro. Технологии используют локальные нейросети для перевода, шумоподавления и обработки звука без передачи данных на облачные серверы.
Функция синхронного перевода задействует нейронный движок устройства для двуязычного общения в реальном времени. Пользователи могут слышать перевод в наушниках или выводить синтезированную речь через динамики iPhone, что обеспечивает низкую задержку и конфиденциальность.
Технология Voice Isolation 2.0, обученная на миллионах часов акустических данных, подавляет фоновые шумы, включая ветер и разговоры. Система адаптируется к направлению голоса спикера, обеспечивая студийное качество записи звука для звонков, FaceTime и диктофона.
Инструменты для авторов контента на устройствах с чипами серии M и новых iPhone позволяют разделять аудиодорожки на вокал, инструменты и фоновые звуки. Это упрощает постобработку, позволяя независимо настраивать громкость и эффекты для каждого компонента записи.
Алгоритм Adaptive Hearing в реальном времени корректирует эквализацию и пространственное аудио, анализируя прилегание наушников и акустику помещения. Функции станут доступны пользователям по всему миру после официального обновления системы и выхода новых устройств 14 сентября.
