Компания Meta анонсировала запуск функции Hologram для умных очков Ray-Ban Meta и гарнитур Quest, который начнется осенью. Технология использует генеративный ИИ для создания реалистичных аватаров, постепенно заменяя ими текущие мультяшные образы пользователей.
Для настройки Hologram пользователям необходимо через приложение Meta AI записать движения головы, мимику и речь. Система обрабатывает данные на серверах, создавая модель внешности и одежды. Весь процесс создания аватара занимает несколько минут.
В очках Ray-Ban Meta функция работает во время звонков в WhatsApp. Серверный диффузионный ИИ анализирует аудиопоток с микрофонов очков и в реальном времени генерирует 2D-видеопоток с мимикой пользователя, заменяя стандартное изображение с камеры.
На платформе Quest аватары Hologram представлены в 3D. Пользователи могут видеть собеседника в окне или переключиться в полноростовой режим с реалистичными пропорциями. Разработчики продолжают доработку технологии, чтобы устранить искажения при наклонах головы и улучшить детализацию глаз.
