Ученые из Института Вейцмана в Реховоте разработали ИИ-инструмент для воссоздания изображений на основе данных фМРТ. Система анализирует активность мозга, предсказывая структуру и содержание того, что видит человек. Технология также способна работать в обратном направлении, прогнозируя реакцию мозга на визуальные стимулы.
Для обучения модели восемь добровольцев просмотрели около 9000 изображений в ходе сканирования. Исследователи использовали связку энкодера и декодера, что позволило обучать систему на данных, не имеющих прямой привязки к фМРТ. Около 70% обучающей выборки составили изображения, изначально не сопоставленные со снимками мозга.
Калибровка энкодера требует около 40 часов данных фМРТ на каждого испытуемого, тогда как декодер обучается за один час. Ученые выделили области мозга, реагирующие на специфические категории, например, еду или спорт. Результаты работы были представлены в прошлом месяце на конференции Cognitive Computational Neuroscience в Нью-Йорке.
В будущем исследователи планируют адаптировать технологию для анализа видео и аудио. Конечная цель проекта заключается в реконструкции мыслей, воспоминаний и содержания снов. Эксперты отмечают, что подобные разработки поднимают вопросы приватности, так как теоретически позволяют извлекать ментальные образы без согласия человека.
