ИИ воссоздал увиденное человеком по снимкам мозга

Кажется, ИИ подобрался к границе, которая ещё недавно выглядела чистой фантастикой. Учёные Института Вейцмана в Реховоте собрали систему, способную восстановить увиденное человеком по снимкам его мозга, а потом провернули обратный трюк — предсказать активность мозга по изображению.

Исследователи взяли данные фМРТ добровольцев, которым крутили картинки внутри сканера. Для обучения восемь человек пересмотрели около 9 тыс. изображений. Причём примерно 70% обучающих данных вообще не были связаны со снимками мозга испытуемых.

Секрет системы — сразу два ИИ-инструмента. Энкодер прогнозирует, как мозг отреагирует на картинку, а декодер по этой активности восстанавливает её структуру и содержание. Скажем, сначала система предполагает реакцию мозга на изображение леопарда, а затем по этому прогнозу пытается воссоздать саму сцену. Повторная тренировка потихоньку поднимает точность.

Подход позволил разглядеть и общие закономерности работы мозга: одни области откликались на еду, другие — на спортивные картинки. Для нового человека энкодеру нужна минимальная калибровка, хотя полноценное обучение съедает около 40 часов фМРТ-данных на каждого участника. Декодеру хватает одного часа.

Работу представили в прошлом месяце на конференции Cognitive Computational Neuroscience в Нью-Йорке. Нейроэтик Джуди Иллес считает, что технология может помочь людям с неврологическими нарушениями. Но нейробиолог Томми Спраг предупреждает: если ИИ научится вытаскивать внутренние образы без согласия человека, проблема приватности станет совсем другой.

Учёные уже хотят перейти от отдельных картинок к видео и аудио, а затем попробовать реконструировать мысли, воспоминания и сны. Для науки это может стать новым способом изучать мозг, но одновременно заставит решать вопрос, кому вообще принадлежит право на собственные мысли.