Ученые при помощи нейросети научились «читать мысли»


Ученые при помощи нейросети научились «читать мысли»

Японские ученые создали нейросеть, которая способна восстановить изображения предметов, на которые смотрит человек, по активности мозга во время просмотров. Препринт исследования ученых был размещен на сайте bioRxiv.org. Более результативный для этого метод — использование данных функциональной магнитно-резонансной томографии (фМРТ).

Работники японской лаборатории ATR, специализирующейся на исследовании и разработке нейросетей, создали искусственный интеллект, умеющий читать мысли людей.

Проделанная работа позволила обучить нейросеть генерировать изображение на основе приобретенных импульсов. Кроме того, приобретенные изображения очень часто напоминают исходные только отчасти.

Создатели из Киотского университета под управлением Юкиасу Камитани создали сеть, которая отслеживает мозговую активность и на основе приобретенных данных воспроизводит изображение, о котором размышляет либо на которое смотрит человек. В отличие от иных похожих разработок, нейросеть способна выделять главные субъекты изображений.

В результате нейросеть воссоздала изображения геометрических фигур, букв и даже целых предметов. Она была обучена на парах «изображение-активность», приобретенных в процессе опыта, участников которого просили рассмотреть 1200 изображений (каждое изображение было просмотрено каждым из 3-х участников по 5 раз).

Кроме этого, создатели также ввели в систему дополнительную нейросеть (DGN либо deep generative network — глубочайшая генеративная нейросеть). Тем не менее эффективность работы системы по оценкам системы попиксельной корреляции составила 79,7% без применения DGN и 76,1% при использовании дополнительной нейросети. Люди угадывали, что показано на полученном изображении в 99,1% случаев с DGN и 96,5% без неё. Робот визуализирует образы, представляемые людьми в собственных мыслях.