Японские ученые реконструировали мысленные образы из человеческого мозга с помощью ИИ
В новом исследовании, опубликованном в журнале Neural Networks, ученые из Национального института квантовой науки и технологий и Университета Осаки описали технологию, которая позволяет создавать яркие изображения из активности человеческого мозга. С помощью новой системы команде удалось получить картинку леопарда с узнаваемыми чертами, такими как рот, уши и пятнистый узор, а также такие объекты, как самолет с красными огнями на крыльях.
Расшифровка активности мозга
Ранее ученым удавалось расшифровать то, что слышит и видит мозг. Однако исследователи не знали, как сделать воображаемые образы видимыми для других людей. Решением стало совмещение генеративного ИИ с записями нейронной активности.
Команда показала добровольцам более тысячи изображений животных, предметов и ландшафтов, а затем проанализировали взаимосвязь между этими картинками и сигналами мозга.
Затем эти же изображения, а также записи активности мозга, использовали для обучения генеративного ИИ.
В итоге, технология, получившая названия «декодирование мозга», смогла только по данным мозговой активности реконструировать изображения.
На картинке ниже представлен леопард, которого показывали добровольцам, (слева) и реконструкция увиденного (справа). Сгенерированное изображение далеко до идеала, но на нем можно разглядеть уши, морду и, частично, окрас животного.
По словам исследователей, эта в будущем эта система может помочь в создании новых устройств связи. Помимо этого, она поможет ученым исследовать и понимать, как галлюцинации и сны работают в мозгу.
Кстати, ранее ученые из Национального университета Сингапура и Китайского университета Гонконга разработали процесс, способный генерировать видео по сканам мозга. Подробности об этом можно узнать в нашем материале.