Российские ученые из ГК «Нейроботикс» «Нейроассистивные технологии» и Лаборатории нейроробототехники МФТИ, считывая электрическую активнось мозга, воссоздали изображение, которое человек видит в данный момент.
Впервые создан интерфейс «мозг-компьютер», который снимает с поверхности головы электроэнцефалограмму (ЭЭГ) и анализирует ее с помощью нейросетей, не вживляя электроды в мозг.
Благодаря новой технологии, удалось в режиме реального времени реконструировать на экране компьютера изображение, которое человек видит собственными глазами.
Для начала, добровольцам показали «водопады», «лица людей», «скорость» и «движущиеся механизмы», после чего выяснилось, что частотные характеристики волновой активности ЭЭГ для каждой категории различаются. Опыт позволил анализировать реакцию мозга на разные видео в режиме реального времени.
Вторую часть эксперимента специалисты посвятили обучению двух нейросетей, чтобы по записанному сигналу ЭЭГ создавались кадры, похожие на те, которые видели люди в момент записи.
Нейросети справились на 90%, ИИ создала реалистичные кадры, на которых можно было уверенно определить категорию видео.
Цель проекта создать новый тип устройств, управляемых сигналами мозга, которыми могли бы пользоваться парализованные люди, в частности при реабилитации после инсульта и нейротравм головы.