Нейросети научили “читать мысли“ в режиме реального времени

Исследователи российской ГК «Нейроботикс» и Лаборатории нейроробототехники МФТИ научились воссоздавать по электрической активности мозга изображения, которые человек видит в данный момент. Это поможет создать новый тип устройств для постинсультной реабилитации, управляемых сигналами мозга. Интерфейс «мозг — компьютер», созданный командой ученых использует электроэнцефалограмму (ЭЭГ), снимаемую с поверхности головы, и нейросети. Эта разработка с помощью ЭЭГ в режиме реального времени реконструирует кадры из видео, которое смотрит человек. Эксперимент состоял из двух частей. В первой части исследователи произвольно выбрали пять разных категорий роликов с YouTube: «абстракции», «водопады», «лица людей», «скорость» — видеосъемку от первого лица гонок на снегоходах, водных мотоциклах, ралли — и «движущиеся механизмы», которые показывали испытуемым, записывая при этом ЭЭГ. Для второй части эксперимента были произвольно выбраны три категории из вышеперечисленных видео. Специалисты разработали д