Японские ученые научились «читать мысли» с помощью фМРТ
Японские ученые из NTT, Inc. разработали систему, способную генерировать текстовые описания мыслей, воспоминаний и зрительных образов человека, основываясь на данных функциональной МРТ (фМРТ). В отличие от предшествующих разработок, ограничивавшихся общими категориями, новая система создает детализированные описания, например: "собака прыгает в воду" или "мужчина идет по пляжу". Авторы назвали это «подписи к мыслям» (mind-captioning).
Система обучалась на данных фМРТ, полученных во время просмотра участниками коротких видеороликов. Параллельно с записью активности мозга проводился анализ текстовых описаний роликов с использованием языковой модели для выделения семантических признаков. Затем, для каждого признака тренировались декодеры, предсказывающие его на основе паттернов мозговой активности.
В ходе тестирования было установлено, что наиболее точные описания генерируются при просмотре одного и того же видео или при попытке его вспомнить. При визуализации или воображении новых образов точность снижается, модель склоняется к более общим формулировкам и допускает ошибки. Однако даже в таких случаях иногда удается подобрать релевантные описания, что указывает на потенциал для создания неинвазивных интерфейсов «мозг—текст».
На текущий момент система требует длительной индивидуальной настройки, а использование фМРТ является дорогостоящим и длительным процессом. В будущем подобные технологии могут стать важным средством коммуникации для людей с ограниченными возможностями речи и движения, а также инструментом для исследования механизмов кодирования информации в мозге, включая объекты, действия и их взаимосвязи.
В общем, скоро мы все сможем выдавать гениальные мысли, а компьютеры будут за нас их формулировать. Останется только наслаждаться признанием и никакой работы по самовыражению.
