Команда ученых Техасского университета сообщила, что изобрела метод, использующий функциональные магнитно-резонансные записи мозга для реконструкции человеческого мышления и превращения его в речь. Полученные данные являются следующим шагом в поисках лучших интерфейсов «мозг – компьютер», разрабатываемых как вспомогательная технология для маломобильных людей. Технологией смогут пользоваться также люди, которые не могут физически печатать текст на клавиатуре.
Ученые описывают декодер как алгоритм, способный читать слова, которые человек слышит или думает во время функциональной магнитно-резонансной томографии (МРТ) сканирования мозга.
«Если бы вы двадцать лет назад спросили у любого когнитивного нейробиолога в мире, возможно ли это сделать, вас бы высмеяли», — отмечает Александр Хат, нейробиолог из Техасского университета в Остине и соавтор исследования.
В ходе эксперимента Хат с коллегами попросили двух женщин и мужчину 20-30 лет прослушать 16 часов подкастов и радиоисторий: The Moth Radio Hour, выступления TED и John Green’s Anthropocene Reviewed. При прослушивании медиаконтента аппарат МРТ считывал информацию мозговой активности участников исследования.
Ученые отмечают: использовать данные по МРТ для этого типа исследований сложно, поскольку аппарат работает значительно медленнее, чем человек думает. Причина, по которой установка в этом исследовании достигает видимого результата, заключается в том, что система не декодирует язык слово в слово, а скорее распознает значение мыслей, продуцируемых человеческим мозгом.
В результате алгоритм генерирует собственную историю из записей МРТ, которая, по словам Хата, достаточно хорошо совпадает с фактической историей, которую участники эксперимента слышали в медиаподкастах. Однако алгоритм все еще имеет некоторые недостатки — например, путает местоимения и личности.
Ученые пришли к выводу, что декодер практически способен объяснить работу человеческого мозга – результаты декодирования демонстрируют, какие части мозга отвечают за создание смыслов. Используя декодер для записей активностей разных областей мозга, ученые смогли определить, какие его участки отвечают за создание и ретрансляцию семантической информации.
Дом признает, что технология, способная эффективно «читать мнения», может пугать. Ученый уверяет, что его команда глубоко продумала последствия исследования и, заботясь о психической конфиденциальности, проверила, будет ли декодер работать без желания участников исследований.