Ранее системы «чтения разума» могли угадать задуманное человеком однозначное число, но более глубокие мысли выходили за рамки технологии. Теперь команда из Университета Карнеги-Меллона (CMU) разработала способ точно считывать более сложные понятия путем сканирования мозга и даже о’єднувати их в целях утверждения.
Простое утверждение загружается с большей информацией, чем это кажется на первый взгляд: каждое слово представляет новую концепцию, а их расположение и отношение к соседям может кардинально изменить смысл целого. Команда КМУ обнаружила, что «строительные блоки», которые ум использует для построения мыслей, состоят из понятий, а не основанные на самых словах. А это значит, что концепция мозговых процессов универсальная, независимо от языка и культуры человека.
«Одним из величайших достижений человеческого мозга была способность объединять отдельные концепции в сложных мыслях, то есть думать не только о «банан», но« мне нравится есть бананы с моими друзьями», – говорит Марсель Смит, ведущий исследователь. «Мы в конце разрабатывали способ увидеть эту сложность в сигнале fMRI. Открытие этого соотношение между мыслями и шаблонами активации мозга говорит нам о том, из чего построены мысли ».
В исследовании было проверено, как мозг кодирует сложные мысли и как fMRI сканер с небольшой помощью алгоритмов машинного обучения может их декодировать. Исследователи собрали 240 «сложных событий», которые являются предложениями, такими как «свидетель кричал во время судебного разбирательства». Эти события состояли из 42 различных строительных блоков или важных компонентов, таких как человек, настройки, размеры, социальное взаимодействие и физическое действие.
Каждаяиз этих различных видов информации обрабатывается в разных частях мозга, поэтому система CMU может выбрать общую категорию того, что находится в уме человека. Чтобы проверить свое мастерство, исследователи просканировали мозги людей, прочитав им утверждение и записав шаблоны активации мозга, которые шли вместе с ними. После изучения алгоритма с 239 предложений и сопоставление результатов он смог скомпоновать последнее предложение, что базируется исключительно на данных мозга.
Команда провела этот тест 240 раз, систематически проверяя каждое утверждение по очереди и обнаружив, что алгоритм мог добавить отсутствует предложение из шаблона активации мозга с 87-процентной точностью. Таким образом, исследователи могли бы скачать программу утверждений, и она отражала бы точную схему активации мозга.
«Наша методика переводит неудачную свойство fMRI, что заключается в затирании сигналов мозговых событий, которые происходят близко во времени, например, чтение двух последовательных слов в предложении. Это продвижение позволяет впервые расшифровать мысли, содержит несколько концепций. Следующим шагом может стать декодирования общего типа тем, о которых человек думает, например о геологии или скейтбординг. Мы находимся на пути к созданию карт всех типов знаний в мозгу».
