Язык производится корой головного мозга человека, и мозговые волны, связанные с процессом речи, могут быть записаны непосредственно с помощью электродов ЭЭГ. Недавно исследователи из нескольких институтов, включая Технологический институт Карлсруэ (KIT) в Германии и Центр Уодсворта в США, впервые показали, что основные единицы устойчивой речи, слова DD и полные предложения, могут быть восстановлены из этих мозговых волн, и что соответствующие тексты могут быть созданы. Они описали эту систему «Brain-to-text» в недавнем выпуске журнала Frontiers in Neuroscience. »Люди давно задаются вопросом, можно ли общаться с машинами с помощью одной лишь активности мозга, и наши результаты — важный шаг в этом направлении». Таня из лаборатории когнитивных систем KIT, которая руководила исследованием? Шульц сказал: «Наше исследование показывает, что как отдельные единицы в речи, так и предложения, произнесенные последовательно, могут быть распознаны по активности мозга». Результаты были достигнуты благодаря сотрудничеству между исследователями в области информатики, неврологии и медицины, говорится в недавнем сообщении на сайте Daily Science.KIT разработал и использовал методы обработки сигналов и автоматического распознавания речи.KIT Cognitive Systems Lab’s Kristin? Херф и Доминик? Хедж сказал: «Помимо декодирования речи по активности мозга, наша модель способна детально анализировать области мозга, участвующие в процессе речи, и взаимодействие между ними». Они разработали эту систему в своей кандидатской диссертации. Исследователи отмечают, что это первый случай, когда непрерывная речь может быть декодирована и преобразована в текст на основе паттернов мозговой активности. Для этого информацию из коры головного мозга необходимо было объединить с лингвистическими знаниями и алгоритмами машинного обучения, чтобы выбрать наиболее вероятный порядок слов. Хотя нынешняя система «Brain D Text» все еще основана на речи, она является важным первым шагом в определении языка мыслей людей. Исследователи регистрировали активность мозга семи пациентов с эпилепсией, которым в целях лечения на поверхность коры головного мозга были помещены электродные решетки (ЭКоГ). Исследователи записывали сигналы ЭКоГ с высоким разрешением, когда пациенты читали образцы текстов. Затем исследователи из Карлсруэ проанализировали полученные данные и разработали систему «Brain D Text». Помимо того, что этот результат внесет вклад в фундаментальную науку и поможет лучше понять сложные речевые процессы в мозге, он также поможет разработать новые средства языковой коммуникации, которые в будущем можно будет закреплять на пациентах, чтобы помочь им общаться.