Американские ученые создали систему, преобразующую сигналы головного мозга человека в звуки речи. Разработка, основанная на двух нейронных сетях и речевом синтезаторе, позволяет вернуть речь парализованным. Об этом сообщает EurekAlert.

Существующие системы такого рода обычно базируются на считывании движений глаз или головы и позволяют парализованным людям управлять, например, компьютерным курсором. Но общение, основанное на наборе символов курсором — это весьма медленный и непрактичный процесс, который в целом очень сильно уступает естественной коммуникации.

Чтобы улучшить качество коммуникации для пациентов с инвалидностью, американские ученые решили записывать речь непосредственно из мозга. Они использовали сигналы мозга, записанные от пациентов с эпилепсией, которые обладали нормальными речевыми способностями. Добровольцы произносили фразы, а ученые составляли специальные карты, по которым мозг управляет голосовыми связками, языком, гортанью и губами. Затем эти карты применили к специальной компьютерной программе, которая генерировала речь.

“Мы разработали прототип такой системы на основе двух рекуррентных нейронных сетей и синтезатора речи. Применение двухступенчатой системы обусловлено тем, что кора головного мозга не оперирует словами напрямую — она посылает сигналы к органам речи, которые уже отвечают за генерацию слов”, — рассказывают сотрудники Калифорнийского университета в Сан-Франциско.

Во время тестирования искусственной речи более половины времени участники понимали, о чем «говорит» компьютер.

Сейчас команда планирует обучить алгоритм с помощью парализованных людей с нарушениями речи. Это достаточно сложно, но благодаря данным о сигналах мозга от этих пациентов эффективность технологии будет намного выше, уверены авторы.

 

Рекомендуемые статьи

Добавить комментарий

Ваш адрес email не будет опубликован.

Close