ИИ синтезирует речь из «мыслей» парализованной женщины меньше, чем за секунду
Ученые из Калифорнии разработали нейропротез, который преобразует мысли парализованной пациентки непосредственно в речь в реальном времени.
Ученые из Калифорнии разработали нейропротез, который преобразует мысли парализованной пациентки непосредственно в речь в реальном времени.
Ученые из Калифорнии разработали нейропротез, который преобразует мысли парализованной пациентки непосредственно в речь в реальном времени.
Исследователи из университетов Беркли и Сан-Франциско обучили нейронную сеть на мозговой активности 47-летней женщины во время того, как она мысленно проговаривала 100 уникальных предложений, состоящих из более чем 1000 слов.
Уникальность метода заключается в том, что пациентке не нужно было пытаться артикулировать или произносить слова. Вместо этого система анализировала активность ее сенсомоторной коры головного мозга, ответственной за планирование и выполнение движений, связанных с речью.
Разработанный «нейропротез» декодирует и синтезирует речь в реальном времени с задержкой всего в 80 миллисекунд. Исследователи отмечают, что такая скорость достаточна для динамичной беседы и свободного общения.
Они подчеркивают, что «сокращение задержки и увеличение скорости декодирования речи являются ключевыми факторами для обеспечения естественного и комфортного общения» с использованием подобных систем. Предыдущие методы часто требовали обработки целых блоков текста перед синтезом речи, что приводило к значительным задержкам.
Скорость перевода мыслей в речь увеличилась в восемь раз по сравнению с другими методами, а количество переведенных слов в минуту почти вдвое превысило показатели предыдущих разработок. Благодаря программе синтеза голоса, основанной на предварительных записях голоса пациентки, речь звучала похоже на ее собственный голос.
Несмотря на значительный прогресс, авторы исследования признают, что методу еще предстоит доработка для клинического применения. Хотя синтезированная речь была понятной, по качеству она пока уступает методам декодирования текста.
Релоцировались? Теперь вы можете комментировать без верификации аккаунта.