Разработка технологии мгновенного перевода мыслей в речь с помощью нейросетей

Разработка технологии мгновенного перевода мыслей в речь с помощью нейросетей

Исследователи из Университета в Сан-Франциско создали новую систему, позволяющую практически без задержки преобразовывать мысли в речь. В ходе экспериментов ученым удалось внедрить на поверхность мозга пациентки, которая всю жизнь страдает от паралича после инсульта, специальный чип, фиксирующий активность нейронов речевой зоны.

На основе полученных нейронных сигналов разработанный алгоритм способен генерировать речь. Первые испытания, проведенные два года назад, позволяли женщине говорить со скоростью около 80 слов в минуту — более чем в два раза быстрее ее стандартного аппарата, однако время между мышлением и озвучиванием составляло до 8 секунд, что делало диалог скорее похожим на обмен сообщениями, чем на живую беседу.

Современная версия технологии уменьшила задержку до менее одной секунды, что позволяет вести разговор в максимально естественной форме. В этом помог алгоритм декодирования, аналогичный использующимся в голосовых помощниках, таких как Alexa или Siri.

Голос для Энн был синтезирован на основе видеозаписей с ее свадьбы, сделанных до инсульта. При этом нейросеть способна также воспроизводить редкие слова, не входившие в обучающую выборку.

Одна из ключевых фигур команды — нейрохирург, которая недавно стала руководителем компании, занимающейся разработкой имплантов для связи мозга с компьютером. Эта компания привлекла значительные инвестиции, превышающие 50 миллионов долларов.

Источник: @hiaimedia

Похожие новости

Как безопасно загорать и использовать солнцезащитные средства с помощью виртуальной помощницы

Половина летнего сезона уже прошла, однако впереди еще много солнечных дней. Поэтому важно помнить о необходимости использования SPF-крема при прогулках на открытом воздухе, даже если вы не планируете посещать пляж.…

Использование чат-ботов для ведения дневника мигрени и облегчения симптомов

Автор, специалист по медиа и технологиям, рассказывает о своем опыте использования чат-ботов для отслеживания мигрени. У него хроническая мигрень, которая считается неизлечимой. Врачи советуют вести дневник приступов, чтобы управлять состоянием:…