
Исследователи из Университета в Сан-Франциско создали новую систему, позволяющую практически без задержки преобразовывать мысли в речь. В ходе экспериментов ученым удалось внедрить на поверхность мозга пациентки, которая всю жизнь страдает от паралича после инсульта, специальный чип, фиксирующий активность нейронов речевой зоны.
На основе полученных нейронных сигналов разработанный алгоритм способен генерировать речь. Первые испытания, проведенные два года назад, позволяли женщине говорить со скоростью около 80 слов в минуту — более чем в два раза быстрее ее стандартного аппарата, однако время между мышлением и озвучиванием составляло до 8 секунд, что делало диалог скорее похожим на обмен сообщениями, чем на живую беседу.
Современная версия технологии уменьшила задержку до менее одной секунды, что позволяет вести разговор в максимально естественной форме. В этом помог алгоритм декодирования, аналогичный использующимся в голосовых помощниках, таких как Alexa или Siri.
Голос для Энн был синтезирован на основе видеозаписей с ее свадьбы, сделанных до инсульта. При этом нейросеть способна также воспроизводить редкие слова, не входившие в обучающую выборку.
Одна из ключевых фигур команды — нейрохирург, которая недавно стала руководителем компании, занимающейся разработкой имплантов для связи мозга с компьютером. Эта компания привлекла значительные инвестиции, превышающие 50 миллионов долларов.
Источник: @hiaimedia