Исследователи из Калифорнии обучили ИИ синтезировать речь из «мыслей» парализованной пациентки

Задержка в генерации аудио составляет 80 миллисекунд.

  • «Нейропротез», разработанный учёными из университетов Беркли и Сан-Франциско, преобразует в аудио слова, которые мысленно произносит человек.
  • Нейросеть обучали на мозговой активности 47-летней женщины, которая 17 лет назад пережила инсульт и потеряла способность говорить. В отличие от других разработок, с этим чипом пациентке «не нужно было пытаться произносить слова вслух» — она только читала предложения про себя.
Пациентка (лицо скрыто) мысленно читает слова в верхней части экрана. ИИ синтезирует аудио и текст —  в нижней части экрана. Источник: Berkeley Engineering
  • «Нейропротез» декодирует и синтезирует речь в реальном времени с задержкой в 80 миллисекунд, этого достаточно для «динамичной беседы и свободного общения», объясняют исследователи. Метод ещё нельзя применять в медицине, он нуждается в доработке.
  • Чипы для прямой связи мозга с компьютером разрабатывают и частные компании — например, Neuralink Илона Маска. Её первый пациент смог управлять курсором мыши «силой мысли», играть на компьютере в шахматы и вести трансляции. Однако стартап не представлял результаты, в которых технология позволяет участникам испытаний говорить.
21
5
45 комментариев