Neuralink продемонстрировала новые возможности мозгового импланта N1, позволяющие человеку с тяжелыми нарушениями речи управлять ИИ-агентом Grok, совершать телефонные звонки и набирать сообщения на iPhone без помощи рук. Для выполнения этих действий достаточно мысленно произнести специальную команду.
Новые функции тестировались в рамках клинического исследования VOICE, направленного на восстановление способности общаться у людей, утративших речь. Одним из участников демонстрации стал пациент, который смог взаимодействовать с окружающими без произнесения слов вслух и использования физической клавиатуры. Разработки создали во время 72-часового инженерного марафона, который специалисты Neuralink провели прямо у него дома.
Одна из функций позволяет запускать Grok мысленным произнесением фразы «Hey Neuralink», а затем формулировать задачу для ИИ. Имплант фиксирует мозговую активность, связанную с попыткой произнести эти слова, и передает команду ИИ-агенту, который самостоятельно выполняет необходимые действия на компьютере.
Также инженеры автоматизировали определение речевой активности. Раньше пользователю приходилось вручную нажимать кнопку, чтобы начать и завершить запись сигналов мозга. Теперь алгоритм самостоятельно распознает намерение говорить и запускает или останавливает обработку данных.
Еще одно нововведение позволяет передавать синтезированную речь непосредственно в аудиопоток микрофона iPhone во время телефонного разговора. Благодаря этому собеседник слышит слова, сформированные компьютером на основе нейронных сигналов. Во время испытания участник смог позвонить жене и поговорить с ней.
Кроме того, разработчики добавили возможность ввода текста в приложения iOS с помощью мозговых сигналов, ускорили исправление ошибок распознавания и предусмотрели запуск речевого интерфейса с экрана блокировки.
Все эти функции пока остаются экспериментальными. Neuralink не раскрыла количественные показатели точности распознавания и скорости обработки команд.
Исследование VOICE предназначено для людей с тяжелыми нарушениями речи, в том числе вследствие бокового амиотрофического склероза, травм спинного мозга и инсульта.
Имплант N1 регистрирует электрическую активность нейронов, а специальные алгоритмы преобразуют ее в предполагаемые слова и команды. Речь идет не о чтении любых мыслей человека, а о распознавании мозговых сигналов, связанных именно с намерением говорить.
Устройство пока не получило разрешения FDA на коммерческое применение.
