Во время домашнего тестирования разработчики также связали нейроинтерфейс с iPhone и проверили передачу речи в телефонные звонки
Neuralink интегрировала ИИ-агента Grok в систему управления компьютером через нейроимплант. Человек с боковым амиотрофическим склерозом (БАС), утративший способность самостоятельно двигаться и говорить, может мысленно произнести команду «Эй, Neuralink», сформулировать задачу, после чего Grok берет на себя управление операционной системой и выполняет необходимые действия. Прототип был протестирован в ходе 72-часовой сессии, проведенной инженерами компании в доме участника исследования по восстановлению речи.
Разработчики также внедрили автоматическое распознавание речевых намерений. Система определяет, когда пользователь собирается говорить, и передает соответствующие сигналы без необходимости нажимать кнопку для начала и завершения записи. Это позволяет управлять общением без помощи рук. В сочетании с ИИ-агентом такая функция открывает возможность не только набирать текст, но и поручать компьютеру выполнение задач мысленными командами.

Еще одно направление работы — интеграция нейроинтерфейса с iPhone. Приложение Bloom передает синтезированную на основе сигналов мозга речь непосредственно в аудиоканал телефонного звонка. Это позволяет человеку звонить близким, а также использовать другие функции смартфона, включая заказы еды. В начале разговора система может автоматически воспроизводить приветствие, объясняющее собеседнику, что звонок осуществляется с помощью вспомогательного устройства для коммуникации.

Во время тестирования инженеры добавили визуализацию сигналов, поступающих от импланта. Она демонстрирует их интенсивность и распределение, помогая определить, какие мысленно представляемые действия вызывают наиболее заметную активность мозга. Эти данные необходимы для дальнейшего усовершенствования моделей, которые преобразуют нейронную активность в команды и речь.
Отдельно Neuralink сообщила о достижениях речевого нейроинтерфейса: в первую неделю использования один из участников испытаний набирал с его помощью 75 английских слов в минуту с долей ошибок на уровне 5,8%. Это предварительный результат одного участника, а не показатель, подтвержденный для всех пользователей системы.
Проведенная дома 72-часовая сессия позволила инженерам протестировать новые функции в реальной обстановке и определить направления дальнейшего развития.
Источник