Компанія Neuralink протестувала керування ШІ Grok, телефонними дзвінками та набором тексту за допомогою сигналів мозку. Розробки призначені для людей із тяжкими порушеннями мовлення, пише Interesting Engineering.
Керування ШІ через сигнали мозку
Neuralink продемонструвала можливість запускати ШІ-агента Grok за допомогою уявного мовлення. Для цього учаснику дослідження достатньо подумки вимовити команду активації, а потім сформулювати завдання.
Система розпізнає уявну фразу «Hey Neuralink» і передає наступну команду ШІ-агенту. Після цього Grok самостійно виконує відповідне завдання на комп'ютері.
Функцію протестували в межах клінічного дослідження VOICE. Воно спрямоване на відновлення можливості спілкуватися для людей, які втратили здатність говорити.
Компанія також розробила систему автоматичного визначення мовленнєвої активності мозку. Вона розпізнає, коли користувач намагається говорити, і самостійно запускає або зупиняє декодування.
Раніше для початку та завершення цього процесу потрібно було натискати кнопку. Новий підхід зменшує потребу у фізичному керуванні пристроєм.
Додатково Neuralink представила візуалізацію нейронних сигналів у реальному часі. Вона показує інтенсивність і розподіл активності, яку реєструє імплант.
Завдяки цьому учасники можуть перевіряти різні способи уявного мовлення та визначати, які з них створюють сильніші сигнали. Потенційно це допоможе покращити розпізнавання слів.
Дзвінки та диктування на iPhone
Neuralink протестувала телефонні дзвінки, під час яких учасник дослідження спілкувався за допомогою мовлення, сформованого із сигналів мозку. Технологію інтегрували безпосередньо в роботу iPhone.
Система перетворює розпізнані слова на синтезований голос і передає його в аудіопотік мікрофона телефона. Співрозмовник чує згенероване мовлення під час звичайного дзвінка.
Компанія також розробила інтеграцію з клавіатурою iOS. Вона дозволяє вводити текст у різних застосунках, використовуючи нейронні сигнали замість фізичної клавіатури.
Це може полегшити спілкування людям із тяжкими руховими порушеннями, зокрема з бічним аміотрофічним склерозом (БАС).
Серед нових можливостей — швидше виправлення неправильно розпізнаного тексту. Також протестували функцію спілкування із заблокованого екрана без необхідності розблоковувати телефон.
Обмеження експериментальної технології
Нові функції Neuralink поки залишаються експериментальними. Компанія продемонструвала їхню роботу, але не оприлюднила кількісних результатів випробувань.
Мозкові імпланти Neuralink досі проходять дослідження. Вони не отримали схвалення Управління з контролю за якістю харчових продуктів і медикаментів США (FDA) або інших регуляторних органів.
Компанія прагне зробити технологію придатною для повсякденного спілкування, а не лише для використання в лабораторних умовах.
