Меta* показала жесты нового браслета EMG

В журнале Nature компания Meta* подробно описала некоторые жесты браслета с sEMG, которые можно использовать для управления очками HUD и очками дополненной реальности.

Статья «Универсальный неинвазивный нейромоторный интерфейс для взаимодействия человека с компьютером» подробно описывает устройство, которое Meta* разрабатывает как минимум с 2019 года, после приобретения стартапа CTRL Labs.

Компания CTRL Labs была основана и возглавлена нейробиологом Томасом Рирдоном, который и по сей день руководит проектом в Meta*.

Браслет работает, считывая активацию мышц запястья, которые управляют движениями пальцев, с помощью метода поверхностной электромиографии (sEMG). Он обеспечивает точное отслеживание движений пальцев при очень низком энергопотреблении и без необходимости находиться в поле зрения камеры.

Это означает, что вы можете управлять виртуальными интерфейсами, используя едва заметные движения пальцев, пока рука находится в состоянии покоя, без необходимости поднимать руки или говорить. В видео, опубликованном вместе с докладом, показаны четыре типа жестов:

— Написание отдельных символов на поверхности указательным пальцем, которые преобразуются в цифровые символы для ввода текста.
— Вращение руки запястьем для управления одномерным курсором.
— Проведение большим пальцем по боковой стороне указательного пальца.
— Прикосновение большим пальцем к указательному пальцу или его удержание для нажатия/щелчка.

В докладе также утверждается, что технология sEMG Meta* теперь может быть распространена на новых пользователей без необходимости создания индивидуально обученной модели, и компания опубликовала более 100 часов записей sEMG для использования научным сообществом, что, по ее словам, должно способствовать развитию технологий доступности по всему миру.

Аппаратное обеспечение — исследовательский прототип, очень похожий на тот, который был впервые показан в 2021 году. Однако на конференции Meta Connect 2024* компания публично продемонстрировала элегантную, по всей видимости, готовую к производству версию браслета Ceres в качестве устройства ввода для прототипа очков дополненной реальности Orion. Функция микрожестов, позволяющая проводить большим пальцем по боковой стороне указательного пальца, была представлена в марте в составе Meta Quest SDK* и стала ключевой частью демонстрации Orion.

Meta Connect 2025* состоится 17 сентября. Ожидается, что компания анонсирует Celeste тогда же и откроет предварительные заказы на доставку в октябре, если сроки не будут перенесены.
В апреле Марк Гурман сообщил, что некоторые сотрудники Meta работали по выходным, чтобы вовремя отправить очки HUD. Менее чем через два месяца мы узнаем, увенчались ли эти усилия успехом.

*Meta признана экстремистской компанией на территории России