Opaska MIT steruje robotyczną dłonią ruchami nadgarstka

Inżynierowie MIT zaprojektowali nadgarstkową opaskę ultradźwiękową, która mapuje każdy ruch palców na żywo i bezprzewodowo przekazuje te dane do fizycznego robota lub wirtualnego środowiska. Praca ukazała się 13 lipca 2026 roku w Nature Electronics — i po raz pierwszy łączy przenośny ultrasound z modelem AI do obsługi dexterous manipulationdexterous manipulation: Precyzyjne, zręczne manipulowanie przedmiotami dłonią — jeden z najtrudniejszych problemów robotyki..

Najważniejsze w skrócie

Opaska rejestruje 22 stopnie swobodystopnie swobody (DoF): Liczba niezależnych kierunków ruchu — tu: pozycji palców i dłoni. dłoni z czujnikiem ultradźwiękowym wielkości smartwatcha
Precyzja: pełna wykrywalność ruchów — wszystkie 26 liter ASL, chwyt piłki tenisowej, nożyczek, długopisu
Bezprzewodowe sterowanie robotyczną dłonią w czasie rzeczywistym — gra na pianinie, rzut do kosza
Dane z opaski mogą służyć jako tani zestaw treningowy dla polityk dexterous manipulation humanoidów
Badanie opublikowane w Nature Electronics (lipiec 2026) przez MIT i USC

Czujnik jak struny marionetki

Obecne metody przechwytywania ruchów dłoni mają swoje wady. Kamery są wrażliwe na zasłonięcia. Rękawice z czujnikami ograniczają naturalne odczucia. Metody elektromiograficzneelektromiografia (EMG): Pomiar sygnałów elektrycznych generowanych przez pracujące mięśnie. (EMG) — mierzące sygnały elektryczne z mięśni — są podatne na zakłócenia i zbyt mało precyzyjne, by odróżnić subtelne przejścia między pozycjami.

Zespół profesora Xuanhe Zhao z MIT poszedł inną drogą: ultrasound imaging nadgarstka. Ścięgna i mięśnie w nadgarstku działają jak sznurki poruszające palcami — zmiana ich widoku na obrazie ultradźwiękowym bezpośrednio odpowiada zmianie pozycji dłoni. Sensor wielkości smartwatcha rejestruje obrazy ciągle i przesyła je do modelu AI, który na bieżąco tłumaczy je na 22 DoF.

AI jako tłumacz obrazów nadgarstka

Kluczowy komponent to algorytm AI wytrenowany do rozpoznawania wzorców ultrasound i powiązywania ich z konkretnymi stopniami swobody. Badacze oznaczyli ręcznie regiony obrazu odpowiadające ruchom kciuka, każdego z czterech palców i dłoni w różnych konfiguracjach.

Na zbiorze 8 ochotników z różnymi rozmiarami nadgarstków i dłoni opaska poprawnie przewidywała pozycję dłoni we wszystkich testowanych gestach — znaki ASL, chwytanie obiektów codziennych, precyzyjne gesty. Wyniki walidacyjne potwierdziły dokładność na wcześniej nieprzewidzianych ruchach.

Robot jako marionetka

Demonstracja z artykułu jest prosta i wymowna: osoba zakłada opaskę na nadgarstek i wykonuje gesty pianistyczne. Robot po drugiej stronie bezprzewodowego połączenia odtwarza te ruchy i rzeczywiście gra melodię na pianinie. Ten sam robot zasymulował rzuty do mini-kosza.

W środowisku VR ta sama opaska pozwala powiększać i pomniejszać obiekty przez gest szczypania palcami — bez rękawic, bez kamer śledzących.

Konsekwencje dla robotyki humanoidalnej

Zdaniem autorów największe znaczenie ma nie sam kontroler, lecz możliwość zbierania ogromnych zbiorów danych treningowych o ruchach dłoni. Dotychczasowe podejścia do zbierania danych o dexterous manipulation są kosztowne i wolne — wymagają mocap suits, sterowania teleoperowanymi robotami lub żmudnych demonstracji w laboratorium.

Opaska ultradźwiękowa może zbierać dane od wielu użytkowników w ich naturalnym środowisku, bez specjalistycznego sprzętu. To potencjalna odpowiedź na jeden z kluczowych problemów trenowania humanoidów — brak wystarczająco dużych i zróżnicowanych zbiorów danych dla manipulacji. Profesor Zhao deklaruje dalszą miniaturyzację hardware i rozszerzenie zbioru gestów, dążąc do wersji produkcyjnej nadającej się do masowego zbierania danych.

Dlaczego to ważne?

Dexterous manipulation pozostaje jednym z najtrudniejszych problemów robotyki. Istniejące zestawy danych są zbyt małe, zbyt jednorodne i zbyt drogie w pozyskaniu. Opaska MIT rozwiązuje jeden aspekt tego problemu: zbieranie danych o ruchach dłoni staje się tanie i skalowalne. Jeśli sprzęt można miniaturyzować do postaci komercyjnej opaski, kilkadziesiąt tysięcy użytkowników może dostarczyć więcej zróżnicowanych danych niż dotychczasowe laboratoria. Dla firm trenujących polityki dla humanoidów — jak 1X Technologies, Physical Intelligence czy Figure AI — to potencjalny przełom w dostępności danych treningowych dla dexterous manipulation.

Co dalej?

Zespół MIT planuje miniaturyzację hardware i rozszerzenie zbioru gestów o kolejnych ochotników z szerszym zakresem rozmiarów dłoni
Aplikacja w chirurgii robotycznej jako system zbierania danych o chwytach dla trenowania polityk chirurgicznych — wymieniona w artykule jako planowany kierunek badań
Opaska będzie testowana jako kontroler VR/AR — deklarowane jako osobna linia badań