Robocikowo>ROBOCIKOWO
Robotyka

GelSight

2009AktywnyAktualizacja: 19 sierpnia 2026Opublikowany
Technologia czujnika dotyku opartego na wizji, opracowana na MIT: elastyczny żel pokryty odblaskową membraną, którego deformację rejestruje kamera, dając mapę kształtu i sił kontaktu.
Kluczowa innowacja
Kanoniczny, wysokorozdzielczy czujnik wizyjno-dotykowy: kawałek przezroczystego żelu z odblaskową membraną i kamerą, rekonstruujący geometrię powierzchni z dokładnością mikrometryczną.
Kategoria
Robotyka
Poziom abstrakcji
Building block
Poziom operacji
Sterowanie robotemDane
Zastosowania
Zręczna manipulacja i precyzyjny chwyt w robotyceRozpoznawanie obiektów i tekstur w dłoniWykrywanie poślizgu i regulacja siłyUczenie polityk manipulacji z dotykiemMetrologia powierzchni i kontrola jakości

Jak działa

Odblaskowa membrana na powierzchni żelu odkształca się zgodnie z kształtem dotykanego obiektu. Kamera pod żelem rejestruje obraz membrany oświetlonej z kilku kierunków różnokolorowymi diodami LED; z jasności w poszczególnych kanałach wyznacza się lokalne nachylenia powierzchni (stereo fotometryczne), a przez całkowanie — mapę wysokości (geometrię 3D odcisku). Ruch naniesionych markerów służy do estymacji sił stycznych i poślizgu. Wyniki trafiają do algorytmów sterowania chwytem lub sieci uczących manipulacji.

Rozwiązany problem

Roboty potrzebują gęstej, dokładnej informacji dotykowej do zręcznej manipulacji, której nie dają matryce takseli. GelSight dostarcza mikrometrycznej mapy geometrii i sił kontaktu z pojedynczego, taniego modułu kamerowego.

Kluczowe mechanizmy

Elastyczny żel z odblaskową membraną
Kamera + wielokolorowe/wielokątowe oświetlenie LED
Stereo fotometryczne → mapa wysokości (geometria 3D)
Markery do sił stycznych i poślizgu
Pomiar niezależny od właściwości optycznych obiektu

Mocne strony i ograniczenia

Mocne strony
✓Mikrometryczna rozdzielczość geometrii dotyku
✓Niezależność od koloru/faktury dotykanego obiektu
✓Bogata informacja (kształt, siły, poślizg) z jednego modułu
✓Dojrzała, skomercjalizowana technologia (GelSight Mini)
Ograniczenia
✗Grubość i rozmiar modułu (kamera + żel)
✗Zużywanie się membrany/żelu
✗Latencja przetwarzania obrazu
✗Ograniczone pole styku pojedynczego sensora

Komponenty

Żel z odblaskową membranąPowierzchnia styku

Przezroczysty elastomer pokryty nieprzezroczystą, odblaskową warstwą.

Oficjalna

Kamera i oświetlenie LEDAkwizycja

Rejestrują odkształconą membranę z różnych kierunków/kolorów.

Oficjalna

Markery i algorytm fotometrycznyPrzetwarzanie

Odtwarzają geometrię 3D oraz siły styczne i poślizg.

Oficjalna

Implementacja

Implementacje referencyjne
GelSight Inc. — GelSight Mini
— · GelSight Inc.
Oficjalna
Pułapki implementacyjne
Zużycie membranyŚrednia

Odblaskowa membrana zużywa się i wymaga wymiany.

Rozwiązanie:Wymienne nakładki żelowe, konserwacja.
Kalibracja fotometrycznaŚrednia

Dokładność zależy od poprawnej kalibracji oświetlenia i optyki.

Rozwiązanie:Procedury kalibracji, modele uczone per-czujnik.

Ewolucja

2009
GelSight w MIT
Punkt przełomowy

Laboratorium Adelsona demonstruje wysokorozdzielczy czujnik żelowy oparty na wizji.

2018
Zastosowania w robotyce

GelSight coraz częściej używany do manipulacji i rozpoznawania w dłoni.

2022
GelSight Mini

Kompaktowy, komercyjny moduł upowszechnia czujnik w badaniach i robotyce.

Hiperparametry (konfigurowalne osie)

Wariant/modułŚrednia
GelSight MiniKompaktowy moduł do robotyki i badań.
czujniki dłoni/palcaIntegracja w chwytakach i palcach robota.
MarkeryŚrednia
z markeramiPomiar sił stycznych i poślizgu.
bez markerówSam pomiar geometrii.