Robocikowo>ROBOCIKOWO
computer-vision

Rejestracja 3D-2D

1995AktywnyOpublikowano: 17 listopada 2026Aktualizacja: 17 listopada 2026Opublikowany
Technika przestrzennego dopasowania przedoperacyjnego wolumenu 3D (CT/MR) do śródoperacyjnych obrazów 2D (fluoroskopia/RTG) w jednym układzie współrzędnych, wykorzystywana w chirurgii nawigowanej obrazem.
Kluczowa innowacja
Powiązanie bogatego przedoperacyjnego wolumenu 3D z ubogimi, lecz dostępnymi na żywo rzutami 2D, dające nawigację opartą na pełnej anatomii bez dodatkowego obrazowania 3D w trakcie zabiegu.
Kategoria
computer-vision
Poziom abstrakcji
Technika
Poziom operacji
InferencjaAplikacja
Zastosowania
Nawigacja w chirurgii wewnątrznaczyniowej i neurowaskularnejNałożenie planu na fluoroskopię podczas trombektomiiChirurgia kręgosłupa i ortopedia nawigowana obrazemRadioterapia i pozycjonowanie pacjentaRobotyka chirurgiczna i śledzenie narzędzi

Jak działa

Definiuje się parametry przekształcenia 3D (zwykle sztywnego: 3 translacje + 3 rotacje). W metodzie intensywnościowej dla danej pozy wolumenu generuje się DRR (symulowany rzut rentgenowski), porównuje go z rzeczywistym obrazem 2D miarą podobieństwa (np. informacja wzajemna, gradient difference), a optymalizator iteracyjnie poprawia pozę aż do maksymalizacji podobieństwa. W metodzie cechowej dopasowuje się zrzutowane cechy 3D do cech wykrytych w obrazie 2D. Wynikiem jest transformacja pozwalająca nałożyć wolumen 3D na obraz 2D w czasie rzeczywistym.

Rozwiązany problem

Przedoperacyjne obrazowanie 3D (CT/MR) jest bogate w szczegóły, ale niedostępne w czasie zabiegu, gdzie operator dysponuje jedynie rzutami 2D (fluoroskopią). Bez wspólnego układu współrzędnych nie można przenieść planu i struktur 3D na bieżący obraz.

Ewolucja

Oryginalny paper · 2012 · Medical Image Analysis 16(3), 642-661 · Primoz Markelj
Przegląd metod rejestracji 3D/2D dla interwencji nawigowanych obrazem
Primoz Markelj, Dejan Tomazevic, Bostjan Likar, Franjo Pernus
1995
Rejestracja oparta na DRR

Upowszechnienie rejestracji intensywnościowej 3D-2D z użyciem cyfrowo zrekonstruowanych radiogramów (DRR) do dopasowania CT do RTG.

1998
Porównanie miar podobieństwa

Systematyczne porównanie miar podobieństwa (m.in. informacji wzajemnej) dla rejestracji CT-fluoroskopia ustaliło dobre praktyki metody intensywnościowej.

2012
Kanoniczny przegląd metod 3D/2D
Punkt przełomowy

Markelj i wsp. usystematyzowali metody rejestracji 3D/2D dla interwencji nawigowanych obrazem, stając się punktem odniesienia dziedziny.

2016
Rejestracja uczona (deep learning)

Metody głębokiego uczenia zaczęły estymować pozę i przyspieszać rejestrację 3D-2D, zwiększając odporność na lokalne minima.