Eksploracja głębin morskich zostaje wstrzymana, gdy chmury osadów oślepiają kamery optyczne, pozostawiając pojazdy ROV dryfujące bez celu. Naukowcy z Woods Hole Oceanographic Institution (WHOI) opracowali system, który łączy sonar z zaawansowanymi algorytmami, aby nawigować w „mętnych wodach” w czasie rzeczywistym.

Niwelowanie różnic między sonarem a wizją

Roboty podwodne nieustannie muszą wybierać między widocznością a rozdzielczością. Kamery dostarczają wyraźnych obrazów, ale stają się bezużyteczne w momencie, gdy ROV wzburzy piasek. Sonar przenika przez zanieczyszczenia, ale oferuje jedynie przybliżone szczegóły, niewystarczające do precyzyjnych manipulacji.

Amy Phung (SM ’23, PhD ’26) i Richard Camilli (SM ’00, PhD ’03) rozwiązali ten problem za pomocą podejścia hybrydowego. Najpierw system wykonuje szybkie skanowanie sonarem w celu zmapowania dna morskiego. Mapa ta zapewnia pojazdowi bezpieczną świadomość przestrzenną, niezależnie od przejrzystości wody. Następnie ROV zbliża się do celów, dopóki osad nie opadnie lub dopóki odległość nie zmniejszy się na tyle, by kamery o wysokiej rozdzielczości mogły uchwycić drobne szczegóły.

Przetwarzanie w czasie rzeczywistym za pomocą algorytmów dopasowywania obrazu

Mapowanie dna morskiego „w locie” wymaga ekstremalnej wydajności obliczeniowej. Zespół WHOI wykorzystał algorytm dopasowywania obrazu, stworzony pierwotnie przez francuską grupę badawczą. Algorytm traktuje każdy piksel sonaru jako wskazówkę dotyczącą głębokości, szacując, jak daleko pod nim znajduje się powierzchnia. Poprzez łączenie tych szacunków głębokości, oprogramowanie buduje obraz 3-D znacznie szybciej niż tradycyjne rekonstrukcje akustyczne. Szybkość ta pozwala systemom autonomicznym lub zdalnie sterowanym na podejmowanie decyzji sterujących w ułamku sekundy i unikanie kolizji.

Implikacje dla przemysłu głębinowego i obronności

Możliwość widzenia przez osady zmienia kilka kluczowych sektorów. Naukowcy mogą zbierać nieprzerwane dane w zmiennych strefach bentosowych. Inżynierowie zyskują niezawidny widok niezbędny do budowy podwodnej i konserwacji infrastruktury, gdzie działalność człowieka stale wzburza muł.

Technologia ta wzmacnia również obronność. W misjach zwalczania min niewybuchy często kryją się pod warstwami mułu. System sonarowo-wizyjny nawiguje w warunkach „całkowitej utraty widoczności”, pewnie pozycjonuje urządzenia do utylizacji, a następnie weryfikuje cel, gdy woda stanie się wystarczająco czysta, by wykonać zdjęcie kamerą. Ta zmiana zmienia roboty podwodne z pasywnych obserwatorów w aktywnych, inteligentnych agentów na dnie morza.

Kluczowe wnioski

  • Nawigacja hybrydowa: Sonar dostarcza wstępny szkic terenu; kamery o wysokiej rozdzielczości dostarczają szczegółowych obrazów, gdy warunki się poprawią.
  • Szybkość algorytmiczna: Algorytm dopasowywania obrazu pochodzenia francuskiego szacuje głębokość bezpośrednio z 2-D danych sonarowych, umożliwiając mapowanie 3-D w czasie rzeczywistym.
  • Wszechstronne zastosowania: System przynosi korzyści oceanografii, budownictwu podwodnemu, utrzymaniu infrastruktury oraz niebezpiecznej utylizacji min.

System sonarowo-wizyjny WHOI napędzany przez AI pozwala teraz robotom podwodnym budować obraz 3-D otoczenia w czasie rzeczywistym, nawet gdy chmury osadów czynią kamery bezużytecznymi.

Od martwych punktów do map 3-D w czasie rzeczywistym

Tradycyjne pojazdy ROV polegają na kamerach optycznych w celu uzyskania szczegółów, ale pojedyncze wzburzenie piasku może zamienić przejrzysty widok w nieprzezroczystą ścianę. Sonar — impulsy dźwiękowe odbijające się od dna morskiego — widzi przez mętność, jednak jego surowe dane nie posiadają drobnych szczegółów niezbędnych do zadań takich jak chwytanie delikatnych okazów czy przeciąganie kabla.

Phung i Camilli zmierzyli się z tym kompromisem bezpośrednio. Ich hybrydowy system wykonuje szybkie skanowanie sonarem, przesyła dane do francuskiego algorytmu dopasowywania obrazu i traktuje każdy piksel sonaru jako wskazówkę dotyczącą głębokości. Poprzez łączenie tych wskazówek, oprogramowanie tworzy pełny model 3-D na tyle szybko, by ROV mógł korygować swój kurs w locie.

Gdy pojazd dotrze do czystszej wody — albo cofając się od zakłócenia, albo czekając, aż osad opadnie — pokładowe kamery o wysokiej rozdzielczości wykonują szczegółowe zdjęcia. W efekcie sonar działa jak „wzrok” o niskiej rozdzielczości, który utrzymuje orientację robota, dopóki optyczne „oczy” nie przejmą kontroli.

Dlaczego szybkość ma znaczenie

Starsze procesy wymagały sekund lub minut, aby przekształcić dane sonarowe w mapę 3-D — co jest zbyt wolne dla ROV, który musi omijać przeszkody lub ustawiać ramię manipulatora. Algorytm pochodzenia francuskiego omija to wąskie gardło, szacując głębokość bezpośrednio z 2-D obrazu sonarowego, co eliminuje potrzebę pełnej rekonstrukcji akustycznej. Pętla percepcji działa teraz w czasie rzeczywistym, zapewniając robotowi bieżącą świadomość obecności klifów, szczelin i luźnych odłamków.

W zmiennych środowiskach bentosowych prądy mogą w mgnieniu oka wzburzyć osad. Nawet kilkusekundowe opóźnienie może spowodować kolizję, utratę próbki lub uszkodzenie pojazdu. System WHOI pozwala operatorom — lub autonomicznemu oprogramowaniu sterującemu — podejmować decyzje sterujące w ułamku sekundy na podstawie nieustannie odświeżanego obrazu 3D.

Znaczenie dla nauki, przemysłu i obronności

Eksploracja naukowa

Biolodzy morscy i geolodzy badają kruche siedliska, takie jak kominy hydrotermalne czy koralowce głębinowe. Miejsca te są podatne na zakłócenia; podejście oparte wyłącznie na kamerze zmusza naukowców do przerwania pracy za każdym razem, gdy pojawią się chmury osadu, co grozi pominięciem istotnych obserwacji. Nawigacja wspomagana sonarem pozwala pojazdowi ROV zachować bezpieczną odległość, zmapować teren, a następnie zbliżyć się w celu wykonania obrazowania wysokiej rozdzielczości, gdy warunki się poprawią, chroniąc zarówno siedlisko, jak i dane.

Budowa i utrzymanie infrastruktury offshore

Instalacja rurociągów, kabli energetycznych czy zaworów podwodnych wymaga precyzyjnego pozycjonowania narzędzi w wodach, które rzadko pozostają spokojne. Statki obsługiwane przez ludzi wzburzają muł, zamieniając rutynowe zadanie w próbę odgadnięcia położenia na podstawie niejasnego obrazu. Hybrydowy system percepcji oferuje niezawodny widok typu „see-through”, który prowadzi pędniki i manipulatory bez czekania na opadnięcie osadu, co potencjalnie skraca czas realizacji projektów i zmniejsza ryzyko przypadkowego uderzenia w istniejącą infrastrukturę.

Morskie działania przeciwminowe

Niewybuchy często spoczywają pod warstwami mułu, co uniemożliwia ich wizualną detekcję. Tradycyjny sonar może określić ogólny kształt miny, ale nie jest w stanie potwierdzić jej tożsamości bez bezpośredniej widoczności. Dzięki połączeniu mapowania sonarowego z szybką estymacją głębokości, platforma WHOI nawiguje przez strefy „blackout”, pewnie pozycjonuje urządzenie do utylizacji i weryfikuje cel, gdy woda stanie się wystarczająco przejrzysta, by wykonać zdjęcie. Możliwość ta przekłada się na szybsze i bezpieczniejsze operacje oczyszczania pól minowych w spornych strefach przybrzeżnych.