Глубоководные исследования замедляются, когда облака осадочных пород ослепляют оптические камеры, заставляя ROV двигаться вслепую. Исследователи из Океанографического института Вудс-Хоул (WHOI) разработали систему, которая объединяет возможности сонара с передовыми алгоритмами для навигации в «мутной воде» в режиме реального времени.

Соединяя возможности сонара и машинного зрения

Подводные роботы постоянно вынуждены выбирать между видимостью и разрешением. Камеры обеспечивают четкие изображения, но становятся бесполезными, как только ROV поднимает песок. Сонар проникает сквозь взвесь, но дает лишь грубую детализацию, недостаточную для проведения тонких манипуляций.

Эми Фанг (SM ’23, PhD ’26) и Ричард Камилли (SM ’00, PhD ’03) решили эту проблему с помощью гибридного подхода. Сначала система выполняет быстрое сканирование сонаром для картирования морского дна. Эта карта обеспечивает аппарату безопасную пространственную ориентацию независимо от прозрачности воды. Затем ROV приближается к целям до тех пор, пока осадок не осядет или пока расстояние не сократится достаточно для того, чтобы камеры высокого разрешения могли зафиксировать мелкие детали.

Обработка в реальном времени с помощью алгоритмов сопоставления изображений

Картирование морского дна «на лету» требует экстремальной вычислительной эффективности. Команда WHOI внедрила алгоритм сопоставления изображений, изначально созданный французской исследовательской группой. Алгоритм рассматривает каждый пиксель сонара как ориентир глубины, оценивая, насколько далеко под ним находится поверхность. Объединяя эти оценки глубины, программное обеспечение строит 3D-картину гораздо быстрее, чем традиционные методы акустической реконструкции. Такая скорость позволяет автономным или дистанционно управляемым системам принимать мгновенные решения по управлению и избегать столкновений.

Значение для глубоководной промышленности и обороны

Возможность «видеть» сквозь осадок меняет облик нескольких критически важных секторов. Ученые могут собирать непрерывные данные в нестабильных бентических зонах. Инженеры получают надежный обзор для подводного строительства и обслуживания инфраструктуры, где человеческая деятельность постоянно поднимает ил.

Эта технология также укрепляет обороноспособность. В миссиях по поиску и обезвреживанию мин неразорвавшиеся боеприпасы часто скрываются под слоями ила. Система «сонар-зрение» ориентируется в условиях «затемнения», уверенно позиционирует устройства для утилизации, а затем проверяет цель, когда вода становится достаточно чистой для снимка камеры. Этот сдвиг превращает подводных роботов из пассивных наблюдателей в активных интеллектуальных агентов на морском дне.

Основные выводы

  • Гибридная навигация: Сонар создает первоначальный набросок рельефа; камеры высокого разрешения обеспечивают детальную визуализацию при улучшении условий.
  • Скорость алгоритмов: Алгоритм сопоставления изображений французского происхождения оценивает глубину непосредственно по 2D-данным сонара, обеспечивая 3D-картографирование в реальном времени.
  • Универсальность применения: Система полезна для океанографии, подводного строительства, обслуживания инфраструктуры и обезвреживания опасных мин.

Система «сонар-зрение» на базе ИИ от WHOI теперь позволяет подводным роботам строить 3D-картину окружающего пространства в режиме реального времени, даже когда облака осадочных пород делают камеры бесполезными.

От слепых зон к 3D-картам в реальном времени

Традиционные ROV полагаются на оптические камеры для получения деталей, но одно поднятое облако песка может превратить четкий обзор в непрозрачную стену. Сонар — звуковые импульсы, отражающиеся от морского дна — видит сквозь муть, однако его необработанные данные лишены мелких деталей, необходимых для таких задач, как захват хрупкого образца или протягивание кабеля.

Фанг и Камилли подошли к решению проблемы компромисса напрямую. Их гибридная система выполняет быстрое сканирование сонаром, передает данные во французский алгоритм сопоставления изображений и рассматривает каждый пиксель сонара как ориентир глубины. Объединяя эти ориентиры, программное обеспечение создает полную 3D-модель достаточно быстро, чтобы ROV мог корректировать свой курс на лету.

Когда аппарат достигает более чистой воды — либо отходя от места возмущения, либо дожидаясь оседания осадка — бортовые камеры высокого разрешения делают детальные снимки. По сути, сонар служит «зрением» низкого разрешения, которое удерживает робота в ориентации до тех пор, пока оптические «глаза» не смогут взять управление на себя.

Почему важна скорость

Прежним конвейерам обработки данных требовались секунды или даже минуты, чтобы превратить сигналы сонара в 3D-карту — это слишком медленно для ROV, который должен уклоняться от препятствий или выравнивать манипулятор. Алгоритм французского происхождения обходит это «узкое место», оценивая глубину непосредственно по 2D-изображению сонара, что устраняет необходимость в полной акустической реконструкции. Цикл восприятия теперь работает в реальном времени, обеспечивая роботу ежесекундное понимание расположения обрывов, расщелин и рыхлого мусора.

В изменчивой придонной среде течения могут мгновенно взбалтывать осадочные породы. Задержка даже в несколько секунд может привести к столкновению, потере образца или повреждению аппарата. Система WHOI позволяет операторам — или автономному программному обеспечению — принимать мгновенные решения по управлению на основе непрерывно обновляемой 3D-картины.

Значение для науки, промышленности и обороны

Научные исследования

Морские биологи и геологи исследуют хрупкие среды обитания, такие как гидротермальные источники или глубоководные кораллы. Эти участки подвержены нарушениям; подход, основанный исключительно на камерах, вынуждает исследователей делать паузы при каждом появлении облаков взвеси, что создает риск пропуска важных наблюдений. Навигация с поддержкой сонара позволяет ROV оставаться на безопасном расстоянии, картировать рельеф, а затем приближаться для съемки высокого разрешения, как только условия прояснятся, сохраняя как среду обитания, так и данные.

Морское строительство и техническое обслуживание

Установка трубопроводов, силовых кабелей или подводных клапанов требует точного позиционирования инструментов в водах, которые редко остаются спокойными. Суда под управлением человека взбалтывают ил, превращая рутинную задачу в игру в угадывание. Гибридная система восприятия обеспечивает надежный эффект «сквозного зрения», который направляет двигатели и манипуляторы, не дожидаясь оседания взвеси, что потенциально сокращает сроки реализации проектов и снижает риск случайных столкновений с существующей инфраструктурой.

Противоминная оборона ВМФ

Неразорвавшиеся боеприпасы часто погребены под слоями ила, что делает их визуальное обнаружение невозможным. Традиционный сонар может определить общие очертания мины, но не может подтвердить её тип без прямой видимости. Объединяя сонарное картирование с быстрым определением глубины, платформа WHOI проходит через зоны «потери видимости», уверенно позиционирует устройство для уничтожения и подтверждает цель, как только вода становится достаточно прозрачной для снимка камеры. Эта возможность обеспечивает более быстрые и безопасные операции по разминированию в спорных прибрежных зонах.