Браслет з ультразвуковим керуванням забезпечує точне відтворення рухів роботизованої руки
Дослідники відкрили нові горизонти у взаємодії людини та робота, використовуючи ультразвукову візуалізацію для перетворення внутрішніх рухів м'язів у цифрові команди. Цей прорив забезпечує безпрецедентну спритність, дозволяючи роботизованим рукам відтворювати людські жести з нюансами маріонетки.
Розшифровка «маріонеткових ниток» людської спритності
Людська рука — це диво біологічної інженерії, що використовує 34 м'язи, 27 суглобів та понад 100 сухожиль і зв'язок для виконання складних рухів. Протягом багатьох років інженери намагалися відтворити таку спритність у роботах, оскільки традиційні сенсори часто не здатні зафіксувати складну внутрішню механіку, що відбувається під шкірою.
Щоб вирішити цю проблему, дослідницька група під керівництвом професора машинобудування MIT Сюаньхе Чжао (Xuanhe Zhao) спільно з колегами з Південно-Каліфорнійського університету розробила носимий ультразвуковий браслет. Пристрій використовує мініатюрну ультразвукову «наклейку» — зменшену версію перетворювачів медичного класу — у поєднанні зі спеціальним гідрогелем для прикріплення до шкіри. Візуалізуючи внутрішні структури зап'ястя, пристрій сприймає сухожилля та м'язи як нитки маріонетки, де стан цих «ниток» розкриває точне положення пальців і долоні.
Переклад рухів у реальному часі за допомогою ШІ
Основа цієї технології полягає в складній інтеграції штучного інтелекту. Система використовує алгоритм ШІ, навчений на величезному наборі даних ультразвукових зображень, ретельно розмічених людьми. Коли користувач рухає рукою, ультразвуковий пристрій фіксує зображення внутрішньої анатомії зап'ястя в реальному часі, яке ШІ миттєво перетворює на точні координати пальців і долоні.
В експериментальних демонстраціях це бездротове керування продемонструвало надзвичайну ефективність. Користувачі успішно керували роботизованими руками для виконання високоточних завдань, таких як виконання простої мелодії на піаніно або закидання мініатюрного баскетбольного м'яча в кошик. Окрім фізичної робототехніки, технологія поширюється і на цифрові середовища, дозволяючи користувачам маніпулювати віртуальними об'єктами — наприклад, здійснювати масштабування (pinch-to-zoom) на екрані комп'ютера — за допомогою природних жестів рук.
Масштабування для хірургії та гуманоїдної робототехніки
Хоча поточне обладнання приблизно за розміром як смартфон, дослідницька група зосереджена на подальшій мініатюризації та розширенні різноманітності наборів даних для навчання ШІ. Включаючи ширший спектр розмірів рук, форм пальців і складних жестів, дослідники прагнуть створити універсальний стандарт відстеження рук.
Наслідки для ширшого ландшафту ШІ та робототехніки є глибокими. Однією з найважливіших цілей є створення масивного набору високоточних даних про рухи людських рук. Ці дані можна використовувати для навчання гуманоїдних роботів виконанню делікатних завдань з високою ціною помилки, таких як хірургічні процедури з використанням роботів, де навіть міліметр похибки є неприпустимим. Оскільки ми рухаємося до майбутнього безперешкодної співпраці людини та машини, носимі засоби візуалізації можуть стати основним інтерфейсом для керування наступним поколінням спритних машин.
Основні висновки
- Захоплення внутрішнього руху: На відміну від поверхневих сенсорів, ультразвукова візуалізація відстежує фактичний рух сухожиль і м'язів, забезпечуючи вищу спритність.
- Переклад за допомогою ШІ: Удосконалений алгоритм перетворює ультразвукові зображення в реальному часі на точні цифрові команди як для роботизованого обладнання, так і для віртуальних інтерфейсів.
- Застосування у критично важливих сферах: Технологія прокладає шлях до навчання гуманоїдних роботів делікатним завданням, включаючи високоточну хірургію та складні ручні роботи.