Дослідники з Університету Дьюка створили революційну AI-платформу під назвою WildFusion, яка змінює спосіб, у який роботи сприймають і долають складні середовища, поєднуючи кілька сенсорних сигналів, подібно до людського сприйняття.
На відміну від традиційних роботизованих систем, що переважно покладаються на візуальні дані з камер або LiDAR, WildFusion інтегрує зір із тактильним та акустичним зворотним зв’язком. Система, встановлена на чотириногому роботі, поєднує RGB-камери та LiDAR із контактними мікрофонами, тактильними сенсорами та інерційними вимірювальними блоками, створюючи комплексне уявлення про навколишнє середовище.
«WildFusion відкриває нову главу в навігації роботів і 3D-картографуванні», — пояснює Боюань Чен, доцент Університету Дьюка. — «Вона допомагає роботам впевненіше працювати в неструктурованих, непередбачуваних середовищах, таких як ліси, зони стихійних лих та бездоріжжя».
Особлива інноваційність WildFusion полягає у здатності обробляти й інтерпретувати сенсорні дані за допомогою спеціалізованих нейронних енкодерів. Під час руху робота контактні мікрофони виявляють унікальні вібрації від кожного кроку — розрізняючи, наприклад, сухе листя чи багнюку, — а тактильні сенсори вимірюють тиск лап для оцінки стійкості. Ця багата сенсорна інформація надходить у модель глибокого навчання, що використовує неявні нейронні представлення, дозволяючи роботу будувати безперервні карти середовища навіть за неповних візуальних даних.
Технологію успішно протестували у державному парку Ено-Рівер у Північній Кароліні, де робот із вражаючою точністю орієнтувався у густих лісах, на луках і гравійних стежках. Коли плямисте сонячне світло збивало з пантелику візуальні сенсори, інтегрований підхід WildFusion все одно точно визначав стійкі точки опори.
Значення цієї розробки виходить далеко за межі академічних досліджень. WildFusion може революціонізувати пошуково-рятувальні операції, дослідження небезпечних середовищ, інспекцію інфраструктури та промислову автоматизацію. У майбутньому планується додати ще більше сенсорів, наприклад, для вимірювання температури та вологості, що ще більше розширить екологічну обізнаність роботів.
У міру того, як роботи дедалі більше інтегруються у складні реальні сценарії, WildFusion є важливим кроком до створення машин, здатних адаптуватися та ефективно працювати у непередбачуваних середовищах, з якими людина справляється з легкістю.