Исследовательская группа из Университета Дьюка создала революционную ИИ-платформу под названием WildFusion, которая меняет представление о том, как роботы воспринимают и преодолевают сложные пространства, объединяя различные сенсорные данные по аналогии с человеческим восприятием.
В отличие от традиционных роботизированных систем, полагающихся преимущественно на визуальные данные с камер или лидаров, WildFusion объединяет зрение с тактильной и акустической обратной связью. Система, установленная на четвероногом роботе, сочетает RGB-камеры и лидар с контактными микрофонами, тактильными датчиками и инерционными измерительными блоками, формируя целостное восприятие окружающей среды.
«WildFusion открывает новую главу в навигации и 3D-картографировании для роботов», — объясняет Боюань Чэнь, доцент Университета Дьюка. — «Она помогает роботам увереннее работать в неструктурированных, непредсказуемых условиях, таких как леса, зоны бедствий и бездорожье».
Особая инновационность WildFusion заключается в способности обрабатывать и интерпретировать сенсорные данные с помощью специализированных нейронных энкодеров. Во время движения робота контактные микрофоны фиксируют уникальные вибрации каждого шага — различая, например, сухие листья или грязь, — а тактильные датчики измеряют давление на лапы для оценки устойчивости. Этот богатый сенсорный поток поступает в модель глубокого обучения, использующую неявные нейронные представления, что позволяет роботу строить непрерывные карты окружающей среды даже при неполных визуальных данных.
Технология была успешно протестирована в государственном парке Эно-Ривер в Северной Каролине, где робот с высокой точностью ориентировался в густых лесах, на лугах и по гравийным дорожкам. Даже когда пятнистый солнечный свет сбивал с толку визуальные сенсоры, интегрированный подход WildFusion позволял точно предсказывать устойчивые точки опоры.
Перспективы применения выходят далеко за рамки академических исследований. WildFusion способен революционизировать поисково-спасательные операции, исследования опасных сред, инспекцию инфраструктуры и промышленную автоматизацию. В будущем планируется интеграция дополнительных сенсоров, таких как тепловые и датчики влажности, что еще больше повысит экологическую осведомленность роботов.
По мере того как роботы все глубже интегрируются в сложные сценарии реального мира, WildFusion становится важным шагом к созданию машин, способных адаптироваться и эффективно работать в непредсказуемых условиях, с которыми люди справляются с легкостью.