Что это такое?
Реализация метода машинного обучения, который учит роботов с ногами ходить по неровной местности, анализируя карту высот вокруг.
Этот проект — открытая реализация метода AME (Attention-Based Map Encoding) из научной статьи. Он воспроизводит подход к обучению роботов с ногами ходить по разнообразному рельефу. Используется робот Unitree G1 с 29 степенями свободы, симулятор NVIDIA Isaac...
Для исследователей в области робототехники и машинного обучения, которые работают с NVIDIA Isaac Sim и хотят экспериментировать с обучением передвижения по сложным поверхностям.
Обычные методы обучения ходьбе плохо обобщаются на незнакомый рельеф — робот, обученный на ровной поверхности, спотыкается на кочках.
Система использует карту высот местности вокруг робота, обрабатывает её свёрточной сетью, а затем с помощью механизма внимания объединяет информацию о рельефе с данными о состоянии робота. Это позволяет создавать политики движения, которые лучше адаптируются к новым типам поверхности.
Этот проект — открытая реализация метода AME (Attention-Based Map Encoding) из научной статьи. Он воспроизводит подход к обучению роботов с ногами ходить по разнообразному рельефу. Используется робот Unitree G1 с 29 степенями свободы, симулятор NVIDIA Isaac Lab и фреймворк RSL-RL с кастомными расширениями.
Авторы внесли три модификации в оригинальный метод из статьи: подают на вход CNN все три координаты (xyz), а не только высоту; используют свёртки с шагом для уменьшения вычислительных затрат; добавили глобальный контекст из AME2, что...
Стоит пробовать, если вы уже работаете в экосистеме Isaac Sim и хотите исследовать современные методы обучения локомоции. Проект — скорее исследовательский код, чем production-ready решение.
Проект выглядит свежим (использует актуальные версии Isaac Lab), но имеет мало звёзд и активность, что типично для нишевых исследовательских репозиториев.
Карточка собрана по данным GitHub, README и структуре репозитория. Это не официальная документация проекта.
Реализация метода машинного обучения, который учит роботов с ногами ходить по неровной местности, анализируя карту высот вокруг.
Для исследователей и разработчиков в области робототехники, которые используют NVIDIA Isaac Sim для симуляции и хотят экспериментировать с улучшением проходимости роботов.
Если проект подходит под ваш сценарий, можем помочь с установкой, интеграцией, доработкой или аккуратным форком под вашу инфраструктуру.