Суть технологии: от BVH к CSV
NVIDIA представила обновленную версию SOMA Retargeter (версия 0.2), которая решает ключевую проблему робототехники: несоответствие антропометрии человека и робота. Инструмент берет входные данные в формате BVH (на базе скелета SOMA-X), масштабирует их под пропорции конкретного гуманоида, решает задачу инверсной кинематики (IK) с помощью Newton (на базе NVIDIA Warp) и применяет постобработку (например, фиксацию стоп). На выходе получается файл CSV с позициями, ориентацией и углами сочленений, готовый для обучения политик (policy training).
Поддерживаемые платформы и источники данных
В релизе v0.2 добавлена поддержка пяти популярных гуманоидных роботов. Разработчики могут использовать данные из захвата движения (BONES-SEED), реконструкции видео (GEM-X) или генеративных моделей (Kimodo, ARDY). Ниже приведена таблица совместимости:
| Робот | Производитель | Статус в v0.2 |
|---|---|---|
| Unitree G1 | Unitree | Поддержка (Reference config) |
| Unitree H2 | Unitree | Поддержка (Reference config) |
| Booster T1 | Booster | Поддержка (Reference config) |
| AgiBot X2 Ultra | AgiBot | Поддержка (Reference config) |
| AgiBot A3T3 | AgiBot | Поддержка (Reference config) |
Инструменты настройки и точность
Ключевым улучшением стала интеграция Robot Configurator и оптимизатора весов IK. Это позволяет не просто «скопировать» движение, а выровнять референсные позы робота и человека. На примере Booster T1 показано, что без корректного выравнивания референсной позы робот может неестественно развести руки, тогда как после настройки через Configurator движение становится анатомически корректным (одна рука машет, другая опущена). Экспорт данных в CSV позволяет напрямую использовать их в симуляторах для оценки баланса и точности отслеживания траекторий.
Как начать работу
Для тестирования доступен репозиторий с инструкциями по установке. Базовый пайплайн запускается через терминал:
- Установка и запуск viewer:
uv run python app/bvh_to_csv_converter.py --config assets/default_bvh_to_csv_converter_config.json --viewer gl - Использование Robot Configurator для добавления новых роботов или тонкой настройки IK-приоритетов.
- Пакетная обработка (batch-retargeting) для создания библиотек движений без визуализации.
Решение открывает путь к быстрому созданию обучающих наборов данных для моделей типа SONIC и ProtoMotions, сокращая время от идеи до симуляции поведения робота.
Источник: NVIDIA dev blog ↗
