Шанхайский разработчик гуманоидных роботов Agibot представил среду разработки Genie Sim 3.0, призванную устранить ряд узких место воплощенного ИИ: генерацию окружения, масштабируемость данных и стандартизированную оценку. Речь идет об объединении генерации сцен, симуляций, данных и оценок в единую многоразовую инфраструктуру.

Пространственная мировая модель позволяет создавать полностью интерактивные 3D-сцены из простых текстовых или графических входных данных. Система не требует ручного моделирования и настройки оборудования: разнообразные среды создаются с минимальными входными данными. Нейросеть обеспечивает генерацию сцен за минуты, тогда как у традиционных конвейеров подобные процессы занимают часы.

Синхронизированный вывод RGB, глубины, показаний лидара и других мультимодальных данных обеспечивает “восприятию” робота высокую достоверность.

Agibot разработал пять наборов задач, соответствующих ключевым способностям алгоритмов роботов – пониманию инструкций, пространственным рассуждениям, выполнению базовых навыков, адаптации и помехам и переносу от обучения к развертыванию. Тест Genie Sim Benchmark поддерживает популярные модели GO-2, серию Pi и серию GR00T.

GenieSim-Instruction оценивает соответствие между командами на естественном языке и поведением робота.

GenieSim-Spatial – рассуждение о геометрических и семантических пространственных отношениях.

GenieSim-Manip проверяет выполнение базовых навыков и составных долгосрочных задач.

GenieSim-Robust тестирует адаптивность в условиях реальных помех: при изменении освещения, шуме датчиков и вариациях окружения.

Sim2Real включает задачи для переноса на реального робота без предварительного обучения с высоким процентом успеха.

Genie Sim 3.0 представил интеграцию с фреймворком RLinf, обеспечивающую полный конвейер обучения с подкреплением (RL) для воплощенного ИИ. Подход дополняют VLA-модели (vision-language-action) используя недорогое RL-дообучение для преодоления разрыва между “обобщенным пониманием” и “точными микроманипуляциями”.

Genie Sim 3.0 охватывает полный стек разработки: среда – данные – обучение – оценка. \\