Революция обучения в контексте мира преобразует манипуляцию роботами
Исследователи из Хуачжунского университета науки и технологии и ArcheOne AI представили groundbreaking подход к манипуляции роботами, называемый обучением в контексте мира (WICL). Опубликованное на 2026-11-11 на arXiv, исследование вводит RoboScript, открытую платформу, которая достигает передового уровня производительности в роботах при использовании одной демонстрации без обновлений градиентов.
Обучение в контексте мира: переход к новому парадигме
Традиционные политики действия, обученные с помощью нейронных сетей, кодируют навыки манипуляции в весах сети, что ограничивает их адаптивность к новым окружениям. В отличие от этого, WICL разделяет обучение и веса, используя обучение в контексте. Замороженная базовая модель начинает с одной демонстрации, репетирует задачу в смоделированном окружении и хранит усвоенное знание в форме памяти о задаче. Эта память затем развертывается в новых, невидимых сценах, обеспечивая адаптивность в разнообразных визуальных распределениях.
Производительность и ключевые результаты
RoboScript был протестирован на RoboTwin 2.0 , бенчмарке 50 задач бимануальной манипуляции. Платформа достигла средней успешности 83.4% в чистых и случайных условиях, превзойдя самую сильную обученную политику действия более чем на 20 процентных пунктов. Примечательно, что этот успех был достигнут всего с одной демонстрацией на задачу, в то время как традиционные методы требовали 50 демонстрации. Производительность системы оставалась стабильной в случайных сценах, с минимальным снижением успешности с 83.6% до 83.2% .
Технические инновации
Модульная инфраструктура RoboScript позволяет роботам изучать задачи в контексте, а не в весах. Ключевые особенности включают:
- Память о задаче: Знания хранятся в контексте, позволяя безшовную передачу в новые окружения.
- Репетиция в симуляции: Задачи практикуются в смоделированном мире для уточнения понимания без изменения весов модели.
- Адаптация к разным корпусам: Платформа успешно передает усвоенные задачи на физические роботы с двумя руками, демонстрируя применимость в реальном мире.
Доступность Open-Source
Платформа RoboScript, вместе с ее реализацией WICL, доступна по лицензии Apache 2.0 на GitHub. Репозиторий, созданный на 2026-11-05 , уже привлек интерес сообщества, с 34 звездами и отсутствием открытых вопросов на дату публикации. Исследователи и разработчики могут получить доступ к коду по адресу https://github.com/ArcheOne-AI/RoboScript.
Импликации и будущие направления
WICL представляет собой значительный прогресс в манипуляции роботами, позволяя роботам изучать задачи с минимальными данными и адаптироваться к новым окружениям без повторного обучения. Масштабируемость подхода с базовыми моделями и его способность улучшаться через рефлексию предполагают широкий потенциал применения в промышленной автоматизации, сервисной робототехнике и за ее пределами. Дальнейшая проверка на дополнительных бенчмарках и в реальных сценариях ожидается для закрепления его воздействия.