RoboCOIN - набор данных реальных двуруких роботов, открытый Wisdom Source в сотрудничестве с несколькими университетами.

Что такое RoboCOIN?

RoboCOIN - это первый в мире масштабный набор данных реальных машин для двуруких роботов, открытый Пекинским научно-исследовательским институтом искусственного интеллекта Zhiyuan совместно с рядом предприятий, колледжей и университетов. Он содержит 15 типов роботизированных платформ, 180 000 траекторий реальных операций и 421 тип сценариев задач. Важнейшей особенностью является использование иерархической системы аннотирования, задача разбирается на траектории, сегменты и кадры на трех уровнях, поддерживая полнофункциональное обучение от макропланирования до микроуправления. Поддерживаемый фреймворк CoRobot с открытым исходным кодом предоставляет стандартизированные инструменты обработки данных, которые можно использовать для быстрого вызова данных с помощью всего одной строки команды. Набор данных был использован для повышения производительности визуально-вербальных моделей действий, при этом коэффициент успешного выполнения сложных задач вырос с 20% до 70%, а количество загрузок превысило 100 000 за первую неделю после запуска.

Особенности RoboCOIN

• Масштаб и разнообразие: Содержит более 180 000 демонстрационных данных, охватывающих 421 задачу и 16 различных сценариев, таких как дом, бизнес, фабрика и т.д.
• Многофигурная платформа: Данные были собраны с 15 различных роботизированных платформ, включающих двуруких, полугуманоидных и гуманоидных роботов.
• Богатые данные датчиков: Содержит многоракурсные изображения RGB и глубины, а также подробные кинематические состояния.
• пирамида иерархических компетенций: Предоставляет аннотации многократного разрешения от концепций на уровне траектории, подзадач на уровне сегментов до кинематики на уровне кадра, позволяя моделям структурно обучаться от глобального планирования до точного управления.
• CoRobot Framework: Включает в себя язык оценки качества RTML, автоматизированный инструментарий аннотирования и унифицированную платформу управления мультифигурами, которая создает инфраструктуру для масштабируемого обучения робототехнике.

Основные преимущества RoboCOIN

• Крупномасштабные высококачественные данные: Предоставлено более 180 000 демонстрационных данных, охватывающих широкий спектр задач и сценариев, с большим объемом данных и высоким качеством, что обеспечивает прочную основу для исследований в области воплощенного интеллекта.
• Многоплатформенная универсальность: Данные собраны с 15 различных робототехнических платформ, охватывающих широкий спектр роботов различных морфологий и функций, с высокой степенью универсальности и адаптивности.
• Объединение мультимодальных данныхИнтеграция данных многочисленных датчиков, таких как RGB-изображения, изображения глубины и кинематические состояния, обеспечивает богатый информационный вход в модель и улучшает понимание окружающей среды и задачи.
• иерархическая система маркировки: Иерархическая аннотация от уровня траектории до уровня кадра используется для поддержки структурированного обучения от планирования макрозадач до управления микродвижениями и для повышения способности модели к обобщению.
• Автоматизированные инструменты аннотирования: Оснащен автоматизированной цепочкой инструментов аннотирования для повышения эффективности и качества аннотирования данных, снижения трудозатрат и ускорения создания и обновления наборов данных.
• совместное использование открытого исходного кода: Набор данных, инструментарий и технический отчет полностью открыты, что позволяет свободно использовать их индивидуальными разработчиками, исследовательскими институтами и предприятиями, а также способствует совместным инновациям в отрасли.
• Унифицированная платформа управленияСистема CoRobot позволяет унифицировать управление и планирование работы нескольких воплощенных платформ, поддерживает крупномасштабный сбор данных и обучение моделей, а также повышает эффективность НИОКР.
• Система оценки качества: Представляем язык оценки качества RTML для стандартизированной оценки аннотации данных и производительности модели для обеспечения качества данных и надежности модели.

Каков официальный сайт RoboCOIN?

• Веб-сайт проекта:: https://flagopen.github.io/RoboCOIN/
• Репозиторий Github:: https://github.com/FlagOpen/RoboCOIN
• Технический документ arXiv:: https://arxiv.org/pdf/2511.17441

Для кого предназначен RoboCOIN

• Исследователи искусственного интеллектаИсследователи, работающие в области воплощенного интеллекта, обучения робототехники и обучения с подкреплением, могут использовать наборы данных и инструменты RoboCOIN для обучения моделей и оптимизации алгоритмов.
• Инженер по робототехникеИнженеры, занимающиеся разработкой и применением робототехники, могут использовать этот набор данных для улучшения способности роботов работать в сложных условиях и эффективно выполнять задачи.
• преподаватели и студенты высших учебных заведенийПреподаватели и студенты факультетов компьютерных наук, искусственного интеллекта, робототехники и других смежных дисциплин могут использовать его для преподавательской практики и исследовательских проектов, чтобы способствовать академическим исследованиям и выращиванию талантов.
• Команда R&D технологических предприятийRoboCOIN может быть использован для ускорения разработки продуктов и повышения их конкурентоспособности научно-исследовательским персоналом компаний, занимающихся разработкой интеллектуальных роботов.
• разработчик алгоритмовРазработчики, заинтересованные в алгоритмах машинного обучения и глубокого обучения, могут экспериментировать и создавать новые алгоритмы, используя набор данных RoboCOIN.
• Разработчики промышленных приложенийРазработчики, создающие робототехнические приложения для бытовой, коммерческой, промышленной и медицинской сфер, смогут повысить полезность и адаптивность своих приложений на основе RoboCOIN.