NitroGen - модель игрового ИИ с открытым исходным кодом от NVIDIA в сотрудничестве со Стэнфордом, Калифорнийским технологическим институтом и другими.

Что такое NitroGen?

NitroGen - это модель игрового ИИ с открытым исходным кодом, разработанная NVIDIA совместно со Стэнфордским университетом, Калифорнийским технологическим институтом и другими учреждениями, способная играть в более чем 1000 различных типов игр. Модель основана на архитектуре GROOT N1.5 и, анализируя 40 000 часов игровых видеоданных (включая аннотации к работе джойстика), достигает способности быстро переходить от игр с нулевой выборкой к новым играм. Инновация заключается в использовании технологии Diffusion Transformer для генерации команд действий непосредственно из пиксельных входов, что позволяет адаптировать все виды игр с помощью Gymnasium API. Тесты показали, что NitroGen может выполнять нетривиальные задачи без тонкой настройки, а коэффициент успешного выполнения задачи повышается до 52% в процессе миграционного обучения, что, как ожидается, в будущем найдет применение в робототехнике и других областях воплощенного интеллекта. Проект предоставил открытый доступ к полному коду, набору данных и предварительно обученным моделям.

Особенности NitroGen

• Адаптация к нескольким играм: NitroGen способен воспроизводить более 1000 игр, охватывающих широкий спектр жанров, включая ролевые игры, платформенные прыжки, battle royale, гонки и практически все остальные, будь то 2D или 3D игры.
• вход и выходМодель принимает на вход видеокадры игры и выдает реальные сигналы работы джойстика, естественно, адаптируясь ко всем играм, поддерживающим джойстики.
• Посттренировочный потенциалNitroGen поддерживает пост-обучение, поэтому, столкнувшись с новой игрой, вам не нужно учить правила с нуля, а можно быстро войти в курс дела, лишь немного подкорректировав или слегка адаптировав их, с возможностью обобщения между играми.
• Архитектурные основыВ основе лежит архитектура GROOT N1.5, изначально разработанная для робототехники и адаптированная для использования в играх.

Основные преимущества NitroGen

• Широкий спектр адаптаций: Он может адаптировать более 1000 различных типов игр, охватывая широкий спектр игровых жанров, таких как ролевые игры, прыжки с платформы, battle royale, гонки и т.д., и может эффективно работать как в 2D, так и в 3D играх.
• Эффективные возможности посттренировочного процесса: Когда вы сталкиваетесь с новой игрой, нет необходимости учить правила с нуля, достаточно лишь небольшой доработки или легкой адаптации, чтобы быстро начать игру, демонстрируя сильную способность к межигровому обобщению.
• Отличный показатель успешности миссий: В процедурно генерируемых игровых мирах, а также в новых играх, к которым ранее никто не прикасался, коэффициент успешности выполнения заданий повышается на 52% по сравнению с моделью, обученной с нуля, что является отличным показателем.
• совместное использование открытого исходного кода: Результаты исследования, включая веса предварительно обученной модели, полные наборы данных действий и соответствующий код, были открыты для дальнейшего изучения и развития разработчиками.
• Ввод и вывод данных на основе видеокадровТакая сквозная обработка позволяет напрямую адаптироваться ко всем играм, поддерживающим джойстики, принимая на вход игровые видеокадры и выводя реальные сигналы работы джойстика.
• Крупномасштабное обучение клонированию поведения: Обученный на основе более чем 40 000 часов видеозаписей операций игровых мастеров, охватывающих более 1000 игр, он изучает геймплей и стратегии различных типов игр, подражая поведению игроков-людей.

Что такое официальный сайт NitroGen

• Веб-сайт проекта:: https://nitrogen.minedojo.org
• Репозиторий Github:: https://github.com/MineDojo/NitroGen
• Библиотека моделей HuggingFace:: https://huggingface.co/nvidia/NitroGen
• бумажный адрес:: https://nitrogen.minedojo.org/assets/documents/nitrogen.pdf
• Набор данных HuggingFace:: https://huggingface.co/datasets/nvidia/NitroGen

Для кого предназначен NitroGen

• разработчик игрNitroGen позволяет быстро тестировать новый геймплей и механику, оптимизировать дизайн игры и повышать эффективность разработки.
• Игровые тестеры: С помощью NitroGen мы моделируем действия игроков и автоматизируем тесты для поиска и устранения проблем в игре.
• Создатели игрового контента: Вдохновитесь на создание руководств по играм, обучающих или развлекательных видеороликов с генерируемым NitroGen геймплеем и действиями.
• геймер: Особенно новые игроки могут использовать NitroGen в качестве вспомогательного инструмента для освоения игровых навыков и быстрого освоения сложных игр.
• Исследователи искусственного интеллектаNitroGen служит платформой для изучения обобщенного ИИ и возможностей межигрового обобщения, обеспечивая экспериментальную базу и информационную поддержку для соответствующих исследований.
• Преподаватели и студенты: В сфере образования NitroGen можно использовать для разработки образовательных игр или симуляторов учебной среды, помогающих в преподавании и обучении.