Требования • Быстрый старт • Обучающие материалы по окружению • Доступные среды • Документация и ресурсы • Сообщество и поддержка • Цитаты

NeMo Gym — это библиотека для оценки и улучшения моделей и агентов, использующих среды. NeMo Gym предоставляет инфраструктуру для создания сред, масштабируемого проведения оценки и тренировок, а также коллекцию популярных ориентиров и тренировочных сред.

Среда — это полная система, с которой агент взаимодействует для выполнения задачи. Она состоит из набора данных (задачи для решения), агентного угла (взаимодействия модели с миром), верификатора (оценка завершения задачи) и состояния (контекст выполнения каждой задачи).

🎯 Когда использовать NeMo Gym

• Нужно оценивать модели или агенты в состоятельных средах (например, выполнение кода, вызов инструментов, песочницы)
• Вам нужна воспроизводимая оценка между командами с использованием общих сред и верификаторов
• Нужно использовать среды в масштабе — несколько повторов на задачу или тысячи одновременных запросов на обучение
• Вы хотите бесшовно переходить между оценкой, оптимизацией агентов и обучением

NeMo Gym

Requirements • Quick Start • Environment Tutorials • Available Environments • Documentation & Resources • Community & Support • Citations

NeMo Gym is a library for evaluating and improving models and agents using environments. NeMo Gym provides infrastructure to develop environments, scalably run evaluation and training, and a collection of popular benchmarks and training environments.

An environment is the complete system an agent interacts with to complete a task. It consists of a dataset (tasks to solve), an agent harness (how the model interacts with the world), a verifier (task completion scoring), and state (per-task execution context).

🎯 When to Use NeMo Gym

• You need to evaluate models or agents in stateful environments (e.g. code execution, tool calling, sandboxes)
• You want reproducible evaluation across teams using shared environments and verifiers
• You need to use environments at scale — multiple repeats per task, or thousands of concurrent requests for training
• You want to seamlessly transition between evaluation, agent optimization, and training

If you’re scoring model outputs with a stateless check and don’t need scale or training, a script is probably sufficient.

🏆 What NeMo Gym Provides

• Modular, extensible interfaces for agents, environments, tasks, and verifiers
• Environment hub of popular benchmarks and training environments
• Use your own agents or choose from built-in harnesses
• Scale to thousands of concurrent environments
• Train with the RL framework of your choice
• Optional OpenTelemetry tracing across the agent, model, and resources servers
• Battle-tested in production Nemotron training

🌎 Ecosystem

NeMo Gym is a component of NVIDIA NeMo, a GPU-accelerated platform for training generative AI models and optimizing AI agents. NeMo Gym is integrated with the broader agentic ecosystem - see the Ecosystem page for more details.