Что это такое?
Unity ML-Agents Toolkit позволяет использовать игры и симуляции на Unity как среды для обучения ИИ-агентов с помощью глубокого обучения с подкреплением и обучения по имитации. Он сочетает SDK для Unity с Python API, чтобы разработчики игр и исследователи могли обучать NPC, тестировать сборки или оценивать дизайнерские решения.
Unity ML-Agents Toolkit позволяет использовать игры и симуляции на Unity как среды для обучения ИИ-агентов с помощью глубокого обучения с подкреплением и обучения по имитации. Он сочетает SDK для Unity с Python API, чтобы разработчики игр и исследователи могли обучать NPC, тестировать сборки или оценивать дизайнерские решения.Это пакет Unity, библиотека Python или и то, и другое?И то, и другое: гибкий SDK для Unity, который встраивается в вашу игру или собственную сцену Unity, и пакет Python, который запускает само обучение с подкреплением и имитацией и взаимодействует со средой Unity через Python API.
И то, и другое: гибкий SDK для Unity, который встраивается в вашу игру или собственную сцену Unity, и пакет Python, который запускает само обучение с подкреплением и имитацией и взаимодействует со средой Unity через Python API.Как запустить это в моём проекте?Добавьте пакет Unity com.unity.ml-agents (проверено для Unity 2020.1+) через Unity Package Manager, затем установите подходящий пакет mlagents для Python, чтобы запускать тренеры на вашей сцене. Актуальную версию смотрите в текущей документации по Unity Package.
Добавьте пакет Unity com.unity.ml-agents (проверено для Unity 2020.1+) через Unity Package Manager, затем установите подходящий пакет mlagents для Python, чтобы запускать тренеры на вашей сцене. Актуальную версию смотрите в текущей документации по Unity Package.Нужно ли отдельно настраивать Python и PyTorch?Да: обучение идёт через отдельный пакет Python с реализациями алгоритмов на основе PyTorch (PPO, SAC, MA-POCA, BC, GAIL), который отделён от SDK на C# со стороны Unity.
Да: обучение идёт через отдельный пакет Python с реализациями алгоритмов на основе PyTorch (PPO, SAC, MA-POCA, BC, GAIL), который отделён от SDK на C# со стороны Unity.Нужно ли по-прежнему пользоваться старой веб-документацией?Нет: веб-документация признана устаревшей. Основной и актуальный источник теперь — документация по Unity Package, а ветка develop прямо названа нестабильной.
Нет: веб-документация признана устаревшей. Основной и актуальный источник теперь — документация по Unity Package, а ветка develop прямо названа нестабильной.Это для разработчиков игр, исследователей или для обоих?Для обоих: разработчики игр получают инструменты для поведения NPC, автоматического тестирования сборок и оценки дизайна, а исследователи — простой Python API, чтобы опробовать обучение с подкреплением, имитационное обучение, нейроэволюцию или собственные алгоритмы в средах Unity.
Для обоих: разработчики игр получают инструменты для поведения NPC, автоматического тестирования сборок и оценки дизайна, а исследователи — простой Python API, чтобы опробовать обучение с подкреплением, имитационное обучение, нейроэволюцию или собственные алгоритмы в средах Unity.Отправляет ли набор инструментов какие-либо данные обратно в Unity?Да: пакет Unity включает аналитику внутри редактора для улучшения работы разработчика; она регулируется общей политикой конфиденциальности Unity.
Да: пакет Unity включает аналитику внутри редактора для улучшения работы разработчика; она регулируется общей политикой конфиденциальности Unity.Какие алгоритмы обучения с подкреплением и имитационного обучения есть в комплекте?PPO, SAC и MA-POCA для обучения с подкреплением (включая самообучение и кооперативные или соревновательные сценарии с несколькими агентами), а также BC и GAIL для имитационного обучения на основе демонстраций.
PPO, SAC и MA-POCA для обучения с подкреплением (включая самообучение и кооперативные или соревновательные сценарии с несколькими агентами), а также BC и GAIL для имитационного обучения на основе демонстраций.Можно ли использовать среды Unity вне родного рабочего процесса ML-Agents?Да: среду обучения Unity можно обернуть как среду Gym или PettingZoo, чтобы подключить её к другим библиотекам обучения с подкреплением.
Да: среду обучения Unity можно обернуть как среду Gym или PettingZoo, чтобы подключить её к другим библиотекам обучения с подкреплением.Есть ли примеры сред, на которых можно учиться?Да: в комплекте 17+ примеров сред Unity, охватывающих сценарии обучения с одним агентом, а также кооперативные и соревновательные сценарии с несколькими агентами.
Да: в комплекте 17+ примеров сред Unity, охватывающих сценарии обучения с одним агентом, а также кооперативные и соревновательные сценарии с несколькими агентами.What are similar projects?AirSim, lerobot, carla, Gymnasium, dqn-adaptive-cpu-scheduler, tianshou, DanKS, dopamine
AirSim, lerobot, carla, Gymnasium, dqn-adaptive-cpu-scheduler, tianshou, DanKS, dopamineWhich topics is it in?imitation-learning, unity3d, deep-reinforcement-learning, unity, neural-networks, game-engine, simulation, game-development, reinforcement-learning, c#, gaming, sdk
imitation-learning, unity3d, deep-reinforcement-learning, unity, neural-networks, game-engine, simulation, game-development, reinforcement-learning, c#, gaming, sdk