16.6K ·GitHub
Что это такое?
Бесплатная китайскоязычная база знаний в стиле энциклопедии и указатель ресурсов по embodied AI — роботам, которые воспринимают окружающий мир и действуют в нём. Её поддерживает сообщество Lumina Embodied AI. Это один из самых популярных гидов по embodied AI в Китае, с более чем 16 000 звёзд на GitHub.
Бесплатная китайскоязычная база знаний в стиле энциклопедии и указатель ресурсов по embodied AI — роботам, которые воспринимают окружающий мир и действуют в нём. Её поддерживает сообщество Lumina Embodied AI. Это один из самых популярных гидов по embodied AI в Китае, с более чем 16 000 звёзд на GitHub.Это приложение, которое нужно установить, или то, что я читаю?То, что вы читаете. Запускать никакого софта не нужно: это GitHub-репозиторий со структурированными главами в формате markdown плюс подборка ссылок на курсы, статьи, симуляторы, бенчмарки, датасеты и лаборатории. Единственная практическая часть опирается на внешние инструменты, такие как симулятор RoboTwin 2.0.
То, что вы читаете. Запускать никакого софта не нужно: это GitHub-репозиторий со структурированными главами в формате markdown плюс подборка ссылок на курсы, статьи, симуляторы, бенчмарки, датасеты и лаборатории. Единственная практическая часть опирается на внешние инструменты, такие как симулятор RoboTwin 2.0.Как правильно с этим работать?Начните с раздела 'Start From Here': основной путь — это один практический проект (около недели на платформе симуляции RoboTwin 2.0) в паре с главами в стиле энциклопедии, к которым можно обращаться как к справочнику, углубляясь в тему.
Начните с раздела 'Start From Here': основной путь — это один практический проект (около недели на платформе симуляции RoboTwin 2.0) в паре с главами в стиле энциклопедии, к которым можно обращаться как к справочнику, углубляясь в тему.Подойдёт ли мне этот гид, если я не читаю по-китайски?Не really — сама база знаний написана по-китайски, это явно заявленная китайскоязычная база знаний. Однако многие ресурсы, на которые она ссылается, например курс по робототехнике Стэнфорда и научные статьи, — на английском.
Не really — сама база знаний написана по-китайски, это явно заявленная китайскоязычная база знаний. Однако многие ресурсы, на которые она ссылается, например курс по робототехнике Стэнфорда и научные статьи, — на английском.Это для исследователей в области робототехники или новичок тоже разберётся?Ориентируется на новичков — сами сопровождающие проекта начинали как новички в embodied AI и хотят помочь людям быстро построить общую картину области. Но практическая неделя предполагает, что вы умеете настроить среду симуляции и обучить модель.
Ориентируется на новичков — сами сопровождающие проекта начинали как новички в embodied AI и хотят помочь людям быстро построить общую картину области. Но практическая неделя предполагает, что вы умеете настроить среду симуляции и обучить модель.Мне нужен реальный робот или какое-то специальное железо, чтобы пройти туториал?Реальный робот не нужен — туториал полностью проходит в симуляторе RoboTwin 2.0. Но для полного прохождения нужна GPU как минимум с 16GB видеопамяти; один только шаг обучения ACT-политики требует около 12GB.
Реальный робот не нужен — туториал полностью проходит в симуляторе RoboTwin 2.0. Но для полного прохождения нужна GPU как минимум с 16GB видеопамяти; один только шаг обучения ACT-политики требует около 12GB.Что такое RoboTwin 2.0 и что нужно сделать в недельном туториале?RoboTwin 2.0 — это платформа симуляции манипуляции роботами, построенная вокруг железа типа ALOHA. В туториале вы настраиваете её, собираете 50 демо для задачи beatblockhammer, обучаете классическую ACT-политику imitation learning (около дня, ~12GB видеопамяти) и оцениваете результат — воспроизведённая ACT достигает примерно 56% успеха на бенчмарке democlean.
RoboTwin 2.0 — это платформа симуляции манипуляции роботами, построенная вокруг железа типа ALOHA. В туториале вы настраиваете её, собираете 50 демо для задачи beatblockhammer, обучаете классическую ACT-политику imitation learning (около дня, ~12GB видеопамяти) и оцениваете результат — воспроизведённая ACT достигает примерно 56% успеха на бенчмарке democlean.Что ещё охватывают справочные главы помимо туториала?Алгоритмы (vision foundation models, robot learning, VLA-модели, LLM+робототехника, навигация), Инфраструктура (симуляторы, бенчмарки, датасеты), Управление (теория управления, кинематика, SLAM, ROS) и Железо (встраиваемые системы, механический дизайн, датчики глубины и тактильные датчики, стенды для сбора данных), плюс раздел Useful Info с курсами, лабораториями, конференциями и списками статей.
Алгоритмы (vision foundation models, robot learning, VLA-модели, LLM+робототехника, навигация), Инфраструктура (симуляторы, бенчмарки, датасеты), Управление (теория управления, кинематика, SLAM, ROS) и Железо (встраиваемые системы, механический дизайн, датчики глубины и тактильные датчики, стенды для сбора данных), плюс раздел Useful Info с курсами, лабораториями, конференциями и списками статей.Гид до сих пор обновляется?Да — он был выложен в open source в марте 2025 года, в декабре 2025 преодолел отметку в 10 000 звёзд на GitHub, а в январе 2026 завершилась полная реорганизация гида.
Да — он был выложен в open source в марте 2025 года, в декабре 2025 преодолел отметку в 10 000 звёзд на GitHub, а в январе 2026 завершилась полная реорганизация гида.Почему авторы создали этот гид?Они — команда новичков в embodied AI, которые хотели поделиться собственным опытом обучения, помочь новичкам быстро сориентироваться в области и ускорить её развитие. Они приветствуют новых контрибьюторов через PR и сообщество Lumina.
Они — команда новичков в embodied AI, которые хотели поделиться собственным опытом обучения, помочь новичкам быстро сориентироваться в области и ускорить её развитие. Они приветствуют новых контрибьюторов через PR и сообщество Lumina.What are similar projects?RoboICL, lerobot, Motus2, Zero-WAM, Embodied-AI-Start, WholebodyVLA, flex-pi, Zetta-Embodiment
RoboICL, lerobot, Motus2, Zero-WAM, Embodied-AI-Start, WholebodyVLA, flex-pi, Zetta-EmbodimentWhich topics is it in?robot, world-models, embodied-ai, vlm, robotics, simulation, embedded, reinforcement-learning, hardware, knowledge-base, guide, computer-vision
robot, world-models, embodied-ai, vlm, robotics, simulation, embedded, reinforcement-learning, hardware, knowledge-base, guide, computer-vision