Что это такое?
Karotte — это опенсорсный фреймворк от Preference Model для создания надёжных сред обучения с подкреплением (RL), используемых при обучении выровненного ИИ.
Karotte — это опенсорсный фреймворк от Preference Model для создания надёжных сред обучения с подкреплением (RL), используемых при обучении выровненного ИИ.Karotte — это фреймворк или готовое приложение для обучения?Это Python-фреймворк с CLI (karotte run, karotte dashboard) для создания каркаса, запуска и изучения RL-сред и задач, а не предобученная модель или отдельное приложение.
Это Python-фреймворк с CLI (karotte run, karotte dashboard) для создания каркаса, запуска и изучения RL-сред и задач, а не предобученная модель или отдельное приложение.Как мне создать и запустить свою первую среду?Создайте среду из шаблона по умолчанию, затем выполните karotte run, чтобы собрать образ и запустить пример задачи; транскрипт записывается в out/transcript.json, а команда karotte dashboard out/ визуализирует его.
Создайте среду из шаблона по умолчанию, затем выполните karotte run, чтобы собрать образ и запустить пример задачи; транскрипт записывается в out/transcript.json, а команда karotte dashboard out/ визуализирует его.Что нужно установить перед запуском Karotte?Нужны Python 3.12+ и uv; каждый запуск выполняется внутри виртуальной машины — по умолчанию используется Apple container на macOS или Firecracker на Linux, но подойдут и docker или podman.
Нужны Python 3.12+ и uv; каждый запуск выполняется внутри виртуальной машины — по умолчанию используется Apple container на macOS или Firecracker на Linux, но подойдут и docker или podman.В чём подвох, если я распространяю образ, собранный с помощью Karotte?Собранные образы основаны на Amazon Linux 2023 и могут включать стороннее ПО под GPL/LGPL (gcc, GnuCOBOL, GNU Prolog, Free Pascal, Amazon Corretto, Clojure и, по желанию, Mojo); если вы распространяете такой образ, вы сами должны соблюдать условия этих лицензий.
Собранные образы основаны на Amazon Linux 2023 и могут включать стороннее ПО под GPL/LGPL (gcc, GnuCOBOL, GNU Prolog, Free Pascal, Amazon Corretto, Clojure и, по желанию, Mojo); если вы распространяете такой образ, вы сами должны соблюдать условия этих лицензий.Что показывает karotte dashboard?Он визуализирует файл транскрипта, записанный при запуске, и позволяет посмотреть, как прошла задача.
Он визуализирует файл транскрипта, записанный при запуске, и позволяет посмотреть, как прошла задача.Почему каждая задача запускается в виртуальной машине, а не напрямую на хосте?Для надёжности Karotte по умолчанию изолирует запуски в виртуальной машине (Apple container на macOS или Firecracker на Linux), хотя вместо этого можно использовать docker или podman.
Для надёжности Karotte по умолчанию изолирует запуски в виртуальной машине (Apple container на macOS или Firecracker на Linux), хотя вместо этого можно использовать docker или podman.Какие сторонние языковые тулчейны может включать среда?Шаблон language-toolchains может установить gcc, GnuCOBOL, GNU Prolog, Free Pascal, библиотеки в комплекте с Julia, Amazon Corretto и Clojure; Mojo доступен, но по умолчанию выключен.
Шаблон language-toolchains может установить gcc, GnuCOBOL, GNU Prolog, Free Pascal, библиотеки в комплекте с Julia, Amazon Corretto и Clojure; Mojo доступен, но по умолчанию выключен.Как часто обновляется Karotte?Каждое слияние в основную ветку запускает новый релиз.
Каждое слияние в основную ветку запускает новый релиз.Which topics is it in?deep-reinforcement-learning, ai-safety, virtualization, simulation, agent-framework, reinforcement-learning, sandbox, command-line-tool, framework, research, machine-learning, docker
deep-reinforcement-learning, ai-safety, virtualization, simulation, agent-framework, reinforcement-learning, sandbox, command-line-tool, framework, research, machine-learning, docker