17K ·GitHub
Что это такое?
Опенсорсный движок рабочих процессов (workflow) для Kubernetes, созданный для контейнеров: он управляет параллельными задачами, где каждый шаг вашего workflow выполняется в контейнере. Это проект, окончивший инкубатор CNCF (graduated).
Опенсорсный движок рабочих процессов (workflow) для Kubernetes, созданный для контейнеров: он управляет параллельными задачами, где каждый шаг вашего workflow выполняется в контейнере. Это проект, окончивший инкубатор CNCF (graduated).А где он вообще работает — у меня на компьютере или в кластере?В вашем кластере: Argo реализован как CRD для Kubernetes, а управлять им можно через веб-интерфейс, REST API (HTTP и gRPC) и CLI.
В вашем кластере: Argo реализован как CRD для Kubernetes, а управлять им можно через веб-интерфейс, REST API (HTTP и gRPC) и CLI.Как быстрее всего увидеть его в работе?Следуйте инструкции Quickstart в документации или попробуйте его, ничего не устанавливая, — через интерактивные учебные материалы или демо-окружение.
Следуйте инструкции Quickstart в документации или попробуйте его, ничего не устанавливая, — через интерактивные учебные материалы или демо-окружение.Что должно быть под рукой, прежде чем я смогу им пользоваться?Кластер Kubernetes — Argo разворачивается в него и запускает ваши шаги в контейнерах, так что на своём компьютере, кроме CLI, ставить ничего не нужно.
Кластер Kubernetes — Argo разворачивается в него и запускает ваши шаги в контейнерах, так что на своём компьютере, кроме CLI, ставить ничего не нужно.Для чего команды его используют?Пайплайны машинного обучения, обработка данных и пакетные задачи, автоматизация инфраструктуры и CI/CD. Его официально используют более 200 организаций, а на нём построены такие проекты, как Kubeflow Pipelines и Netflix Metaflow.
Пайплайны машинного обучения, обработка данных и пакетные задачи, автоматизация инфраструктуры и CI/CD. Его официально используют более 200 организаций, а на нём построены такие проекты, как Kubeflow Pipelines и Netflix Metaflow.Меня привяжут к конкретному облаку или операционной системе?Нет — он не зависит от облака и работает в любом кластере Kubernetes, а шаги workflow могут быть даже Windows-контейнерами.
Нет — он не зависит от облака и работает в любом кластере Kubernetes, а шаги workflow могут быть даже Windows-контейнерами.Как описать workflow?Как последовательность шагов или в виде DAG, который отражает зависимости между задачами, — при этом каждый шаг является контейнером. Движок также поддерживает циклы, параметризацию, условия, повторы и таймауты как на уровне шага, так и на уровне всего workflow.
Как последовательность шагов или в виде DAG, который отражает зависимости между задачами, — при этом каждый шаг является контейнером. Движок также поддерживает циклы, параметризацию, условия, повторы и таймауты как на уровне шага, так и на уровне всего workflow.Есть ли SDK, или всё придётся подключать через API?Есть официальные клиенты и SDK для Java, Golang, Python и TypeScript — для Python есть SDK под названием Hera, а клиент для TypeScript называется Juno.
Есть официальные клиенты и SDK для Java, Golang, Python и TypeScript — для Python есть SDK под названием Hera, а клиент для TypeScript называется Juno.Как шаги передают данные друг другу?Через входы и выходы на уровне шагов — артефакты (artifacts) и параметры. Артефакты можно хранить в S3, GCS, Azure Blob Storage, Artifactory, Alibaba Cloud OSS, Git, HTTP, в сыром виде (raw) или через собственные плагины.
Через входы и выходы на уровне шагов — артефакты (artifacts) и параметры. Артефакты можно хранить в S3, GCS, Azure Blob Storage, Artifactory, Alibaba Cloud OSS, Git, HTTP, в сыром виде (raw) или через собственные плагины.Можно ли запускать workflow по расписанию или автоматически?Да: workflow можно запускать по расписанию через cron или триггерить вебхуками, а exit hooks обрабатывают уведомления и очистку после завершения запуска.
Да: workflow можно запускать по расписанию через cron или триггерить вебхуками, а exit hooks обрабатывают уведомления и очистку после завершения запуска.What are similar projects?airflow, argo-cd, kubesphere, meshery, evenfire, taipy, helm, containerd
airflow, argo-cd, kubesphere, meshery, evenfire, taipy, helm, containerdWhich topics is it in?argo, pipelines, dag, gitops, batch-processing, workflow-engine, k8s, cncf, mlops, data-engineering, ci-cd, cloud-native
argo, pipelines, dag, gitops, batch-processing, workflow-engine, k8s, cncf, mlops, data-engineering, ci-cd, cloud-native