Skip to content

Argo Workflows

Argo Workflows es un motor de flujo de trabajo de código abierto, nativo de Kubernetes, para orquestar trabajos paralelos, definiendo flujos de trabajo como YAML para pipelines de datos de propósito general, CI/CD y tareas de machine learning.

Gratis · Kubernetes · API

stork0:00 / 0:04
Lucia, una de 89 voces. Pulsa reproducir.
Una locución cuesta $0.05 el minuto.
Escribe hasta 20 000 caracteres y recibe un MP3. 89 voces, 38 idiomas. Tres gratis al día, de un minuto cada una.
Crear una locución

¿Qué es Argo Workflows?

Argo Workflows es una herramienta de motor de flujo de trabajo desarrollada por Argo Project que permite a desarrolladores, ingenieros de DevOps, ingenieros de ML, ingenieros de datos e ingenieros de plataforma orquestar trabajos paralelos en Kubernetes. Define los flujos de trabajo como YAML, lo que lo hace adecuado para pipelines de datos de propósito general, CI/CD y tareas de machine learning dentro de un entorno Kubernetes.

Implementado como una Custom Resource Definition (CRD) de Kubernetes, cada paso en un flujo de trabajo se ejecuta como un contenedor. El motor soporta flujos de trabajo basados en Directed Acyclic Graph (DAG) y por pasos, permitiendo a los usuarios modelar flujos de trabajo de múltiples pasos como una secuencia de tareas o capturar dependencias entre tareas usando un grafo. Este enfoque nativo de Kubernetes asegura que sea ligero, escalable y agnóstico de la nube, ejecutándose en cualquier clúster de Kubernetes. Como proyecto graduado de Cloud Native Computing Foundation (CNCF), Argo Workflows significa su madurez y amplia adopción.

Características Clave de Argo Workflows

Argo Workflows proporciona un conjunto completo de características para orquestar flujos de trabajo nativos de contenedores en Kubernetes, aprovechando su sintaxis declarativa YAML y la implementación de CRD para operaciones robustas y escalables.

  • Motor de flujo de trabajo nativo de Kubernetes, implementado como una Custom Resource Definition (CRD).
  • Orquesta trabajos paralelos, con cada paso ejecutado como un contenedor.
  • Define flujos de trabajo usando YAML, soportando flujos de trabajo basados en Directed Acyclic Graph (DAG) y por pasos.
  • Permite modelar flujos de trabajo de múltiples pasos como una secuencia de tareas o capturar dependencias entre tareas.
  • Soporta la gestión de artefactos para S3, GCS, HTTP y otras soluciones de almacenamiento.
  • Proporciona plantillas de flujo de trabajo para la reutilización y programación cron para la ejecución automatizada.
  • Incluye una interfaz de usuario para la visualización y gestión de flujos de trabajo.
  • Ofrece mecanismos de tolerancia a fallos para una ejecución resiliente del flujo de trabajo.
  • Soporta solicitudes y límites de recursos a nivel de pod a través del campo podResources (introducido en 4.1.0).
  • Presenta un modo initlessPod opcional para eliminar el contenedor init argoexec (introducido en 4.1.0).

¿Quién debería usar Argo Workflows?

Argo Workflows está diseñado para profesionales técnicos que requieren una orquestación robusta, escalable y nativa de Kubernetes para varios escenarios de ejecución de trabajos paralelos.

  • Desarrolladores: Para automatizar procesos de construcción, prueba y despliegue dentro de entornos Kubernetes, ejecutando pipelines de CI/CD de forma nativa.
  • Ingenieros de DevOps: Para la automatización de infraestructura, orquestando despliegues de aplicaciones complejas y distribuidas, y gestionando trabajos por lotes como copias de seguridad.
  • Ingenieros de ML: Para ejecutar trabajos de computación intensiva para el entrenamiento de modelos, experimentación y construcción de plataformas MLOps.
  • Ingenieros de Datos: Para orquestar pipelines complejos de procesamiento de datos, incluyendo procesos ETL (Extract, Transform, Load) y análisis de datos a gran escala.
  • Ingenieros de Plataforma: Para construir y gestionar plataformas internas que requieren un motor de flujo de trabajo flexible y escalable en Kubernetes.

Cómo usar Argo Workflows

Para empezar a usar Argo Workflows, los usuarios suelen instalar el controlador de Argo Workflows en un clúster de Kubernetes existente y luego definen sus flujos de trabajo usando manifiestos YAML.

  1. Instalar Argo Workflows: Despliegue el controlador de Argo Workflows y los componentes asociados en un clúster de Kubernetes usando kubectl o Helm.
  2. Definir un Flujo de Trabajo: Cree un archivo YAML que especifique el flujo de trabajo, incluyendo sus pasos, contenedores, entradas, salidas y dependencias (por ejemplo, un DAG).
  3. Enviar el Flujo de Trabajo: Aplique el manifiesto YAML al clúster de Kubernetes usando kubectl apply -f your-workflow.yaml.
  4. Monitorear la Ejecución del Flujo de Trabajo: Use la interfaz de usuario de Argo Workflows o argo CLI para monitorear el estado, los registros y los artefactos de los flujos de trabajo en ejecución.
  5. Gestionar Artefactos: Configure repositorios de artefactos (por ejemplo, S3, GCS) para almacenar y recuperar datos generados por los pasos del flujo de trabajo.
  6. Utilizar Plantillas: Cree y reutilice plantillas de flujo de trabajo para tareas comunes para optimizar la definición y el mantenimiento del flujo de trabajo.

Precios y Planes de Argo Workflows

Argo Workflows es un proyecto de código abierto y está disponible de forma gratuita. No hay costos directos asociados con el uso del motor principal de Argo Workflows, aunque los usuarios incurrirán en costos por la infraestructura subyacente de Kubernetes (por ejemplo, tarifas del proveedor de la nube para computación, almacenamiento y redes) donde se despliega Argo Workflows.

  • Código Abierto: Gratis

Ventajas

  • Kubernetes-native design, running all pipeline steps on existing Kubernetes cluster resources, ensuring scalability and cloud-agnosticism.
  • Declarative workflow configuration using YAML, simplifying definition and management of complex automation.
  • Supports both sequential tasks and Directed Acyclic Graphs (DAGs) for managing task dependencies.
  • Robust features including artifact management, parallel execution, and a full-featured UI for visualization and monitoring.
  • Open-source project with a healthy and active community, evidenced by over 16,200 GitHub stars and 75% production usage by 2025.
  • Potential for cost optimization; one user reported a 40% reduction in Kubernetes bills by consolidating CronJobs into Argo Workflows.

Desventajas

  • Integration with Git platforms can present challenges for some users.
  • Requires familiarity with Kubernetes concepts and YAML for effective workflow definition and management.
  • While open-source, operational overhead for deployment, maintenance, and scaling rests entirely on the user's team.
  • The learning curve for complex workflow patterns and advanced features may be steep for new users.

Argo Workflows vs Competidores

Argo Workflows opera dentro de un panorama competitivo de herramientas de orquestación de flujos de trabajo, cada una con especializaciones y enfoques arquitectónicos distintos.

Argo Workflows

Gratis · Kubernetes · API

¿Te está gustando? Recibe uno así en tu bandeja cada mañana.

un correo al día · date de baja en dos clics · sin rastreadores de terceros