Skip to content
Build

Impulse su camino en la IA con Evidently AI

Evidently es un framework de Python de código abierto (Apache 2.0) para evaluar, probar y monitorizar aplicaciones LLM, sistemas RAG, agentes de IA y modelos de ML, con un panel que puede autoalojarse. Evidently Cloud, la versión alojada, ha cerrado.

Gratis · API

Veredicto de Stork sobre Evidently AI

Evidently es una sólida biblioteca gratuita y de código abierto de evaluación y deriva para equipos de Python, pero con Evidently Cloud cerrado ahora debe alojarla y mantenerla usted mismo.

Evidently AI reviewed by Stork AI · stork.ai/es/evidently-ai

720p. En 480p cuesta la mitad. Mínimo $0.05 por video.
Diez minutos de video hablado cuestan $2.
Usamos modelos abiertos en nuestras propias GPU. Cuando baja nuestro costo por minuto, baja el precio.
Haz hablar una fotoDesarrolladores: hay una API

Qué hace Evidently

Evidently (evidentlyai.com) es un framework de código abierto para probar sistemas de IA. La biblioteca de Python Evidently ejecuta evaluaciones con más de 100 métricas integradas y genera Reports y Test Suites que puede ver en Python, exportar a JSON o HTML, o ejecutar dentro de un pipeline de CI. Para productos con LLM, comprueba aspectos como el cumplimiento de las directrices y del formato, las alucinaciones y la exactitud factual, la PII, la calidad de la recuperación y la relevancia del contexto, el sentimiento, la toxicidad y el tono, además de evaluaciones personalizadas que combinan reglas, clasificadores y LLM como juez. Para modelos de ML predictivos, supervisa la deriva de datos, la calidad de los datos y el rendimiento del modelo. Las versiones más recientes añaden la generación de datos de prueba sintéticos y la optimización automatizada de prompts para LLM como juez.

Se instala con pip install evidently (o evidently[llm] para evaluaciones de LLM) o con conda. La biblioteca hermana Tracely, basada en OpenTelemetry, captura las entradas y salidas de una aplicación LLM en producción. La Evidently Platform de código abierto es un servicio de interfaz autoalojado (evidently ui) que almacena instantáneas de evaluación, trazas y conjuntos de datos en un sistema de archivos, una base de datos SQL como SQLite o Postgres, o almacenamiento compatible con S3, y los muestra en un panel de monitorización. La documentación de Evidently indica ahora que Evidently Cloud ya no está disponible como producto SaaS; la página de precios del sitio web redirige a la página principal.

Precios de Evidently

PlanPrecio mensualQué incluye
Biblioteca Evidently (código abierto)$0Biblioteca de Python, más de 100 métricas, Reports y Test Suites, Apache 2.0
Evidently Platform (código abierto, autoalojada)$0Rastreo, visor de trazas, panel de monitorización, gestión de conjuntos de datos, datos sintéticos, optimización de prompts, acceso a la API

Evidently Cloud, la versión alojada, ya no se ofrece. Todo lo que Evidently ofrece actualmente de forma pública es gratuito bajo Apache 2.0. Usted solo paga por la capacidad de cómputo y el almacenamiento en los que lo ejecute, y por cualquier API de LLM que utilice como juez. La documentación de Evidently enumera funciones que no están en la plataforma de código abierto: evaluaciones sin código, generación de datos y paneles, comparación en paralelo, alertas, tareas programadas, autenticación y control de acceso basado en roles. Esas funciones pertenecían a las ediciones comerciales Cloud y Enterprise autoalojada; con Cloud cerrado y sin página de precios en línea, Evidently no publica ningún precio actual para una edición comercial. Precio no publicado; contacte con ventas mediante el formulario de contacto si necesita esas funciones.

Soporte: los usuarios de código abierto disponen de documentación, una comunidad en Discord y issues en GitHub; Evidently indica que no ofrece soporte por correo electrónico para el código abierto.

Precios comprobados en la página de precios del proveedor el 10 de noviembre de 2026 (https://www.evidentlyai.com/pricing ahora redirige a la página principal); opciones de despliegue según la página de Evidently sobre código abierto frente a Cloud.

Funciones principales

Lo que indican el sitio web y la documentación de Evidently:

  • Más de 100 métricas integradas, reglas combinables, clasificadores y evaluaciones con LLM como juez
  • Comprobaciones de LLM para alucinaciones, PII, relevancia de la recuperación, toxicidad, tono y formato
  • Informes de deriva de datos, calidad de datos y rendimiento del modelo para modelos de ML predictivos
  • Test Suites declarativas para ejecutar evaluaciones como comprobaciones de aprobado/suspenso en pipelines de CI
  • Generación de datos de prueba sintéticos, incluidas entradas adversarias
  • Optimización automatizada de prompts para LLM como juez
  • Rastreo de aplicaciones LLM en producción basado en OpenTelemetry mediante la biblioteca Tracely
  • Panel de monitorización autoalojado con almacenamiento en archivos, SQL o compatible con S3

Para quién es más adecuado Evidently

Evidently es adecuado para equipos de Python que desean una evaluación y monitorización gratuitas y autoalojadas, y que se sienten cómodos ejecutándolas y manteniéndolas por su cuenta. Es poco habitual en cuanto a que cubre, en una sola biblioteca, tanto la monitorización clásica de ML (deriva de datos en modelos tabulares) como la evaluación de LLM, lo que ayuda a los equipos que trabajan con ambos. Sus Reports y Test Suites se integran fácilmente en notebooks y tareas de CI.

Si buscaba un producto gestionado y alojado, Evidently Cloud ya no existe: consulte Langfuse (código abierto con una nube alojada) o LangSmith si desarrolla con LangChain. Para rastreo y evaluaciones de código abierto con una interfaz sólida, pruebe Arize Phoenix. Para un framework de pruebas de LLM al estilo pytest con una plataforma alojada, compare Confident AI y, para métricas específicas de RAG, Ragas.

Qué dicen los usuarios

El repositorio de GitHub de Evidently mostraba unas 8.000 estrellas el 10 de noviembre de 2026, con su última versión, la v0.7.23, publicada el 11 de septiembre de 2026. Una reseña editorial en aicoolies (última verificación el 31 de marzo de 2026) lo describe como un framework de monitorización de IA de código abierto completo para cargas de trabajo tanto de ML como de LLM, pero señala que su enfoque centrado en Python y heredado del ML puede resultar menos intuitivo para equipos con un perfil puramente LLM; esa reseña sigue enumerando planes de Cloud alojados que ya no se venden. En Product Hunt, dos revisores elogian su detección de deriva y sus visualizaciones. El propio sitio de Evidently incluye testimonios de equipos de ML de empresas como DeepL, Wise y Realtor.com, principalmente sobre la monitorización de la deriva de datos. No se encontraron reseñas independientes en G2 ni en Reddit.

Ventajas

  • Totalmente de código abierto bajo Apache 2.0, gratuito para uso comercial
  • Cubre en una sola biblioteca la evaluación de LLM y la deriva de datos del ML clásico
  • Más de 100 métricas integradas y evaluaciones personalizadas con LLM como juez
  • El panel autoalojado mantiene los datos de evaluación en su propio almacenamiento
  • Con versiones publicadas de forma activa, con la v0.7.23 en septiembre de 2026

Desventajas

  • Evidently Cloud, la versión alojada, se ha descontinuado, por lo que debe ejecutarlo por su cuenta
  • La edición de código abierto carece de alertas, tareas programadas, inicio de sesión y control de acceso
  • No hay soporte por correo electrónico para los usuarios de código abierto; solo Discord y GitHub
  • Orientado primero a Python; un revisor indica que los equipos que solo trabajan con LLM pueden empezar más rápido con otras herramientas

Preguntas frecuentes

¿Es gratuito Evidently AI?

Sí. La biblioteca de Python Evidently y la Evidently Platform autoalojada son de código abierto bajo Apache 2.0 y su uso no tiene coste. Usted paga por su propia infraestructura y por cualquier API de LLM que utilice para las evaluaciones con LLM como juez.

¿Sigue disponible Evidently Cloud?

No. La documentación de Evidently indica que Evidently Cloud ya no está disponible como producto SaaS, y su página de precios ahora redirige a la página principal. Puede autoalojar la Evidently Platform de código abierto o usar la biblioteca con otras herramientas. Comprobado el 10 de noviembre de 2026.

¿Qué puede evaluar Evidently?

Sistemas basados en LLM como chatbots, aplicaciones RAG, agentes de IA y copilotos (alucinaciones, PII, relevancia de la recuperación, toxicidad, formato y comprobaciones personalizadas con LLM como juez), y modelos de ML predictivos (deriva de datos, calidad de datos y rendimiento del modelo), con más de 100 métricas integradas.

¿Cómo se instala Evidently?

Ejecute pip install evidently, o pip install evidently[llm] para evaluaciones de LLM; también está disponible en conda-forge. Para el rastreo de una aplicación LLM en producción, instale el paquete hermano con pip install tracely. Inicie el panel autoalojado con evidently ui.

¿Qué funciones faltan en la versión de código abierto de Evidently?

La documentación de Evidently enumera como funciones exclusivamente comerciales las evaluaciones sin código, la generación de datos y paneles, la comparación en paralelo, las alertas, las tareas programadas, la autenticación y el control de acceso basado en roles. La plataforma de código abierto incluye rastreo, evaluaciones, paneles, gestión de conjuntos de datos, datos sintéticos y optimización de prompts.

¿Puede Evidently usar Claude o Gemini como LLM juez?

El registro de cambios de Evidently indica que la versión 0.6.2 amplió la compatibilidad con litellm, de modo que las evaluaciones basadas en LLM pueden usar proveedores como Gemini y Anthropic, además de OpenAI.

Comparar alternativas

Evidently AI

Gratis · API

¿Te está gustando? Recibe uno así en tu bandeja cada mañana.

un correo al día · date de baja en dos clics · sin rastreadores de terceros