Skip to content
Build

Impulsione sua jornada em IA com o Evidently AI

O Evidently é um framework Python de código aberto (Apache 2.0) para avaliar, testar e monitorar aplicações LLM, sistemas RAG, agentes de IA e modelos de ML, com um painel que pode ser auto-hospedado. O Evidently Cloud hospedado foi encerrado.

Grátis · API

Veredito da Stork sobre Evidently AI

O Evidently é uma biblioteca gratuita e de código aberto de avaliação e drift sólida para equipes Python, mas, com o Evidently Cloud encerrado, agora você precisa hospedá-lo e mantê-lo por conta própria.

Evidently AI reviewed by Stork AI · stork.ai/pt/evidently-ai

720p. Em 480p custa a metade. Mínimo de $0.05 por vídeo.
Dez minutos de vídeo falante custam $2.
Rodamos modelos abertos em nossas próprias GPUs. Quando nosso custo por minuto cai, o preço cai também.
Faça uma foto falarDesenvolvedores: existe uma API

O que o Evidently faz

O Evidently (evidentlyai.com) é um framework de código aberto para testar sistemas de IA. A biblioteca Python Evidently executa avaliações com mais de 100 métricas integradas e gera Reports e Test Suites que você pode visualizar em Python, exportar para JSON ou HTML, ou executar dentro de um pipeline de CI. Para produtos de LLM, ela verifica itens como aderência a diretrizes e formato, alucinações e factualidade, PII, qualidade de recuperação e relevância de contexto, sentimento, toxicidade e tom, além de avaliações personalizadas que combinam regras, classificadores e LLMs como juízes. Para modelos de ML preditivos, ela acompanha data drift, qualidade de dados e desempenho do modelo. Versões mais recentes adicionam geração de dados de teste sintéticos e otimização automatizada de prompts para LLMs juízes.

Você a instala com pip install evidently (ou evidently[llm] para avaliações de LLM) ou com conda. A biblioteca irmã Tracely, baseada em OpenTelemetry, captura entradas e saídas de uma aplicação LLM em produção. A Evidently Platform de código aberto é um serviço de interface auto-hospedado (evidently ui) que armazena snapshots de avaliação, traces e datasets em um sistema de arquivos, em um banco de dados SQL como SQLite ou Postgres, ou em armazenamento compatível com S3, e os exibe em um painel de monitoramento. A documentação do Evidently agora informa que o Evidently Cloud não está mais disponível como produto SaaS; a página de preços do site redireciona para a página inicial.

Preços do Evidently

PlanoPreço mensalO que está incluído
Biblioteca Evidently (código aberto)$0Biblioteca Python, mais de 100 métricas, Reports e Test Suites, Apache 2.0
Evidently Platform (código aberto, auto-hospedada)$0Tracing, visualizador de traces, painel de monitoramento, gerenciamento de datasets, dados sintéticos, otimização de prompts, acesso via API

O Evidently Cloud hospedado não é mais oferecido. Tudo o que o Evidently oferece publicamente hoje é gratuito sob Apache 2.0. Você paga apenas pela capacidade de processamento e pelo armazenamento em que o executa, e por qualquer API de LLM que utilizar como juiz. A documentação do Evidently lista recursos que não estão na plataforma de código aberto: avaliações sem código, geração de dados e painéis, comparação lado a lado, alertas, tarefas agendadas, autenticação e controle de acesso baseado em funções. Esses recursos pertenciam às edições comerciais Cloud e Enterprise auto-hospedada; com o Cloud encerrado e sem página de preços online, o Evidently não publica nenhum preço atual para uma edição comercial. Preço não divulgado; entre em contato com o setor de vendas pelo formulário de contato se precisar desses recursos.

Suporte: usuários da versão de código aberto têm acesso à documentação, a uma comunidade no Discord e às issues do GitHub; o Evidently informa que não oferece suporte por e-mail para a versão de código aberto.

Preços verificados na página de preços do fornecedor em 10 de novembro de 2026 (https://www.evidentlyai.com/pricing agora redireciona para a página inicial); opções de implantação a partir da página de código aberto vs. Cloud do Evidently.

Principais recursos

O que o site e a documentação do Evidently listam:

  • Mais de 100 métricas integradas, regras combináveis, classificadores e avaliações com LLM como juiz
  • Verificações de LLM para alucinações, PII, relevância de recuperação, toxicidade, tom e formato
  • Relatórios de data drift, qualidade de dados e desempenho do modelo para modelos de ML preditivos
  • Test Suites declarativas para executar avaliações como verificações de aprovação/reprovação em pipelines de CI
  • Geração de dados de teste sintéticos, incluindo entradas adversariais
  • Otimização automatizada de prompts para LLMs juízes
  • Tracing baseado em OpenTelemetry de aplicações LLM em produção por meio da biblioteca Tracely
  • Painel de monitoramento auto-hospedado com armazenamento em arquivo, SQL ou compatível com S3

Para quem o Evidently é mais indicado

O Evidently é adequado para equipes Python que desejam avaliação e monitoramento gratuitos e auto-hospedados e que se sentem à vontade para executá-los e mantê-los por conta própria. Ele é incomum por abranger, em uma única biblioteca, tanto o monitoramento de ML clássico (data drift em modelos tabulares) quanto a avaliação de LLM, o que ajuda equipes que trabalham com ambos. Seus Reports e Test Suites se integram facilmente a notebooks e jobs de CI.

Se você queria um produto gerenciado e hospedado, o Evidently Cloud deixou de existir: considere o Langfuse (código aberto com nuvem hospedada) ou o LangSmith, caso você desenvolva com LangChain. Para tracing e avaliações de código aberto com uma interface robusta, experimente o Arize Phoenix. Para um framework de testes de LLM no estilo pytest com plataforma hospedada, compare o Confident AI e, para métricas específicas de RAG, o Ragas.

O que dizem os usuários

O repositório no GitHub do Evidently tinha cerca de 8.000 estrelas em 10 de novembro de 2026, com sua versão mais recente, a v0.7.23, lançada em 11 de setembro de 2026. Uma análise editorial no aicoolies (última verificação em 31 de março de 2026) o descreve como um framework completo de monitoramento de IA de código aberto para cargas de trabalho de ML e LLM, mas afirma que sua abordagem centrada em Python e com herança de ML pode parecer menos intuitiva para equipes com experiência exclusivamente em LLM; essa análise ainda lista planos Cloud hospedados que não são mais vendidos. No Product Hunt, dois avaliadores elogiam a detecção de drift e as visualizações. O próprio site do Evidently traz depoimentos de equipes de ML de empresas como DeepL, Wise e Realtor.com, principalmente sobre monitoramento de data drift. Não foram encontradas avaliações independentes no G2 ou no Reddit.

Prós

  • Totalmente de código aberto sob Apache 2.0, gratuito para uso comercial
  • Abrange avaliação de LLM e data drift de ML clássico em uma única biblioteca
  • Mais de 100 métricas integradas, além de avaliações personalizadas com LLM como juiz
  • O painel auto-hospedado mantém os dados de avaliação no seu próprio armazenamento
  • Lançamentos frequentes, com a v0.7.23 em setembro de 2026

Contras

  • O Evidently Cloud hospedado foi descontinuado, portanto é necessário executá-lo por conta própria
  • A edição de código aberto não tem alertas, tarefas agendadas, login nem controle de acesso
  • Sem suporte por e-mail para usuários da versão de código aberto; apenas Discord e GitHub
  • Prioriza Python; um avaliador afirma que equipes que trabalham apenas com LLMs podem começar mais rápido em outras ferramentas

Perguntas frequentes

O Evidently AI é gratuito?

Sim. A biblioteca Python Evidently e a Evidently Platform auto-hospedada são de código aberto sob a licença Apache 2.0 e podem ser usadas sem custo. Você paga pela sua própria infraestrutura e por qualquer API de LLM que utilizar em avaliações com LLM como juiz.

O Evidently Cloud ainda está disponível?

Não. A documentação do Evidently informa que o Evidently Cloud não está mais disponível como produto SaaS, e a página de preços agora redireciona para a página inicial. Você pode auto-hospedar a Evidently Platform de código aberto ou usar a biblioteca com outras ferramentas. Verificado em 10 de novembro de 2026.

O que o Evidently pode avaliar?

Sistemas baseados em LLM, como chatbots, aplicações RAG, agentes de IA e copilots (alucinações, PII, relevância de recuperação, toxicidade, formato e verificações personalizadas com LLM como juiz), e modelos de ML preditivos (data drift, qualidade de dados e desempenho do modelo), usando mais de 100 métricas integradas.

Como instalo o Evidently?

Execute pip install evidently ou pip install evidently[llm] para avaliações de LLM; ele também está disponível no conda-forge. Para rastrear uma aplicação LLM em produção, instale o pacote irmão com pip install tracely. Inicie o painel auto-hospedado com evidently ui.

Quais recursos não estão disponíveis no Evidently de código aberto?

A documentação do Evidently lista avaliações sem código, geração de dados e painéis, comparação lado a lado, alertas, tarefas agendadas, autenticação e controle de acesso baseado em funções como recursos exclusivamente comerciais. A plataforma de código aberto oferece tracing, avaliações, painéis, gerenciamento de datasets, dados sintéticos e otimização de prompts.

O Evidently pode usar Claude ou Gemini como LLM juiz?

O changelog do Evidently informa que a versão 0.6.2 ampliou o suporte ao litellm, de modo que avaliações baseadas em LLM possam usar provedores como Gemini e Anthropic, além da OpenAI.

Comparar alternativas

Evidently AI

Grátis · API

Gostando do artigo? Receba um assim na sua caixa de entrada toda manhã.

um e-mail por dia · cancele em dois cliques · sem rastreadores de terceiros