Skip to content
Build

Donnez de l'élan à votre parcours IA avec Evidently AI

Evidently est un framework Python open source (Apache 2.0) pour évaluer, tester et surveiller des applications LLM, des systèmes RAG, des agents IA et des modèles de ML, avec un tableau de bord auto-hébergeable. Evidently Cloud, la version hébergée, a fermé.

Gratuit · API

Le verdict de Stork sur Evidently AI

Evidently est une bibliothèque d'évaluation et de dérive gratuite et open source solide pour les équipes Python, mais Evidently Cloud étant fermé, vous devez désormais l'héberger et la maintenir vous-même.

Evidently AI reviewed by Stork AI · stork.ai/fr/evidently-ai

720p. Moitié prix en 480p. Minimum $0.05 par vidéo.
Dix minutes de vidéo parlante coûtent $2.
Nous faisons tourner des modèles ouverts sur nos propres GPU. Quand notre coût par minute baisse, le prix baisse aussi.
Faire parler une photoDéveloppeurs : il y a une API

Ce que fait Evidently

Evidently (evidentlyai.com) est un framework open source pour tester les systèmes d'IA. La bibliothèque Python Evidently exécute des évaluations avec plus de 100 métriques intégrées et produit des Reports et des Test Suites que vous pouvez consulter dans Python, exporter en JSON ou en HTML, ou exécuter dans un pipeline CI. Pour les produits reposant sur des LLM, elle vérifie notamment le respect des consignes et du format, les hallucinations et la factualité, les données personnelles (PII), la qualité de la recherche d'information et la pertinence du contexte, le sentiment, la toxicité et le ton, ainsi que des évaluations personnalisées combinant règles, classifieurs et LLM-juges. Pour les modèles de ML prédictifs, elle suit la dérive des données, la qualité des données et la performance des modèles. Les versions récentes ajoutent la génération de données de test synthétiques et l'optimisation automatisée de prompts pour les LLM-juges.

Vous l'installez avec pip install evidently (ou evidently[llm] pour les évaluations de LLM) ou avec conda. La bibliothèque associée Tracely, basée sur OpenTelemetry, capture les entrées et les sorties d'une application LLM en production. L'Evidently Platform open source est un service d'interface auto-hébergé (evidently ui) qui stocke les instantanés d'évaluation, les traces et les jeux de données sur un système de fichiers, une base de données SQL telle que SQLite ou Postgres, ou un stockage compatible S3, et les présente dans un tableau de bord de supervision. La documentation d'Evidently indique désormais qu'Evidently Cloud n'est plus disponible en tant que produit SaaS ; la page de tarifs du site redirige vers la page d'accueil.

Tarifs d'Evidently

OffrePrix mensuelCe que vous obtenez
Bibliothèque Evidently (open source)0 $Bibliothèque Python, plus de 100 métriques, Reports et Test Suites, Apache 2.0
Evidently Platform (open source, auto-hébergée)0 $Traçage, visionneuse de traces, tableau de bord de supervision, gestion de jeux de données, données synthétiques, optimisation de prompts, accès API

Evidently Cloud, la version hébergée, n'est plus proposé. Tout ce qu'Evidently propose actuellement au public est gratuit sous licence Apache 2.0. Vous ne payez que le calcul et le stockage sur lesquels vous l'exécutez, ainsi que toute API de LLM utilisée comme juge. La documentation d'Evidently répertorie des fonctionnalités qui ne sont pas incluses dans la plateforme open source : évaluations sans code, génération de données et de tableaux de bord, comparaison côte à côte, alertes, tâches planifiées, authentification et contrôle d'accès basé sur les rôles. Elles faisaient partie des éditions commerciales Cloud et Enterprise auto-hébergée ; Cloud étant fermé et aucune page de tarifs n'étant en ligne, Evidently ne publie aucun prix actuel pour une édition commerciale. Tarifs non publiés ; contactez l'équipe commerciale via le formulaire de contact si vous avez besoin de ces fonctionnalités.

Support : les utilisateurs de l'édition open source disposent de la documentation, d'une communauté Discord et des issues GitHub ; Evidently indique ne pas fournir de support par e-mail pour l'open source.

Tarifs vérifiés sur la page de tarifs de l'éditeur le 10 novembre 2026 (https://www.evidentlyai.com/pricing redirige désormais vers la page d'accueil) ; options de déploiement issues de la page Evidently open source vs. Cloud.

Fonctionnalités clés

Ce que le site web et la documentation d'Evidently indiquent :

  • Plus de 100 métriques intégrées, règles combinables, classifieurs et évaluations par LLM-juge
  • Contrôles LLM des hallucinations, des données personnelles (PII), de la pertinence de la recherche d'information, de la toxicité, du ton et du format
  • Rapports de dérive des données, de qualité des données et de performance des modèles pour les modèles de ML prédictifs
  • Test Suites déclaratives pour exécuter les évaluations sous forme de contrôles réussite/échec dans les pipelines CI
  • Génération de données de test synthétiques, y compris d'entrées adverses
  • Optimisation automatisée de prompts pour les LLM-juges
  • Traçage des applications LLM en production basé sur OpenTelemetry via la bibliothèque Tracely
  • Tableau de bord de supervision auto-hébergé avec stockage sur fichiers, SQL ou compatible S3

Pour qui Evidently est-il le plus adapté

Evidently convient aux équipes Python qui souhaitent une évaluation et une supervision gratuites et auto-hébergées, et qui sont à l'aise pour l'exploiter et la maintenir elles-mêmes. Il se distingue par le fait de couvrir à la fois la supervision du ML classique (dérive des données sur des modèles tabulaires) et l'évaluation des LLM dans une seule bibliothèque, ce qui aide les équipes qui gèrent les deux. Ses Reports et Test Suites s'intègrent facilement dans les notebooks et les tâches CI.

Si vous souhaitiez un produit géré et hébergé, Evidently Cloud n'existe plus : regardez Langfuse (open source avec un cloud hébergé) ou LangSmith si vous développez avec LangChain. Pour le traçage et les évaluations open source avec une interface performante, essayez Arize Phoenix. Pour un framework de test de LLM de type pytest avec une plateforme hébergée, comparez Confident AI, et pour des métriques spécifiques au RAG, Ragas.

Ce qu'en disent les utilisateurs

Le dépôt GitHub d'Evidently affichait environ 8.000 étoiles le 10 novembre 2026, avec sa dernière version, la v0.7.23, publiée le 11 septembre 2026. Une critique éditoriale sur aicoolies (dernière vérification le 31 mars 2026) le présente comme un framework open source complet de supervision de l'IA pour les charges de travail de ML et de LLM, mais indique que son approche centrée sur Python, héritée du ML, peut sembler moins intuitive pour les équipes issues d'un univers purement LLM ; cette critique mentionne encore des offres Cloud hébergées qui ne sont plus commercialisées. Sur Product Hunt, deux évaluateurs saluent sa détection de dérive et ses visualisations. Le site d'Evidently présente lui-même des témoignages d'équipes de ML d'entreprises telles que DeepL, Wise et Realtor.com, portant surtout sur la supervision de la dérive des données. Aucun avis indépendant sur G2 ou Reddit n'a été trouvé.

Points forts

  • Entièrement open source sous licence Apache 2.0, gratuit pour un usage commercial
  • Couvre à la fois l'évaluation des LLM et la dérive des données du ML classique dans une seule bibliothèque
  • Plus de 100 métriques intégrées, ainsi que des évaluations personnalisées par LLM-juge
  • Le tableau de bord auto-hébergé conserve les données d'évaluation sur votre propre stockage
  • Publications régulières, avec la v0.7.23 en septembre 2026

Points faibles

  • Evidently Cloud, la version hébergée, est abandonnée : vous devez donc l'héberger vous-même
  • L'édition open source ne propose ni alertes, ni tâches planifiées, ni authentification, ni contrôle d'accès
  • Pas de support par e-mail pour les utilisateurs de l'édition open source ; uniquement Discord et GitHub
  • Orienté Python en priorité ; selon un avis, les équipes travaillant uniquement avec des LLM peuvent démarrer plus vite avec d'autres outils

Questions fréquentes

Evidently AI est-il gratuit ?

Oui. La bibliothèque Python Evidently et l'Evidently Platform auto-hébergée sont open source sous licence Apache 2.0 et leur utilisation est gratuite. Vous payez votre propre infrastructure ainsi que toute API de LLM utilisée pour les évaluations par LLM-juge.

Evidently Cloud est-il toujours disponible ?

Non. La documentation d'Evidently indique qu'Evidently Cloud n'est plus disponible en tant que produit SaaS, et sa page de tarifs redirige désormais vers la page d'accueil. Vous pouvez auto-héberger l'Evidently Platform open source ou utiliser la bibliothèque avec d'autres outils. Vérifié le 10 novembre 2026.

Que peut évaluer Evidently ?

Les systèmes reposant sur des LLM tels que les chatbots, les applications RAG, les agents IA et les copilotes (hallucinations, données personnelles (PII), pertinence de la recherche d'information, toxicité, format et contrôles personnalisés par LLM-juge), ainsi que les modèles de ML prédictifs (dérive des données, qualité des données et performance des modèles), à l'aide de plus de 100 métriques intégrées.

Comment installer Evidently ?

Exécutez pip install evidently, ou pip install evidently[llm] pour les évaluations de LLM ; il est également disponible sur conda-forge. Pour le traçage d'une application LLM en production, installez le package associé avec pip install tracely. Lancez le tableau de bord auto-hébergé avec evidently ui.

Quelles fonctionnalités manquent dans la version open source d'Evidently ?

La documentation d'Evidently indique que les évaluations sans code, la génération de données et de tableaux de bord, la comparaison côte à côte, les alertes, les tâches planifiées, l'authentification et le contrôle d'accès basé sur les rôles sont des fonctionnalités réservées aux offres commerciales. La plateforme open source propose le traçage, les évaluations, les tableaux de bord, la gestion de jeux de données, les données synthétiques et l'optimisation de prompts.

Evidently peut-il utiliser Claude ou Gemini comme LLM-juge ?

Le journal des modifications d'Evidently indique que la version 0.6.2 a étendu la prise en charge de litellm, de sorte que les évaluations basées sur des LLM peuvent utiliser des fournisseurs tels que Gemini et Anthropic, en plus d'OpenAI.

Comparer les alternatives

Evidently AI

Gratuit · API

Cet article vous plaît ? Recevez-en un comme celui-ci chaque matin.

un e-mail par jour · désinscription en deux clics · aucun traqueur tiers