Skip to content
Stork.AIstork.ai
Outil d'IA

Revue de Galileo AI

Galileo AI est une plateforme d'ingénierie d'observabilité et d'évaluation de l'IA qui transforme les évaluations hors ligne en production guardrails pour les applications et agents d'IA générative.

shipped 3 juil. 2026aifreemium
ai
Galileo AI — product screenshot

Pourquoi c'est important

1Propose un modèle de tarification freemium avec un free tier disponible pour les développeurs.
2Fournit une API pour l'intégration et l'accès programmatique, avec une documentation disponible sur https://docs.galileo.ai/galileo.
3A obtenu les certifications ISO 27001 et SOC 2 Type II, avec une infrastructure HIPAA-compliant et des Business Associate Agreements (BAAs) disponibles.
4Utilise des modèles propriétaires Luna-2 pour l'évaluation de l'IA, affinés sur les architectures Llama 3B et 8B, atteignant une précision de 0,95.

À propos de Galileo AI

Modèle économique
Subscription SaaS
Tarification à l’usage
$0.0733 per eval
Plateformes
Web, SaaS
Public cible
Enterprises and developers building AI systems.

Formules tarifaires

Pricing Tier 1
$0.0733 / per-unit
  • • Evaluate agent behavior
  • • Production guardrails
  • • Auto-tunes metrics
  • • Custom evaluators

Exemples de coûts

  • • 1 eval: ~$0.0733

Direction

Waseem AlshikhCo-founder | CTO
Vijoy PandeySVP, Outshift by Cisco
Surojit ChatterjeeCEO and Co-founder, Ema
Santiago PomboGroup Product Manager, NVIDIA
Randall NewmanChief Product Officer | Co-founder, Satisfi Labs
Mikiko ChandrasekharStaff Developer Advocate, MongoDB
João MouraCEO and Co-founder, CrewAI
Jim NottinghamSVP, Advanced Compute Solutions, HP
Alex KlugHead of Product, Data Science & AI, HP
API DocsGitHub

Spécifications

Documentation API

Voir la documentation →

GitHub

Voir le dépôt →

API disponible

Oui, API publique

overview

Qu'est-ce que Galileo AI ?

Galileo AI est une plateforme d'ingénierie d'observabilité et d'évaluation de l'IA développée par Galileo (entreprise), que Cisco a l'intention d'acquérir, qui permet aux équipes d'IA, aux développeurs d'entreprise et aux scientifiques des données de transformer les évaluations hors ligne en production guardrails pour les applications et agents GenAI. Elle offre une surveillance d'agents de niveau entreprise avec des modèles d'évaluation (Luna-2) conçus à cet effet et une runtime protection, en se concentrant sur le débogage des défaillances de production complexes.

features

Fonctionnalités clés de Galileo AI

Galileo AI offre une suite complète de fonctionnalités conçues pour améliorer la fiabilité et les performances des applications et agents d'IA générative. Ces capacités couvrent l'évaluation, la surveillance et la protection, en tirant parti de modèles propriétaires et d'une infrastructure de niveau entreprise.

  • Capture des données de vérité terrain pour des ensembles de données d'évaluation robustes.
  • Construit des évaluations précises en utilisant plus de 20 métriques intégrées pour la RAG quality, la fiabilité des agents, la sûreté et la sécurité, détectant des problèmes tels que l'hallucination, les fuites de PII et les biais.
  • Exécute des évaluations à grande échelle avec des Small Language Models (SLMs) propriétaires Luna-2, affinés sur les architectures Llama 3B et 8B, offrant une précision de 0,95 et une latence moyenne de 152 ms.
  • Met en œuvre un réglage automatique à partir de retours en direct pour améliorer continuellement les performances du système d'IA.
  • Obtient une visibilité sur le comportement des agents, identifiant les modes de défaillance, les cas limites et la drift dans le trafic de production.
  • Utilise une API pour l'accès programmatique et l'intégration dans les workflows existants, avec une documentation disponible sur https://docs.galileo.ai/galileo.
  • Fournit une enterprise-grade agent monitoring, abordant spécifiquement les systèmes d'IA multi-agents, y compris la qualité de sélection des outils et la précision des instructions.
  • Offre une runtime protection, y compris des fonctionnalités Agent Control pour définir des guardrails contre le contenu nuisible, la prompt injection et la fuite de PII sans modifications de code.
  • Prend en charge le débogage des défaillances de production complexes dans les applications et agents GenAI.
  • Offre un support pour le modèle OpenAI GPT 5.4 et des intégrations d'entreprise étendues avec les principaux LLM providers comme Anthropic, AWS Bedrock et Azure.

use cases

Qui devrait utiliser Galileo AI ?

Galileo AI est principalement conçu pour les équipes d'IA, les développeurs d'entreprise et les scientifiques des données qui développent, déploient et gèrent des applications et agents d'IA générative. Ses fonctionnalités répondent à des besoins critiques pour assurer la fiabilité, la sûreté et les performances de ces systèmes d'IA avancés.

  • Équipes d'IA : Pour livrer des applications d'IA plus rapidement en fournissant des capacités complètes d'évaluation et de surveillance tout au long du cycle de vie de développement et de production.
  • Développeurs d'entreprise : Pour évaluer, surveiller et sécuriser les grands modèles linguistiques et les systèmes d'IA agentiques à l'échelle de l'entreprise, garantissant la conformité et les performances.
  • Scientifiques des données : Pour détecter et corriger les problèmes tels que les hallucinations, la drift et les biais dans les systèmes d'IA, et pour identifier les modes de défaillance et prescrire des correctifs pour le comportement des agents.
  • Organisations nécessitant des Production Guardrails : Pour convertir les métriques d'évaluation hors ligne en production guardrails en temps réel, prévenant les défaillances et assurant le respect des politiques de sûreté et de sécurité.

how to use

Comment utiliser Galileo AI

L'utilisation de Galileo AI implique l'intégration de sa plateforme dans le pipeline de développement et de déploiement des applications et agents d'IA générative. Le processus commence généralement par l'ingestion de données et la configuration des métriques d'évaluation, suivies d'une surveillance continue et de la mise en œuvre de guardrails.

  • 1Intégrer le Galileo Python SDK pour évaluer les multi-turn conversations et les métriques personnalisées dans les expériences.
  • 2Capturer les données de vérité terrain et définir des ensembles de données d'évaluation pour des cas d'utilisation spécifiques d'applications d'IA.
  • 3Configurer les métriques d'évaluation, y compris plus de 20 options intégrées pour la RAG quality, la sûreté et la sécurité.
  • 4Exécuter des évaluations à grande échelle en utilisant les modèles Luna-2 ou d'autres LLM pris en charge pour évaluer les performances et identifier les problèmes.
  • 5Surveiller le trafic de production pour le comportement des agents, la drift et les modes de défaillance en utilisant une enterprise-grade agent monitoring.
  • 6Mettre en œuvre la runtime protection et les fonctionnalités Agent Control pour appliquer des guardrails contre le contenu nuisible et la fuite de PII.

pricing

Tarification et plans de Galileo AI

Galileo AI fonctionne sur un modèle freemium, offrant un free tier pour l'exploration et le développement initiaux, ainsi qu'une tarification basée sur l'utilisation pour les opérations d'entreprise à grande échelle. La métrique de coût principale est par évaluation, tirant parti de leurs modèles propriétaires Luna-2 pour des évaluations rentables.

  • Niveau gratuit : Disponible pour les développeurs du monde entier, avec des limites spécifiques annoncées sur le site web du fournisseur.
  • Niveau de tarification 1 : 0,0733 $ par évaluation.

Pros

  • +Leverages proprietary Luna-2 models for high-accuracy (0.95) and low-latency (152ms) AI evaluation, enabling real-time monitoring of 100% of production traffic.
  • +Offers a comprehensive agent reliability platform with specific metrics for autonomous, multi-step AI agents, addressing complex failure modes.
  • +Enables the conversion of offline evaluation metrics into real-time production guardrails, ensuring consistent quality from development to deployment.
  • +Provides enterprise-grade compliance, including ISO 27001 and SOC 2 Type II certifications, with HIPAA-compliant infrastructure and Business Associate Agreements (BAAs).
  • +Includes an Autotune feature that improves LLM-as-a-judge metric performance by allowing users to provide natural language feedback.
  • +Demonstrated significant market traction with 834% revenue growth since early 2024 and adoption by six Fortune 50 companies.

Cons

  • −Users have reported a potential learning curve for navigating more complex projects within the platform.
  • −Some feedback indicates occasional difficulty in locating specific features, which may necessitate seeking support.
  • −The proprietary nature of the Luna-2 models might offer less transparency compared to open-source evaluation frameworks for some users.
  • −Primarily focused on GenAI applications and agents, potentially offering less breadth for traditional machine learning model monitoring compared to broader AI observability platforms.
  • −The existence of a former UI design tool also named Galileo AI (now Google Stitch AI) can lead to initial confusion regarding the product's identity.

Politiques

Offre gratuite

Vendor website advertises a free tier.

Page des tarifs

Voir les tarifs→

Outils similaires

Galileo AI vs Concurrents

Galileo AI opère dans le paysage concurrentiel des plateformes d'observabilité et d'évaluation de l'IA, se distinguant par son accent sur les systèmes d'IA agentiques, les modèles d'évaluation propriétaires et les enterprise-grade production guardrails. Les principaux concurrents offrent des forces variables en matière de traçage, d'intégration et d'options open-source.

1
LangSmithOn StorkCompare

LangSmith is a complete AI agent and LLM observability platform with tracing and real-time monitoring, deeply integrated into the LangChain ecosystem.

Similar to Galileo AI in providing observability and evaluation for GenAI applications and agents, LangSmith offers tight integration with the LangChain framework, while Galileo AI emphasizes its proprietary Luna-2 models for real-time protection and automated metrics.

2
BraintrustOn StorkCompare

Braintrust is an end-to-end platform that uniquely integrates evaluation directly into agent observability, offering comprehensive trace capture, automated scoring, and CI/CD quality gates.

Braintrust provides a full AI quality lifecycle, akin to Galileo AI's eval-to-guardrail approach, but it distinguishes itself with an evaluation-first architecture and CI/CD quality gates that can block deployments based on quality regressions.

3
LangfuseOn StorkCompare

Langfuse is an open-source, engineering-centric LLM observability platform offering flexibility, data control, deep observability, evaluations, and prompt management.

While both provide observability and evaluation, Langfuse is open-source and prioritizes flexibility and data control, contrasting with Galileo AI's proprietary, all-in-one platform with opinionated guardrail evaluators.

4
Arize AIOn StorkCompare

Arize AI specializes in AI observability with advanced capabilities for monitoring ML and LLM systems in production, including embedding clustering and drift detection.

Arize AI focuses on comprehensive monitoring of ML and LLM systems with sophisticated drift detection, whereas Galileo AI emphasizes turning offline evaluations into real-time production guardrails for GenAI agents using its purpose-built evaluation models.

Visiter Galileo AI↗
Contact
𝕏
X / Twitterx.com/rungalileo
⌘
GitHubgithub.com/rungalileo
in
LinkedInwww.linkedin.com/company/galileo-ai

AI Reputation Report

Is Galileo AI yours?

ChatGPT, Perplexity, Gemini, Claude & Grok answer buyer questions about Galileo AI every day. See whether they name Galileo AI — or send buyers to a rival.

See what AI saysfree preview