Skip to content

Artificial Analysis im Test

Artificial Analysis ist eine unabhängige KI-Benchmarking-Website, die Sprach-, Bild-, Video-, Sprach- und Musikmodelle sowie die APIs, die sie bereitstellen, nach Intelligenz, Geschwindigkeit und Preis einordnet. Kostenlos nutzbar; Pro kostet 499 $ pro Monat.

Gratis-Plan · ab $499/Monat · Web

Storks Urteil zu Artificial Analysis

Artificial Analysis ist der nützlichste kostenlose Ort, um Modelle und API-Anbieter nach Intelligenz, Geschwindigkeit und Preis zu vergleichen, aber Pro ist für Unternehmen und nicht für Einzelpersonen bepreist.

Artificial Analysis reviewed by Stork AI · stork.ai/de/artificial-analysis

Zwei Aufrufe. Das ist die ganze Integration.
Eine Talking-Head-API für $0.20 pro Minute.
Foto und Text oder Audio senden, MP4 erhalten. Prepaid-Guthaben. Fehlgeschlagene Aufträge werden voll erstattet.
Dokumentation lesenKein Entwickler? Foto sprechen lassen

Was Artificial Analysis macht

Artificial Analysis (artificialanalysis.ai) führt eigene Benchmarks für KI-Modelle, die Cloud-APIs, die sie hosten, und die Chips, auf denen sie laufen, durch und veröffentlicht die Ergebnisse als öffentliche Leaderboards und Diagramme. Auf der About-Seite werden über 500 getestete Modelle, über 100 Inferenzanbieter und über 1.000 Endpunkte genannt. Die zentrale Kennzahl ist der Artificial Analysis Intelligence Index, ein zusammengesetzter Wert. Version 5, angekündigt am 27. Oktober 2026, gewichtet Wissensarbeit, Coding, Wissenschaft und Allgemeinwissen mit jeweils 25 %, ergänzt Cognitions FrontierCode 2.0 und Terminal-Bench-Science und gibt an, dass 60 % des Index nun auf privaten Testsätzen oder zurückgehaltenen Antworten beruhen. Neben Sprachmodellen deckt die Seite Coding-Agenten, Text-to-Image, Video, Text-to-Speech, Speech-to-Text und Musik ab, einschließlich Community-Arenen für Bild, Video und Sprache.

Die Performance-Benchmarks messen, was Kunden durchgängig erleben (Ausgabegeschwindigkeit, Zeit bis zum ersten Token, Gesamtzeit pro Aufgabe), und nicht die Spitzenleistung, die ein Chip erreichen kann; Preise werden pro Endpunkt erfasst. Das Unternehmen gibt an, dass Anbieter weder für Ergebnisse, Änderungen der Methodik noch für die Aufnahme bezahlen können. Zu den Tools für angemeldete Nutzer gehören ein Model Recommender, MicroEvals zum Vergleich von Modellen mit eigenen Prompts und Optima, um eigene Aufgaben in einen wiederholbaren Benchmark umzuwandeln, der die Qualität den Kosten pro Aufgabe gegenüberstellt. Die Daten sind außerdem über eine REST-API und einen MCP-Server verfügbar.

Artificial Analysis Preise

Die öffentliche Website, die Leaderboards und eine kostenlose API-Stufe kosten nichts. Kostenpflichtige Pläne bieten zusätzlich Datentools, Exporte, umfassenderen API-Zugang und Berichte.

PlanMonatlicher PreisEnthalten
Free$0Öffentliche Leaderboards und Diagramme; kostenloser API-Schlüssel mit der Liste der Sprachmodelle (Headline-Indizes, mediane Performance, Eingabe- und Ausgabepreise) und kostenlosen Medien-Endpunkten, 100 Anfragen pro 24 Stunden (200 MCP-Aufrufe bei Anmeldung)
Pro$499/MonatPro Platz. Data Playground, Table Builder, Data Export, Optima, Sprach- und Mediamodelldaten per API und Databook-Download, State of AI Report und AI Adoption Survey, E-Mail-Support, 500 API-Anfragen pro 24 Stunden (1.000 MCP-Aufrufe bei Anmeldung)
EnterpriseIndividuellAlles aus Pro plus Daten zu Sprachmodell-Anbietern, höchste API-Ratenlimits, Compute-Marktmodell mit Prognosen, Model Deployment Report, dedizierter Support, Workshops, KI-Beratung und individuelles Benchmarking; ausgerichtet auf Organisationen mit 150+ Beschäftigten

Bei jährlicher Abrechnung kostet Pro 417 $ pro Monat und Platz, was laut Seite 984 $ pro Jahr spart ($499 x 12 = $5,988 vs $417 x 12 = $5,004). Pro gilt für einen einzelnen Platz; für weitere Plätze ist Enterprise nötig. Es gibt keine kostenlose Testphase. Karten werden akzeptiert, Enterprise kann per Rechnung zahlen; akademische Rabatte sind auf Anfrage erhältlich. Die API-Dokumentation nennt zudem eine Commercial-Stufe (Pro plus Daten auf Anbieterebene, Performance im Zeitverlauf und Rohmessungen) mit individuellen Ratenlimits, deren Preis über den Vertrieb erfragt wird. Jede API-Stufe verlangt eine sichtbare Quellenangabe zu Artificial Analysis, und für Weitergabe oder externe Nutzung der Daten ist eine gesonderte Vereinbarung nötig.

Preise am 10. November 2026 auf der Preisseite des Anbieters geprüft. Siehe Artificial Analysis pricing und die Data API docs.

Wichtige Funktionen

Was Artificial Analysis bietet, laut eigener Website und Dokumentation:

  • Intelligence Index v5 als zusammengesetzter Wert sowie separate Indizes wie Coding Agents, Cyber, Decision und Openness
  • Leaderboard für Sprachmodelle mit Vergleich von Intelligenz, Preis, Ausgabegeschwindigkeit, Zeit bis zum ersten Token und Kontextfenster
  • Anbieterweise Benchmarks desselben Modells über Serverless-APIs hinweg, durchgängig gemessen
  • Arenen und Leaderboards für Bild, Video und Text-to-Speech sowie Abdeckung von Speech-to-Text und Musik
  • Model Recommender, der Modelle nach Ihren Prioritäten bei Intelligenz, Geschwindigkeit und Preis einordnet
  • MicroEvals für Vergleiche mit eigenen Prompts nebeneinander und Optima für eigene Aufgaben-Benchmarks mit Kosten pro Aufgabe (Pro)
  • REST-API (31 Endpunkte) und ein MCP-Server unter mcp.artificialanalysis.ai, mit den Stufen Free, Pro und Commercial
  • Veröffentlichte Methodikseiten für jeden Benchmark und ein Changelog

Für wen Artificial Analysis am besten geeignet ist

Die kostenlose Website eignet sich für Entwickler und Produktteams, die ein Modell oder einen API-Anbieter auswählen: Sie können ohne Registrierung Intelligenzwerte mit Preis und Geschwindigkeit desselben Modells bei verschiedenen Hosts vergleichen. Pro ist für Unternehmen gedacht, die die Daten exportieren, eigene Tabellen erstellen, Optima für ihre eigenen Aufgaben nutzen oder mehr abrufen möchten, als die kostenlose API erlaubt; mit 499 $ pro Monat und Platz ist es eher ein Business-Tool als ein Hobby-Angebot.

Wenn Sie Rankings auf Basis von Abstimmungen nach menschlicher Präferenz statt fester Benchmarks wünschen, sehen Sie sich LMArena an. Wenn Sie Rankings danach wünschen, was Entwickler tatsächlich über eine API senden, nutzen die OpenRouter's rankings das Token-Volumen. Für eine akademische, transparente Evaluierung über viele Szenarien ist HELM der Stanford University kostenlos und offen.

Was Nutzer sagen

Artificial Analysis wird von KI-Laboren und der Presse häufig zitiert, und sein Intelligence Index wird oft bei Modellveröffentlichungen genannt. DeepLearning.AI's The Batch begrüßte den Wechsel im Januar 2026 von gesättigten Tests zu anspruchsvolleren Business-Aufgaben, merkte aber an, dass die Testsuite die Spitzenmodelle weiterhin kaum voneinander trenne; der Artikel legt offen, dass Andrew Ng, der DeepLearning.AI gegründet hat, Investor ist. Nathan Lambert von Interconnects argumentiert, dass die Bündelung vieler Fähigkeiten in einer einzigen rankbaren Zahl den Index nützlich macht und ihn zugleich irreführend macht. Ein Latent Space writeup beschreibt die „Mystery Shopper“-Konten des Teams, mit denen Labore anonym getestet werden; Latent-Space-Mitgründer swyx wird unter den Geldgebern von Artificial Analysis geführt. Unabhängige Bewertungsseiten mit Nutzerbewertungen zum kostenpflichtigen Plan wurden nicht gefunden.

Vorteile

  • Kostenlose Leaderboards vergleichen Intelligenz, Preis und Geschwindigkeit an einem Ort
  • Benchmarkt dasselbe Modell bei vielen API-Anbietern, nicht nur beim Labor selbst
  • Führt eigene Evaluierungen durch, wobei 60 % des Index v5 auf privaten oder zurückgehaltenen Datensätzen beruhen
  • Deckt neben LLMs auch Bild-, Video-, Sprach- und Musikmodelle ab
  • Kostenlose API und MCP-Server, um Headline-Daten in eigene Tools zu übernehmen

Nachteile

  • Pro kostet 499 $ pro Monat und Platz, ohne kostenlose Testphase
  • API-Daten auf Anbieterebene erfordern Enterprise oder Commercial, Preise auf Anfrage
  • Ein einzelner zusammengesetzter Index kann große Unterschiede bei bestimmten Aufgaben verbergen
  • Index-Versionen ändern die Benchmarks, daher sind Ergebnisse über Versionen hinweg nicht vergleichbar

Häufig gestellte Fragen

Ist Artificial Analysis kostenlos?

Die Website, die Leaderboards und eine kostenlose API-Stufe sind kostenlos. Die kostenlose API liefert die Liste der Sprachmodelle mit Headline-Indizes, medianer Performance und Preisen sowie kostenlose Medien-Endpunkte, mit 100 Anfragen pro 24 Stunden. Pro kostet 499 $ pro Monat und Platz bzw. 417 $ pro Monat bei jährlicher Abrechnung.

Bietet Artificial Analysis eine kostenlose Testphase für Pro an?

Nein. Laut den FAQ auf der Preisseite werden derzeit keine kostenlosen Testphasen angeboten. Akademische Einrichtungen können nach Rabatten fragen.

Was ist der Artificial Analysis Intelligence Index?

Ein zusammengesetzter Wert für die Leistungsfähigkeit von Modellen. Version 5 (27. Oktober 2026) gewichtet Wissensarbeit, Coding, Wissenschaft und Allgemeinwissen mit jeweils 25 % und nutzt Benchmarks wie AA-Briefcase, FrontierCode 2.0, Terminal-Bench 4.0, Terminal-Bench-Science, CritPt v2, AA-Omniscience v1.1 und HLE-Diamond. 60 % davon beruhen auf privaten oder zurückgehaltenen Testdatensätzen.

Können KI-Unternehmen für ein besseres Ranking bei Artificial Analysis bezahlen?

Das Unternehmen verneint dies: Laut seiner Unabhängigkeitsrichtlinie können Anbieter weder für Ergebnisse, Änderungen der Methodik noch für die Aufnahme auf der Website bezahlen. Es verkauft jedoch Berichte, individuelles Benchmarking und Beratung an Unternehmen.

Hat Artificial Analysis eine API?

Ja. Es gibt eine REST-API unter artificialanalysis.ai/api/v2 und einen MCP-Server. Kostenlose Schlüssel erhalten 100 Anfragen pro 24 Stunden, Pro 500, Commercial individuell. Bei angemeldeter MCP-Nutzung gilt das Doppelte. Alle Stufen verlangen eine Quellenangabe, wenn Sie die Daten anzeigen.

Wie misst Artificial Analysis die Geschwindigkeit?

Gemessen wird die durchgängige Leistung, wie Kunden sie erleben, etwa Ausgabe-Tokens pro Sekunde, Zeit bis zum ersten Token und Zeit pro Aufgabe, über verschiedene Anbieter hinweg. Die Ergebnisse sollen die reale API-Performance widerspiegeln, nicht das auf bestimmter Hardware maximal Mögliche.

Wer steht hinter Artificial Analysis?

Auf der About-Seite werden die Mitgründer Micah Hill-Smith (CEO) und George Cameron (CPO) mit Sitz in San Francisco genannt; als Geldgeber werden unter anderem Nat Friedman, Daniel Gross und Andrew Ng aufgeführt.

Alternativen vergleichen

Artificial Analysis

Gratis-Plan · ab $499/Monat · Web

Aus dem Stork-Blog

Gefällt Ihnen der Artikel? Erhalten Sie jeden Morgen einen wie diesen per E-Mail.

eine E-Mail pro Tag · Abmeldung mit zwei Klicks · kein Tracking durch Dritte