Vergleich der Fähigkeiten von KI-Modellen

Wissensarbeit

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

LegalBenchBenchmark für juristisches Schlussfolgern

— means no published score for this candidate in this source, not zero.3/11 recent-year models have scores

Nr.ModellInput costEingabepreis pro Million TokenOutput costAusgabepreis pro Million TokenLatencyGemeldete Latenz
1AnthropicClaude Fable 5.1Claude Fable 5.188.51$10$5012.4 s
2Google DeepMindGemini 4 ArgonGemini 4 Argon88.3$4$2012.62 s
3AnthropicClaude Opus 5Claude Opus 586.97$5$254.42 s

Vals.ai-Benchmarks

Quelle: Vals.ai ↗ · Aktualisiert 2026-10-19

LegalBench · Aktualisiert 2026-10-13

PandaNpc Aktualisiert 21. Okt. 2026, 06:01 UTC

Quelle: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

Spaltenleitfaden

Nr.
Nur Anzeigereihenfolge. Sortierung ändert diese Nummer; sie ist kein veröffentlichter Fähigkeitsrang.
Modell
Der Name des bewerteten Modells und sein Anbietersymbol. Ein Bindestrich in einer Wertspalte bedeutet, dass hier kein veröffentlichter Wert verfügbar ist, nicht eine Null.
Input cost
Eingabepreis pro Million Token · USD / 1M tokens
Output cost
Ausgabepreis pro Million Token · USD / 1M tokens
Latency
Gemeldete Latenz · s / min
Vals.ai
Kosten und Zeiten werden für diesen Benchmark von Vals gemeldet, nicht als allgemeine Modellpreise oder Latenz. Die geschätzten API-Kosten für CUA-bench decken die Evaluierungsnutzung ab und sind eine untere Abschätzung, nicht die Kosten pro Aufgabe; die Zeit pro Aktion ist ein Durchschnitt, kein Median. Ein Sternchen kennzeichnet das Prompt-Cache-Verhalten am Launch-Tag, das die Cache-Schreibkosten erhöht hat. Fehlende Werte sind unveröffentlicht, nicht null.
Vals Finance Agent v2Vals Finanzagent v2
Testet Finanzanalyse mit Suche, Finanzberichten und Berechnungswerkzeugen, einschließlich dokumentübergreifender Datenprüfungen, Vergleichen der Unternehmensleistung und Bewertung. Die Hauptmetrik ist Partial Credit, gemittelt über drei Läufe: Antwortprüfungen erhalten schweregradbasierte Gewichtungen, und ein kritischer Dealbreaker-Fehler führt dazu, dass diese Frage mit null bewertet wird. Höher ist besser. Dies unterscheidet sich von der separaten All-Pass-Metrik und ist nicht die Bestehensrate ganzer Fragen. Evaluierungsmethodik ↗
Harvey's Legal Agent BenchmarkHarvey-Benchmark für juristische Agenten
Testet Agenten beim Lesen und Bearbeiten von Dateien, um mehrstufige juristische Arbeitsprodukte zu erstellen. Eine Aufgabe gilt nur dann als bestanden, wenn jede Bewertungsanforderung erfüllt ist. Der Score ist die durchschnittliche Aufgabenbestehensrate aus zwei Juroren; höher ist besser. Er ist nicht der Prozentsatz der einzelnen bestandenen Kriterien und misst juristische Agenten-Workflows statt die juristischen Argumentationsfragen von LegalBench. Evaluierungsmethodik ↗
Vals IndexVals zusammengesetzter Index
Ein zusammengesetzter Index professioneller Aufgaben in Bereichen wie Finanzen, Coding und Recht. Sein Prozentwert kombiniert Benchmark-Ergebnisse mithilfe der Gewichtungsmethode für diese veröffentlichte Version; ein höherer Wert bedeutet stärkere Gesamtleistung, nicht die Genauigkeit einer einzelnen Aufgabe. Enthaltene Domänen und Gewichtungen ändern sich zwischen Versionen, daher darf eine neuere Methodik nicht rückwirkend auf ältere Score-Snapshots angewendet werden. Evaluierungsmethodik ↗
LegalBenchBenchmark für juristisches Schlussfolgern
Testet das Verständnis und die Argumentation über juristische Texte, einschließlich des Erkennens juristischer Probleme, des Erinnerns und Anwendens von Regeln und des Beurteilens juristischer Schlussfolgerungen. Der Score ist die Genauigkeit bei juristischen Argumentationsfragen; höher ist besser. Anders als Harvey's Legal Agent Benchmark misst er nicht, wie ein Agent durch Bearbeiten von Dateien mehrstufige juristische Arbeitsprodukte erstellt. Evaluierungsmethodik ↗