Vergleich der Fähigkeiten von KI-Modellen
Wissensarbeit
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
LegalBenchBenchmark für juristisches Schlussfolgern
— means no published score for this candidate in this source, not zero.3/11 recent-year models have scores
| Nr. | Modell | Input costEingabepreis pro Million Token | Output costAusgabepreis pro Million Token | LatencyGemeldete Latenz | |
|---|---|---|---|---|---|
| 1 | 88.51 | $10 | $50 | 12.4 s | |
| 2 | 88.3 | $4 | $20 | 12.62 s | |
| 3 | 86.97 | $5 | $25 | 4.42 s |
PandaNpc Aktualisiert 21. Okt. 2026, 06:01 UTC
Quelle: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
Spaltenleitfaden
- Nr.
- Nur Anzeigereihenfolge. Sortierung ändert diese Nummer; sie ist kein veröffentlichter Fähigkeitsrang.
- Modell
- Der Name des bewerteten Modells und sein Anbietersymbol. Ein Bindestrich in einer Wertspalte bedeutet, dass hier kein veröffentlichter Wert verfügbar ist, nicht eine Null.
- Input cost
- Eingabepreis pro Million Token · USD / 1M tokens
- Output cost
- Ausgabepreis pro Million Token · USD / 1M tokens
- Latency
- Gemeldete Latenz · s / min
- Vals.ai
- Kosten und Zeiten werden für diesen Benchmark von Vals gemeldet, nicht als allgemeine Modellpreise oder Latenz. Die geschätzten API-Kosten für CUA-bench decken die Evaluierungsnutzung ab und sind eine untere Abschätzung, nicht die Kosten pro Aufgabe; die Zeit pro Aktion ist ein Durchschnitt, kein Median. Ein Sternchen kennzeichnet das Prompt-Cache-Verhalten am Launch-Tag, das die Cache-Schreibkosten erhöht hat. Fehlende Werte sind unveröffentlicht, nicht null.
- Vals Finance Agent v2Vals Finanzagent v2
- Testet Finanzanalyse mit Suche, Finanzberichten und Berechnungswerkzeugen, einschließlich dokumentübergreifender Datenprüfungen, Vergleichen der Unternehmensleistung und Bewertung. Die Hauptmetrik ist Partial Credit, gemittelt über drei Läufe: Antwortprüfungen erhalten schweregradbasierte Gewichtungen, und ein kritischer Dealbreaker-Fehler führt dazu, dass diese Frage mit null bewertet wird. Höher ist besser. Dies unterscheidet sich von der separaten All-Pass-Metrik und ist nicht die Bestehensrate ganzer Fragen. Evaluierungsmethodik ↗
- Harvey's Legal Agent BenchmarkHarvey-Benchmark für juristische Agenten
- Testet Agenten beim Lesen und Bearbeiten von Dateien, um mehrstufige juristische Arbeitsprodukte zu erstellen. Eine Aufgabe gilt nur dann als bestanden, wenn jede Bewertungsanforderung erfüllt ist. Der Score ist die durchschnittliche Aufgabenbestehensrate aus zwei Juroren; höher ist besser. Er ist nicht der Prozentsatz der einzelnen bestandenen Kriterien und misst juristische Agenten-Workflows statt die juristischen Argumentationsfragen von LegalBench. Evaluierungsmethodik ↗
- Vals IndexVals zusammengesetzter Index
- Ein zusammengesetzter Index professioneller Aufgaben in Bereichen wie Finanzen, Coding und Recht. Sein Prozentwert kombiniert Benchmark-Ergebnisse mithilfe der Gewichtungsmethode für diese veröffentlichte Version; ein höherer Wert bedeutet stärkere Gesamtleistung, nicht die Genauigkeit einer einzelnen Aufgabe. Enthaltene Domänen und Gewichtungen ändern sich zwischen Versionen, daher darf eine neuere Methodik nicht rückwirkend auf ältere Score-Snapshots angewendet werden. Evaluierungsmethodik ↗
- LegalBenchBenchmark für juristisches Schlussfolgern
- Testet das Verständnis und die Argumentation über juristische Texte, einschließlich des Erkennens juristischer Probleme, des Erinnerns und Anwendens von Regeln und des Beurteilens juristischer Schlussfolgerungen. Der Score ist die Genauigkeit bei juristischen Argumentationsfragen; höher ist besser. Anders als Harvey's Legal Agent Benchmark misst er nicht, wie ein Agent durch Bearbeiten von Dateien mehrstufige juristische Arbeitsprodukte erstellt. Evaluierungsmethodik ↗