Srovnání schopností AI modelů

Znalostní práce

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

Vals IndexVals kompozitní index

— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores

Č.ModelCost / TestNáklady na testInput costCena vstupu za milion tokenůOutput costCena výstupu za milion tokenůDurationUvedená doba testuInput / Output TokensHlášené využití vstupních / výstupních tokenů
1AnthropicClaude Sonnet 5.5Claude Sonnet 5.570.85$18.7$2$1086 min45.09B / 654.94M
2AnthropicClaude Opus 5.5Claude Opus 5.570.18$28.12$4$2085 min31.96B / 499.75M
3Google DeepMindGemini 4 ArgonGemini 4 Argon69.24$13.37$4$2044.97 min13.36B / 146.17M
4OpenAIGPT-6 AstraGPT-6 Astra65.02$21.28$10$5033.65 min4.92B / 96.77M
5OpenAIGPT-6.1 SolGPT-6.1 Sol63.94$3.61$2$1044.4 min5.49B / 103.20M
6AnthropicClaude Haiku 5.5Claude Haiku 5.558.71$3.17$0.1$0.549.8 min23.07B / 765.85M
7OpenAIGPT-6 LunaGPT-6 Luna52.32$0.45$0.1$0.532.38 min10.05B / 202.17M

Benchmarky Vals.ai

Zdroj: Vals.ai ↗ · Aktualizováno 2026-10-19

Vals Index · Aktualizováno 2026-10-19

PandaNpc Aktualizováno 21. 10. 2026 06:01 UTC

Zdroj: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

Průvodce sloupci

Č.
Pouze pořadí zobrazení. Řazení toto číslo mění; nejde o zveřejněné pořadí schopností.
Model
Název hodnoceného modelu a ikona jeho poskytovatele. Pomlčka ve sloupci se skóre znamená, že zde není k dispozici žádné zveřejněné skóre, nikoli nula.
Cost / Test
Náklady na test · USD
Input cost
Cena vstupu za milion tokenů · USD / 1M tokens
Output cost
Cena výstupu za milion tokenů · USD / 1M tokens
Duration
Uvedená doba testu · s / min
Input / Output Tokens
Hlášené využití vstupních / výstupních tokenů · tokens
Vals.ai
Náklady a časy pro tento benchmark uvádí Vals, nejde o univerzální ceny modelů ani latenci. Odhadovaný náklad na API u CUA-bench zahrnuje využití při hodnocení a je odhadem dolní hranice, nikoli nákladem na úlohu; čas na akci je průměr, nikoli medián. Hvězdička označuje chování prompt-cache v den spuštění, které zvýšilo náklady na zápis do cache. Chybějící hodnoty jsou nezveřejněné, nikoli nulové.
Vals Finance Agent v2Vals finanční agent v2
Testuje finanční analýzu s vyhledáváním, finančními reporty a nástroji pro výpočty, včetně kontrol dat napříč dokumenty, srovnávání výkonnosti společností a oceňování. Hlavní metrikou je Partial Credit, zprůměrovaný přes tři běhy: kontroly odpovědí dostávají váhy podle závažnosti a kritická chyba dealbreaker způsobí, že daná otázka získá nulové skóre. Vyšší je lepší. Toto se liší od samostatné metriky All-Pass a nejde o míru úspěšnosti celé otázky. Metodika hodnocení ↗
Harvey's Legal Agent BenchmarkHarvey benchmark právního agenta
Testuje agenty při čtení a úpravách souborů za účelem vytváření vícestupňových právních pracovních výstupů. Úloha uspěje pouze tehdy, když jsou splněny všechny požadavky na hodnocení. Skóre je průměrná míra úspěšnosti úloh od dvou hodnotitelů; vyšší je lepší. Není to procento splněných jednotlivých kritérií a měří pracovní postupy právních agentů, nikoli otázky právního uvažování z LegalBench. Metodika hodnocení ↗
Vals IndexVals kompozitní index
Kompozitní index profesionálních úloh v oblastech, jako jsou finance, programování a právo. Jeho procentuální skóre kombinuje výsledky benchmarků pomocí metody vážení pro danou publikovanou verzi; vyšší hodnota znamená silnější celkový výkon, nikoli přesnost jedné úlohy. Zahrnuté domény a váhy se mezi verzemi mění, takže novější metodika se nesmí zpětně aplikovat na starší snímky skóre. Metodika hodnocení ↗
LegalBenchBenchmark právního uvažování
Testuje porozumění právnímu textu a uvažování nad ním, včetně identifikace právních otázek, vybavování a aplikace pravidel a posuzování právních závěrů. Skóre je přesnost u otázek právního uvažování; vyšší je lepší. Na rozdíl od Harvey's Legal Agent Benchmark neměří agenta vytvářejícího vícestupňové právní pracovní výstupy úpravami souborů. Metodika hodnocení ↗