AI-modellers kapacitetsjämförelse
Kunskapsarbete
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Vals IndexVals sammansatt index
— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores
| Nr. | Modell | Cost / TestKostnad per test | Input costIndatapris per miljon token | Output costPris för utdata per miljon tokens | DurationRapporterad testvaraktighet | Input / Output TokensRapporterad tokenanvändning för in-/utdata | |
|---|---|---|---|---|---|---|---|
| 1 | 70.85 | $18.7 | $2 | $10 | 86 min | 45.09B / 654.94M | |
| 2 | 70.18 | $28.12 | $4 | $20 | 85 min | 31.96B / 499.75M | |
| 3 | 69.24 | $13.37 | $4 | $20 | 44.97 min | 13.36B / 146.17M | |
| 4 | 65.02 | $21.28 | $10 | $50 | 33.65 min | 4.92B / 96.77M | |
| 5 | 63.94 | $3.61 | $2 | $10 | 44.4 min | 5.49B / 103.20M | |
| 6 | 58.71 | $3.17 | $0.1 | $0.5 | 49.8 min | 23.07B / 765.85M | |
| 7 | 52.32 | $0.45 | $0.1 | $0.5 | 32.38 min | 10.05B / 202.17M |
PandaNpc Uppdaterad 21 okt. 2026 06:01 UTC
Källa: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
Kolumnvägledning
- Nr.
- Endast visningsordning. Sortering ändrar detta nummer; det är inte en publicerad kapacitetsrankning.
- Modell
- Det utvärderade modellnamnet och dess leverantörsikon. Ett streck i en poängkolumn betyder att ingen publicerad poäng finns här, inte en nolla.
- Cost / Test
- Kostnad per test · USD
- Input cost
- Indatapris per miljon token · USD / 1M tokens
- Output cost
- Pris för utdata per miljon tokens · USD / 1M tokens
- Duration
- Rapporterad testvaraktighet · s / min
- Input / Output Tokens
- Rapporterad tokenanvändning för in-/utdata · tokens
- Vals.ai
- Kostnader och tider rapporteras av Vals för detta benchmark, inte universella modellpriser eller latens. Den uppskattade API-kostnaden för CUA-bench täcker utvärderingsanvändning och är en uppskattning av nedre gränsen, inte kostnad per uppgift; tid per åtgärd är ett genomsnitt, inte en median. En asterisk markerar prompt-cache-beteende på lanseringsdagen som ökade kostnaderna för cache-skrivningar. Saknade värden är opublicerade, inte noll.
- Vals Finance Agent v2Vals finansagent v2
- Testar finansiell analys med sökning, finansiella rapporter och beräkningsverktyg, inklusive dataverifiering mellan dokument, jämförelser av företagsprestanda och värdering. Huvudmetriken är Partial Credit, genomsnitt över tre körningar: svarskontroller får allvarlighetsbaserade vikter, och ett kritiskt dealbreaker-fel gör att den frågan får noll poäng. Högre är bättre. Detta skiljer sig från den separata metriken All-Pass och är inte godkännandegraden för hela frågan. Utvärderingsmetodik ↗
- Harvey's Legal Agent BenchmarkHarvey juridisk agentbenchmark
- Testar agenter som läser och redigerar filer för att producera juridiska arbetsprodukter i flera steg. En uppgift godkänns endast när varje bedömningskrav är uppfyllt. Poängen är den genomsnittliga uppgiftsgodkännandegraden från två bedömare; högre är bättre. Det är inte procentandelen enskilda kriterier som godkänts, och det mäter juridiska agentarbetsflöden snarare än LegalBenchs juridiska resonemangsfrågor. Utvärderingsmetodik ↗
- Vals IndexVals sammansatt index
- Ett sammansatt index över professionella uppgifter inom områden som finans, kodning och juridik. Dess procentuella poäng kombinerar benchmarkresultat med viktningsmetoden för den publicerade versionen; högre innebär starkare övergripande prestanda, inte träffsäkerheten för en enskild uppgift. Ingående domäner och vikter ändras mellan versioner, så nyare metodik får inte tillämpas retroaktivt på äldre poängögonblicksbilder. Utvärderingsmetodik ↗
- LegalBenchBenchmark för juridiskt resonemang
- Testar förståelse och resonemang kring juridisk text, inklusive att identifiera juridiska frågor, minnas och tillämpa regler samt bedöma juridiska slutsatser. Poängen är träffsäkerhet på juridiska resonemangsfrågor; högre är bättre. Till skillnad från Harvey's Legal Agent Benchmark mäter det inte en agent som producerar juridiska arbetsprodukter i flera steg genom att redigera filer. Utvärderingsmetodik ↗