AI मॉडल क्षमता तुलना

ज्ञान कार्य

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

Vals IndexVals समग्र सूचकांक

— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores

क्र.मॉडलCost / Testप्रति परीक्षण लागतInput costप्रति मिलियन token इनपुट मूल्यOutput costआउटपुट मूल्य प्रति मिलियन tokenDurationरिपोर्ट की गई परीक्षण अवधिInput / Output Tokensइनपुट / आउटपुट token का रिपोर्ट किया गया उपयोग
1AnthropicClaude Sonnet 5.5Claude Sonnet 5.570.85$18.7$2$1086 min45.09B / 654.94M
2AnthropicClaude Opus 5.5Claude Opus 5.570.18$28.12$4$2085 min31.96B / 499.75M
3Google DeepMindGemini 4 ArgonGemini 4 Argon69.24$13.37$4$2044.97 min13.36B / 146.17M
4OpenAIGPT-6 AstraGPT-6 Astra65.02$21.28$10$5033.65 min4.92B / 96.77M
5OpenAIGPT-6.1 SolGPT-6.1 Sol63.94$3.61$2$1044.4 min5.49B / 103.20M
6AnthropicClaude Haiku 5.5Claude Haiku 5.558.71$3.17$0.1$0.549.8 min23.07B / 765.85M
7OpenAIGPT-6 LunaGPT-6 Luna52.32$0.45$0.1$0.532.38 min10.05B / 202.17M

Vals.ai बेंचमार्क

स्रोत: Vals.ai ↗ · अपडेटेड 2026-10-19

Vals Index · अपडेटेड 2026-10-19

PandaNpc अपडेटेड 21 अक्टू॰ 2026, 06:01 UTC

स्रोत: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

स्तंभ गाइड

क्र.
केवल प्रदर्शन क्रम। क्रमबद्ध करने पर यह संख्या बदलती है; यह प्रकाशित क्षमता रैंक नहीं है।
मॉडल
मूल्यांकित मॉडल का नाम और उसके प्रदाता का आइकन। स्कोर स्तंभ में डैश का अर्थ है कि यहाँ कोई प्रकाशित स्कोर उपलब्ध नहीं है, शून्य नहीं।
Cost / Test
प्रति परीक्षण लागत · USD
Input cost
प्रति मिलियन token इनपुट मूल्य · USD / 1M tokens
Output cost
आउटपुट मूल्य प्रति मिलियन token · USD / 1M tokens
Duration
रिपोर्ट की गई परीक्षण अवधि · s / min
Input / Output Tokens
इनपुट / आउटपुट token का रिपोर्ट किया गया उपयोग · tokens
Vals.ai
इस बेंचमार्क के लिए लागत और समय Vals द्वारा रिपोर्ट किए गए हैं, न कि सार्वभौमिक मॉडल कीमतें या विलंबता। CUA-bench का अनुमानित API लागत मूल्यांकन उपयोग को कवर करता है और एक निम्न-सीमा अनुमान है, प्रति कार्य लागत नहीं; प्रति क्रिया समय एक औसत है, माध्यक नहीं। एक तारांकन लॉन्च-डे प्रॉम्प्ट-कैश व्यवहार को चिह्नित करता है जिसने कैश-राइट लागतें बढ़ाईं। अनुपलब्ध मान अप्रकाशित हैं, शून्य नहीं।
Vals Finance Agent v2Vals वित्त एजेंट v2
खोज, वित्तीय रिपोर्ट और गणना उपकरणों के साथ वित्तीय विश्लेषण का परीक्षण करता है, जिसमें क्रॉस-डॉक्युमेंट डेटा जाँच, कंपनी प्रदर्शन तुलना और मूल्यांकन शामिल हैं। मुख्य मेट्रिक Partial Credit है, जिसे तीन रनों पर औसत किया जाता है: उत्तर जाँचों को गंभीरता-आधारित भार मिलते हैं, और एक महत्वपूर्ण निर्णायक त्रुटि उस प्रश्न का स्कोर शून्य कर देती है। अधिक बेहतर है। यह अलग All-Pass मेट्रिक से भिन्न है और पूरे प्रश्न का पास दर नहीं है। मूल्यांकन पद्धति ↗
Harvey's Legal Agent BenchmarkHarvey कानूनी एजेंट बेंचमार्क
फ़ाइलों को पढ़ने और संपादित करके बहु-चरणीय कानूनी कार्य उत्पाद बनाने वाले एजेंटों का परीक्षण करता है। कोई कार्य तभी पास होता है जब हर ग्रेडिंग आवश्यकता पूरी हो। स्कोर दो जजों से औसत कार्य पास दर है; अधिक बेहतर है। यह पास हुए व्यक्तिगत मानदंडों का प्रतिशत नहीं है, और यह LegalBench के कानूनी तर्क प्रश्नों के बजाय कानूनी एजेंट वर्कफ़्लो को मापता है। मूल्यांकन पद्धति ↗
Vals IndexVals समग्र सूचकांक
वित्त, कोडिंग और कानून जैसे क्षेत्रों में पेशेवर कार्यों का एक समग्र सूचकांक। इसका प्रतिशत स्कोर उस प्रकाशित संस्करण के लिए भारांकन विधि का उपयोग करके बेंचमार्क परिणामों को जोड़ता है; अधिक का अर्थ है बेहतर समग्र प्रदर्शन, किसी एकल कार्य की सटीकता नहीं। शामिल डोमेन और भार संस्करणों के अनुसार बदलते हैं, इसलिए नई पद्धति को पुराने स्कोर स्नैपशॉट पर पूर्वव्यापी रूप से लागू नहीं किया जाना चाहिए। मूल्यांकन पद्धति ↗
LegalBenchकानूनी तर्क बेंचमार्क
कानूनी पाठ पर समझ और तर्क का परीक्षण करता है, जिसमें कानूनी मुद्दों की पहचान, नियमों को याद करना और लागू करना, और कानूनी निष्कर्षों का निर्णय करना शामिल है। स्कोर कानूनी तर्क प्रश्नों पर सटीकता है; अधिक बेहतर है। Harvey's Legal Agent Benchmark के विपरीत, यह फ़ाइलों को संपादित करके बहु-चरणीय कानूनी कार्य उत्पाद बनाने वाले एजेंट को नहीं मापता। मूल्यांकन पद्धति ↗