Σύγκριση Ικανοτήτων Μοντέλων AI
Εργασία γνώσης
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Harvey's Legal Agent BenchmarkBenchmark νομικού πράκτορα Harvey
— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores
| Αρ. | Μοντέλο | Cost / TestΚόστος ανά δοκιμή | Input costΤιμή εισόδου ανά εκατομμύριο token | Output costΤιμή εξόδου ανά εκατομμύριο token | DurationΑναφερόμενη διάρκεια δοκιμής | |
|---|---|---|---|---|---|---|
| 1 |  Gemini 4 ArgonGemini 4 Argon | 27.08 | $10.55 | $4 | $20 | 29.25 min |
| 2 |  Claude Sonnet 5.5Claude Sonnet 5.5 | 10.42 | $16.61 | $2 | $10 | 73 min |
| 3 | Claude Opus 5.5Claude Opus 5.5 | 9.17 | $21.38 | $4 | $20 | 58.45 min |
| 4 |  GPT-6 AstraGPT-6 Astra | 7.08 | $25.46 | $10 | $50 | 32.55 min |
| 5 | GPT-6.1 SolGPT-6.1 Sol | 6.25 | $3.54 | $2 | $10 | 40.43 min |
| 6 | GPT-6 LunaGPT-6 Luna | 4.17 | $0.3 | $0.1 | $0.5 | 21.75 min |
| 7 | Claude Haiku 5.5Claude Haiku 5.5 | 4.17 | $4.26 | $0.1 | $0.5 | 43.68 min |
Αξιολογήσεις Vals.ai
Πηγή: Vals.ai ↗ · Ενημερώθηκε 2026-10-19
Harvey's Legal Agent Benchmark · Ενημερώθηκε 2026-10-19
PandaNpc Ενημερώθηκε 21 Οκτ 2026, 06:01 (Συντονισμένη Παγκόσμια Ώρα)
Πηγή: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
Οδηγός στηλών
- Αρ.
- Μόνο σειρά εμφάνισης. Η ταξινόμηση αλλάζει αυτόν τον αριθμό· δεν αποτελεί δημοσιευμένη κατάταξη ικανοτήτων.
- Μοντέλο
- Το όνομα του αξιολογούμενου μοντέλου και το εικονίδιο του παρόχου του. Μια παύλα σε μια στήλη βαθμολογίας σημαίνει ότι δεν υπάρχει διαθέσιμη δημοσιευμένη βαθμολογία εδώ, όχι μηδέν.
- Cost / Test
- Κόστος ανά δοκιμή · USD
- Input cost
- Τιμή εισόδου ανά εκατομμύριο token · USD / 1M tokens
- Output cost
- Τιμή εξόδου ανά εκατομμύριο token · USD / 1M tokens
- Duration
- Αναφερόμενη διάρκεια δοκιμής · s / min
- Vals.ai
- Τα κόστη και οι χρόνοι αναφέρονται από το Vals για αυτό το benchmark, όχι καθολικές τιμές μοντέλων ή καθυστέρηση. Το εκτιμώμενο κόστος API του CUA-bench καλύπτει τη χρήση αξιολόγησης και αποτελεί εκτίμηση κατώτατου ορίου, όχι κόστος ανά εργασία· ο χρόνος ανά ενέργεια είναι μέσος όρος, όχι διάμεσος. Ένας αστερίσκος σηματοδοτεί τη συμπεριφορά prompt-cache την ημέρα κυκλοφορίας, η οποία αύξησε τα κόστη εγγραφής στην cache. Οι τιμές που λείπουν είναι μη δημοσιευμένες, όχι μηδέν.
- Vals Finance Agent v2Vals χρηματοοικονομικός πράκτορας v2
- Ελέγχει χρηματοοικονομική ανάλυση με εργαλεία αναζήτησης, χρηματοοικονομικών αναφορών και υπολογισμών, συμπεριλαμβανομένων ελέγχων δεδομένων μεταξύ εγγράφων, συγκρίσεων εταιρικής απόδοσης και αποτίμησης. Η κύρια μέτρηση είναι το Partial Credit, με μέσο όρο σε τρεις εκτελέσεις: οι έλεγχοι απαντήσεων λαμβάνουν βάρη βάσει σοβαρότητας, και ένα κρίσιμο σφάλμα dealbreaker κάνει τη βαθμολογία αυτής της ερώτησης μηδέν. Το υψηλότερο είναι καλύτερο. Αυτό διακρίνεται από τη ξεχωριστή μέτρηση All-Pass και δεν είναι ποσοστό επιτυχίας ολόκληρης της ερώτησης. Μεθοδολογία αξιολόγησης ↗
- Harvey's Legal Agent BenchmarkBenchmark νομικού πράκτορα Harvey
- Ελέγχει πράκτορες που διαβάζουν και επεξεργάζονται αρχεία για να παράγουν πολυβηματικά νομικά παραδοτέα. Μια εργασία περνά μόνο όταν πληρούνται όλες οι απαιτήσεις βαθμολόγησης. Η βαθμολογία είναι ο μέσος όρος του ποσοστού επιτυχίας εργασιών από δύο κριτές· υψηλότερη είναι καλύτερη. Δεν είναι το ποσοστό των επιμέρους κριτηρίων που πέρασαν, και μετρά ροές εργασίας νομικών πρακτόρων και όχι τις ερωτήσεις νομικής συλλογιστικής του LegalBench. Μεθοδολογία αξιολόγησης ↗
- Vals IndexΣύνθετος δείκτης Vals
- Ένας σύνθετος δείκτης επαγγελματικών εργασιών σε τομείς όπως χρηματοοικονομικά, προγραμματισμός και νομικά. Η ποσοστιαία βαθμολογία του συνδυάζει αποτελέσματα συγκριτικής αξιολόγησης χρησιμοποιώντας τη μέθοδο στάθμισης της εκάστοτε δημοσιευμένης έκδοσης· υψηλότερη σημαίνει ισχυρότερη συνολική απόδοση, όχι την ακρίβεια μίας μεμονωμένης εργασίας. Οι τομείς και τα βάρη που περιλαμβάνονται αλλάζουν μεταξύ εκδόσεων, επομένως η νεότερη μεθοδολογία δεν πρέπει να εφαρμόζεται αναδρομικά σε παλαιότερα στιγμιότυπα βαθμολογίας. Μεθοδολογία αξιολόγησης ↗
- LegalBenchBenchmark νομικής συλλογιστικής
- Ελέγχει την κατανόηση και τη συλλογιστική πάνω σε νομικά κείμενα, συμπεριλαμβανομένης της αναγνώρισης νομικών ζητημάτων, της ανάκλησης και εφαρμογής κανόνων, και της κρίσης νομικών συμπερασμάτων. Η βαθμολογία είναι η ακρίβεια σε ερωτήσεις νομικής συλλογιστικής· υψηλότερη είναι καλύτερη. Σε αντίθεση με το Harvey's Legal Agent Benchmark, δεν μετρά έναν πράκτορα που παράγει πολυβηματικά νομικά παραδοτέα επεξεργάζοντας αρχεία. Μεθοδολογία αξιολόγησης ↗