השוואת יכולות מודלי AI
עבודת ידע
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Harvey's Legal Agent Benchmarkבנצ'מרק סוכן משפטי של Harvey
— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores
| מס' | מודל | Cost / Testעלות לבדיקה | Input costמחיר קלט למיליון token | Output costמחיר פלט למיליון token | Durationמשך הבדיקה המדווח | |
|---|---|---|---|---|---|---|
| 1 | 27.08 | $10.55 | $4 | $20 | 29.25 min | |
| 2 | 10.42 | $16.61 | $2 | $10 | 73 min | |
| 3 | 9.17 | $21.38 | $4 | $20 | 58.45 min | |
| 4 | 7.08 | $25.46 | $10 | $50 | 32.55 min | |
| 5 | 6.25 | $3.54 | $2 | $10 | 40.43 min | |
| 6 | 4.17 | $0.3 | $0.1 | $0.5 | 21.75 min | |
| 7 | 4.17 | $4.26 | $0.1 | $0.5 | 43.68 min |
בנצ'מרקים של Vals.ai
מקור: Vals.ai ↗ · עודכן 2026-10-19
Harvey's Legal Agent Benchmark · עודכן 2026-10-19
PandaNpc עודכן 21 באוק׳ 2026, 06:01 UTC
מקור: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
מדריך עמודות
- מס'
- סדר תצוגה בלבד. המיון משנה את המספר הזה; זה אינו דירוג יכולת מפורסם.
- מודל
- שם המודל המוערך והאייקון של הספק שלו. מקף בעמודת ציון מציין שלא זמין כאן ציון מפורסם, ולא אפס.
- Cost / Test
- עלות לבדיקה · USD
- Input cost
- מחיר קלט למיליון token · USD / 1M tokens
- Output cost
- מחיר פלט למיליון token · USD / 1M tokens
- Duration
- משך הבדיקה המדווח · s / min
- Vals.ai
- עלויות וזמנים מדווחים על ידי Vals עבור בנצ'מרק זה, ולא מחירי מודלים או השהיה אוניברסליים. עלות ה-API המשוערת של CUA-bench מכסה שימוש בהערכה והיא אומדן חסם תחתון, לא עלות לכל משימה; זמן לפעולה הוא ממוצע, לא חציון. כוכבית מסמנת התנהגות prompt-cache ביום ההשקה שהגדילה את עלויות הכתיבה למטמון. ערכים חסרים לא פורסמו, לא אפס.
- Vals Finance Agent v2סוכן פיננסי Vals v2
- בודק ניתוח פיננסי עם כלי חיפוש, דוחות כספיים וחישוב, כולל בדיקות נתונים חוצות מסמכים, השוואות ביצועי חברות ותמחור. המדד העיקרי הוא Partial Credit, בממוצע על פני שלוש הרצות: בדיקות תשובה מקבלות משקלים מבוססי חומרה, ושגיאת מכשול קריטית מאפסת את הציון של אותה שאלה. גבוה יותר עדיף. זה נבדל מהמדד הנפרד All-Pass ואינו שיעור מעבר של שאלה שלמה. מתודולוגיית הערכה ↗
- Harvey's Legal Agent Benchmarkבנצ'מרק סוכן משפטי של Harvey
- בודק סוכנים הקוראים ועורכים קבצים כדי להפיק תוצרי עבודה משפטיים רב-שלביים. משימה עוברת רק כאשר כל דרישת ניקוד מתמלאת. הציון הוא שיעור המעבר הממוצע של משימות משני שופטים; גבוה יותר עדיף. זה אינו אחוז הקריטריונים הבודדים שעברו, והוא מודד תהליכי עבודה של סוכנים משפטיים ולא את שאלות החשיבה המשפטית של LegalBench. מתודולוגיית הערכה ↗
- Vals Indexמדד משולב Vals
- מדד מורכב של משימות מקצועיות בתחומים כגון פיננסים, קוד ומשפטים. ציון האחוזים שלו משלב תוצאות בנצ'מרק באמצעות שיטת השקלול של אותה גרסה שפורסמה; גבוה יותר פירושו ביצועים כוללים חזקים יותר, ולא דיוק של משימה בודדת. התחומים והמשקלים הכלולים משתנים בין גרסאות, ולכן אין להחיל מתודולוגיה חדשה בדיעבד על תצלומי ציונים ישנים. מתודולוגיית הערכה ↗
- LegalBenchבנצ'מרק חשיבה משפטית
- בודק הבנה וחשיבה על טקסט משפטי, כולל זיהוי סוגיות משפטיות, היזכרות ויישום כללים, והערכת מסקנות משפטיות. הציון הוא דיוק בשאלות חשיבה משפטית; גבוה יותר עדיף. שלא כמו Harvey's Legal Agent Benchmark, הוא אינו מודד סוכן שמייצר תוצרי עבודה משפטיים רב-שלביים על ידי עריכת קבצים. מתודולוגיית הערכה ↗