השוואת יכולות מודלי AI
עבודת ידע
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Vals Finance Agent v2סוכן פיננסי Vals v2
— means no published score for this candidate in this source, not zero.10/11 recent-year models have scores
| מס' | מודל | Cost / Testעלות לבדיקה | Input costמחיר קלט למיליון token | Output costמחיר פלט למיליון token | Durationמשך הבדיקה המדווח | |
|---|---|---|---|---|---|---|
| 1 | 65.4 | $4.38 | $4 | $20 | 16.35 min | |
| 2 | 58.88 | $8.35 | $10 | $50 | 18.23 min | |
| 3 | 58.63 | $5.12 | $5 | $25 | 9.97 min | |
| 4 | 58.59 | $9.22 | $4 | $20 | 33.13 min | |
| 5 | 58.1 | $6.55 | $2 | $10 | 31.72 min | |
| 6 | 54.14 | $1.64 | $0.1 | $0.5 | 30.82 min | |
| 7 | 53.54 | $6.82 | $10 | $50 | 11.55 min | |
| 8 | 52.03 | $1.62 | $2 | $10 | 15.42 min | |
| 9 | 49.87 | $0.12 | $0.1 | $0.5 | 14.97 min | |
| 10 | 49.05 | $2.12 | $2 | $10 | 9 min |
PandaNpc עודכן 21 באוק׳ 2026, 06:01 UTC
מקור: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
מדריך עמודות
- מס'
- סדר תצוגה בלבד. המיון משנה את המספר הזה; זה אינו דירוג יכולת מפורסם.
- מודל
- שם המודל המוערך והאייקון של הספק שלו. מקף בעמודת ציון מציין שלא זמין כאן ציון מפורסם, ולא אפס.
- Cost / Test
- עלות לבדיקה · USD
- Input cost
- מחיר קלט למיליון token · USD / 1M tokens
- Output cost
- מחיר פלט למיליון token · USD / 1M tokens
- Duration
- משך הבדיקה המדווח · s / min
- Vals.ai
- עלויות וזמנים מדווחים על ידי Vals עבור בנצ'מרק זה, ולא מחירי מודלים או השהיה אוניברסליים. עלות ה-API המשוערת של CUA-bench מכסה שימוש בהערכה והיא אומדן חסם תחתון, לא עלות לכל משימה; זמן לפעולה הוא ממוצע, לא חציון. כוכבית מסמנת התנהגות prompt-cache ביום ההשקה שהגדילה את עלויות הכתיבה למטמון. ערכים חסרים לא פורסמו, לא אפס.
- Vals Finance Agent v2סוכן פיננסי Vals v2
- בודק ניתוח פיננסי עם כלי חיפוש, דוחות כספיים וחישוב, כולל בדיקות נתונים חוצות מסמכים, השוואות ביצועי חברות ותמחור. המדד העיקרי הוא Partial Credit, בממוצע על פני שלוש הרצות: בדיקות תשובה מקבלות משקלים מבוססי חומרה, ושגיאת מכשול קריטית מאפסת את הציון של אותה שאלה. גבוה יותר עדיף. זה נבדל מהמדד הנפרד All-Pass ואינו שיעור מעבר של שאלה שלמה. מתודולוגיית הערכה ↗
- Harvey's Legal Agent Benchmarkבנצ'מרק סוכן משפטי של Harvey
- בודק סוכנים הקוראים ועורכים קבצים כדי להפיק תוצרי עבודה משפטיים רב-שלביים. משימה עוברת רק כאשר כל דרישת ניקוד מתמלאת. הציון הוא שיעור המעבר הממוצע של משימות משני שופטים; גבוה יותר עדיף. זה אינו אחוז הקריטריונים הבודדים שעברו, והוא מודד תהליכי עבודה של סוכנים משפטיים ולא את שאלות החשיבה המשפטית של LegalBench. מתודולוגיית הערכה ↗
- Vals Indexמדד משולב Vals
- מדד מורכב של משימות מקצועיות בתחומים כגון פיננסים, קוד ומשפטים. ציון האחוזים שלו משלב תוצאות בנצ'מרק באמצעות שיטת השקלול של אותה גרסה שפורסמה; גבוה יותר פירושו ביצועים כוללים חזקים יותר, ולא דיוק של משימה בודדת. התחומים והמשקלים הכלולים משתנים בין גרסאות, ולכן אין להחיל מתודולוגיה חדשה בדיעבד על תצלומי ציונים ישנים. מתודולוגיית הערכה ↗
- LegalBenchבנצ'מרק חשיבה משפטית
- בודק הבנה וחשיבה על טקסט משפטי, כולל זיהוי סוגיות משפטיות, היזכרות ויישום כללים, והערכת מסקנות משפטיות. הציון הוא דיוק בשאלות חשיבה משפטית; גבוה יותר עדיף. שלא כמו Harvey's Legal Agent Benchmark, הוא אינו מודד סוכן שמייצר תוצרי עבודה משפטיים רב-שלביים על ידי עריכת קבצים. מתודולוגיית הערכה ↗