Сравнение возможностей ИИ-моделей
Работа со знаниями
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Vals Finance Agent v2Финансовый агент Vals v2
— means no published score for this candidate in this source, not zero.10/11 recent-year models have scores
| № | Модель | Cost / TestСтоимость за тест | Input costЦена ввода за миллион token | Output costЦена вывода за миллион токенов | DurationЗаявленная продолжительность теста | |
|---|---|---|---|---|---|---|
| 1 | 65.4 | $4.38 | $4 | $20 | 16.35 min | |
| 2 | 58.88 | $8.35 | $10 | $50 | 18.23 min | |
| 3 | 58.63 | $5.12 | $5 | $25 | 9.97 min | |
| 4 | 58.59 | $9.22 | $4 | $20 | 33.13 min | |
| 5 | 58.1 | $6.55 | $2 | $10 | 31.72 min | |
| 6 | 54.14 | $1.64 | $0.1 | $0.5 | 30.82 min | |
| 7 | 53.54 | $6.82 | $10 | $50 | 11.55 min | |
| 8 | 52.03 | $1.62 | $2 | $10 | 15.42 min | |
| 9 | 49.87 | $0.12 | $0.1 | $0.5 | 14.97 min | |
| 10 | 49.05 | $2.12 | $2 | $10 | 9 min |
Бенчмарки Vals.ai
Источник: Vals.ai ↗ · Обновлено 2026-10-19
Vals Finance Agent v2 · Обновлено 2026-10-18
PandaNpc Обновлено 21 окт. 2026 г., 06:01 UTC
Источник: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
Пояснения к столбцам
- №
- Только порядок отображения. Сортировка меняет это число; это не опубликованный рейтинг возможностей.
- Модель
- Название оцениваемой модели и значок её провайдера. Прочерк в столбце с оценкой означает, что опубликованная оценка здесь недоступна, а не ноль.
- Cost / Test
- Стоимость за тест · USD
- Input cost
- Цена ввода за миллион token · USD / 1M tokens
- Output cost
- Цена вывода за миллион токенов · USD / 1M tokens
- Duration
- Заявленная продолжительность теста · s / min
- Vals.ai
- Затраты и время для этого бенчмарка указаны Vals, а не универсальные цены на модели или задержка. Оценка стоимости API для CUA-bench покрывает использование при оценке и является оценкой снизу, а не стоимостью за задачу; время на действие — это среднее, а не медиана. Звёздочка обозначает поведение prompt-cache в день запуска, которое увеличило затраты на запись в кэш. Отсутствующие значения не опубликованы, а не равны нулю.
- Vals Finance Agent v2Финансовый агент Vals v2
- Проверяет финансовый анализ с использованием поиска, финансовых отчётов и инструментов расчёта, включая сверку данных между документами, сравнение показателей компаний и оценку стоимости. Основная метрика — Partial Credit, усреднённая по трём запускам: проверки ответов получают веса в зависимости от серьёзности, а критическая ошибка-дисквалификатор обнуляет оценку за этот вопрос. Чем выше, тем лучше. Она отличается от отдельной метрики All-Pass и не является долей вопросов, пройденных целиком. Методология оценки ↗
- Harvey's Legal Agent BenchmarkБенчмарк юридического агента Harvey
- Проверяет способность агентов читать и редактировать файлы для создания многошаговых юридических рабочих продуктов. Задача считается пройденной только при выполнении всех требований оценки. Оценка — это средняя доля успешно пройденных задач по оценкам двух судей; чем выше, тем лучше. Это не процент пройденных отдельных критериев, и она измеряет рабочие процессы юридических агентов, а не вопросы правового рассуждения из LegalBench. Методология оценки ↗
- Vals IndexСводный индекс Vals
- Составной индекс профессиональных задач в таких областях, как финансы, программирование и право. Его процентная оценка объединяет результаты бенчмарков с использованием метода взвешивания для соответствующей опубликованной версии; более высокое значение означает более высокую общую эффективность, а не точность отдельной задачи. Включаемые предметные области и веса меняются от версии к версии, поэтому более новую методологию нельзя применять задним числом к старым снимкам оценок. Методология оценки ↗
- LegalBenchБенчмарк юридических рассуждений
- Проверяет понимание и рассуждение по юридическому тексту, включая выявление правовых вопросов, воспроизведение и применение правил, а также оценку правовых выводов. Оценка — это точность ответов на вопросы правового рассуждения; чем выше, тем лучше. В отличие от Harvey's Legal Agent Benchmark, он не измеряет, как агент создаёт многошаговые юридические рабочие продукты путём редактирования файлов. Методология оценки ↗