Сравнение возможностей ИИ-моделей

Работа со знаниями

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

LegalBenchБенчмарк юридических рассуждений

— means no published score for this candidate in this source, not zero.3/11 recent-year models have scores

№МодельInput costЦена ввода за миллион tokenOutput costЦена вывода за миллион токеновLatencyЗаявленная задержка
1AnthropicClaude Fable 5.1Claude Fable 5.188.51$10$5012.4 s
2Google DeepMindGemini 4 ArgonGemini 4 Argon88.3$4$2012.62 s
3AnthropicClaude Opus 5Claude Opus 586.97$5$254.42 s

Бенчмарки Vals.ai

Источник: Vals.ai ↗ · Обновлено 2026-10-19

LegalBench · Обновлено 2026-10-13

PandaNpc Обновлено 21 окт. 2026 г., 06:01 UTC

Источник: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

Пояснения к столбцам

№
Только порядок отображения. Сортировка меняет это число; это не опубликованный рейтинг возможностей.
Модель
Название оцениваемой модели и значок её провайдера. Прочерк в столбце с оценкой означает, что опубликованная оценка здесь недоступна, а не ноль.
Input cost
Цена ввода за миллион token · USD / 1M tokens
Output cost
Цена вывода за миллион токенов · USD / 1M tokens
Latency
Заявленная задержка · s / min
Vals.ai
Затраты и время для этого бенчмарка указаны Vals, а не универсальные цены на модели или задержка. Оценка стоимости API для CUA-bench покрывает использование при оценке и является оценкой снизу, а не стоимостью за задачу; время на действие — это среднее, а не медиана. Звёздочка обозначает поведение prompt-cache в день запуска, которое увеличило затраты на запись в кэш. Отсутствующие значения не опубликованы, а не равны нулю.
Vals Finance Agent v2Финансовый агент Vals v2
Проверяет финансовый анализ с использованием поиска, финансовых отчётов и инструментов расчёта, включая сверку данных между документами, сравнение показателей компаний и оценку стоимости. Основная метрика — Partial Credit, усреднённая по трём запускам: проверки ответов получают веса в зависимости от серьёзности, а критическая ошибка-дисквалификатор обнуляет оценку за этот вопрос. Чем выше, тем лучше. Она отличается от отдельной метрики All-Pass и не является долей вопросов, пройденных целиком. Методология оценки ↗
Harvey's Legal Agent BenchmarkБенчмарк юридического агента Harvey
Проверяет способность агентов читать и редактировать файлы для создания многошаговых юридических рабочих продуктов. Задача считается пройденной только при выполнении всех требований оценки. Оценка — это средняя доля успешно пройденных задач по оценкам двух судей; чем выше, тем лучше. Это не процент пройденных отдельных критериев, и она измеряет рабочие процессы юридических агентов, а не вопросы правового рассуждения из LegalBench. Методология оценки ↗
Vals IndexСводный индекс Vals
Составной индекс профессиональных задач в таких областях, как финансы, программирование и право. Его процентная оценка объединяет результаты бенчмарков с использованием метода взвешивания для соответствующей опубликованной версии; более высокое значение означает более высокую общую эффективность, а не точность отдельной задачи. Включаемые предметные области и веса меняются от версии к версии, поэтому более новую методологию нельзя применять задним числом к старым снимкам оценок. Методология оценки ↗
LegalBenchБенчмарк юридических рассуждений
Проверяет понимание и рассуждение по юридическому тексту, включая выявление правовых вопросов, воспроизведение и применение правил, а также оценку правовых выводов. Оценка — это точность ответов на вопросы правового рассуждения; чем выше, тем лучше. В отличие от Harvey's Legal Agent Benchmark, он не измеряет, как агент создаёт многошаговые юридические рабочие продукты путём редактирования файлов. Методология оценки ↗