Сравнение возможностей ИИ-моделей
Работа со знаниями
Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.
Harvey's Legal Agent BenchmarkБенчмарк юридического агента Harvey
— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores
| № | Модель | Cost / TestСтоимость за тест | Input costЦена ввода за миллион token | Output costЦена вывода за миллион токенов | DurationЗаявленная продолжительность теста | |
|---|---|---|---|---|---|---|
| 1 |  Gemini 4 ArgonGemini 4 Argon | 27.08 | $10.55 | $4 | $20 | 29.25 min |
| 2 |  Claude Sonnet 5.5Claude Sonnet 5.5 | 10.42 | $16.61 | $2 | $10 | 73 min |
| 3 | Claude Opus 5.5Claude Opus 5.5 | 9.17 | $21.38 | $4 | $20 | 58.45 min |
| 4 |  GPT-6 AstraGPT-6 Astra | 7.08 | $25.46 | $10 | $50 | 32.55 min |
| 5 | GPT-6.1 SolGPT-6.1 Sol | 6.25 | $3.54 | $2 | $10 | 40.43 min |
| 6 | GPT-6 LunaGPT-6 Luna | 4.17 | $0.3 | $0.1 | $0.5 | 21.75 min |
| 7 | Claude Haiku 5.5Claude Haiku 5.5 | 4.17 | $4.26 | $0.1 | $0.5 | 43.68 min |
Бенчмарки Vals.ai
Источник: Vals.ai ↗ · Обновлено 2026-10-19
Harvey's Legal Agent Benchmark · Обновлено 2026-10-19
PandaNpc Обновлено 21 окт. 2026 г., 06:01 UTC
Источник: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)
Пояснения к столбцам
- №
- Только порядок отображения. Сортировка меняет это число; это не опубликованный рейтинг возможностей.
- Модель
- Название оцениваемой модели и значок её провайдера. Прочерк в столбце с оценкой означает, что опубликованная оценка здесь недоступна, а не ноль.
- Cost / Test
- Стоимость за тест · USD
- Input cost
- Цена ввода за миллион token · USD / 1M tokens
- Output cost
- Цена вывода за миллион токенов · USD / 1M tokens
- Duration
- Заявленная продолжительность теста · s / min
- Vals.ai
- Затраты и время для этого бенчмарка указаны Vals, а не универсальные цены на модели или задержка. Оценка стоимости API для CUA-bench покрывает использование при оценке и является оценкой снизу, а не стоимостью за задачу; время на действие — это среднее, а не медиана. Звёздочка обозначает поведение prompt-cache в день запуска, которое увеличило затраты на запись в кэш. Отсутствующие значения не опубликованы, а не равны нулю.
- Vals Finance Agent v2Финансовый агент Vals v2
- Проверяет финансовый анализ с использованием поиска, финансовых отчётов и инструментов расчёта, включая сверку данных между документами, сравнение показателей компаний и оценку стоимости. Основная метрика — Partial Credit, усреднённая по трём запускам: проверки ответов получают веса в зависимости от серьёзности, а критическая ошибка-дисквалификатор обнуляет оценку за этот вопрос. Чем выше, тем лучше. Она отличается от отдельной метрики All-Pass и не является долей вопросов, пройденных целиком. Методология оценки ↗
- Harvey's Legal Agent BenchmarkБенчмарк юридического агента Harvey
- Проверяет способность агентов читать и редактировать файлы для создания многошаговых юридических рабочих продуктов. Задача считается пройденной только при выполнении всех требований оценки. Оценка — это средняя доля успешно пройденных задач по оценкам двух судей; чем выше, тем лучше. Это не процент пройденных отдельных критериев, и она измеряет рабочие процессы юридических агентов, а не вопросы правового рассуждения из LegalBench. Методология оценки ↗
- Vals IndexСводный индекс Vals
- Составной индекс профессиональных задач в таких областях, как финансы, программирование и право. Его процентная оценка объединяет результаты бенчмарков с использованием метода взвешивания для соответствующей опубликованной версии; более высокое значение означает более высокую общую эффективность, а не точность отдельной задачи. Включаемые предметные области и веса меняются от версии к версии, поэтому более новую методологию нельзя применять задним числом к старым снимкам оценок. Методология оценки ↗
- LegalBenchБенчмарк юридических рассуждений
- Проверяет понимание и рассуждение по юридическому тексту, включая выявление правовых вопросов, воспроизведение и применение правил, а также оценку правовых выводов. Оценка — это точность ответов на вопросы правового рассуждения; чем выше, тем лучше. В отличие от Harvey's Legal Agent Benchmark, он не измеряет, как агент создаёт многошаговые юридические рабочие продукты путём редактирования файлов. Методология оценки ↗