Сравнение возможностей ИИ-моделей

Работа со знаниями

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

Vals IndexСводный индекс Vals

— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores

№МодельCost / TestСтоимость за тестInput costЦена ввода за миллион tokenOutput costЦена вывода за миллион токеновDurationЗаявленная продолжительность тестаInput / Output TokensЗаявленное использование входных / выходных token
1AnthropicClaude Sonnet 5.5Claude Sonnet 5.570.85$18.7$2$1086 min45.09B / 654.94M
2AnthropicClaude Opus 5.5Claude Opus 5.570.18$28.12$4$2085 min31.96B / 499.75M
3Google DeepMindGemini 4 ArgonGemini 4 Argon69.24$13.37$4$2044.97 min13.36B / 146.17M
4OpenAIGPT-6 AstraGPT-6 Astra65.02$21.28$10$5033.65 min4.92B / 96.77M
5OpenAIGPT-6.1 SolGPT-6.1 Sol63.94$3.61$2$1044.4 min5.49B / 103.20M
6AnthropicClaude Haiku 5.5Claude Haiku 5.558.71$3.17$0.1$0.549.8 min23.07B / 765.85M
7OpenAIGPT-6 LunaGPT-6 Luna52.32$0.45$0.1$0.532.38 min10.05B / 202.17M

Бенчмарки Vals.ai

Источник: Vals.ai ↗ · Обновлено 2026-10-19

Vals Index · Обновлено 2026-10-19

PandaNpc Обновлено 21 окт. 2026 г., 06:01 UTC

Источник: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

Пояснения к столбцам

№
Только порядок отображения. Сортировка меняет это число; это не опубликованный рейтинг возможностей.
Модель
Название оцениваемой модели и значок её провайдера. Прочерк в столбце с оценкой означает, что опубликованная оценка здесь недоступна, а не ноль.
Cost / Test
Стоимость за тест · USD
Input cost
Цена ввода за миллион token · USD / 1M tokens
Output cost
Цена вывода за миллион токенов · USD / 1M tokens
Duration
Заявленная продолжительность теста · s / min
Input / Output Tokens
Заявленное использование входных / выходных token · tokens
Vals.ai
Затраты и время для этого бенчмарка указаны Vals, а не универсальные цены на модели или задержка. Оценка стоимости API для CUA-bench покрывает использование при оценке и является оценкой снизу, а не стоимостью за задачу; время на действие — это среднее, а не медиана. Звёздочка обозначает поведение prompt-cache в день запуска, которое увеличило затраты на запись в кэш. Отсутствующие значения не опубликованы, а не равны нулю.
Vals Finance Agent v2Финансовый агент Vals v2
Проверяет финансовый анализ с использованием поиска, финансовых отчётов и инструментов расчёта, включая сверку данных между документами, сравнение показателей компаний и оценку стоимости. Основная метрика — Partial Credit, усреднённая по трём запускам: проверки ответов получают веса в зависимости от серьёзности, а критическая ошибка-дисквалификатор обнуляет оценку за этот вопрос. Чем выше, тем лучше. Она отличается от отдельной метрики All-Pass и не является долей вопросов, пройденных целиком. Методология оценки ↗
Harvey's Legal Agent BenchmarkБенчмарк юридического агента Harvey
Проверяет способность агентов читать и редактировать файлы для создания многошаговых юридических рабочих продуктов. Задача считается пройденной только при выполнении всех требований оценки. Оценка — это средняя доля успешно пройденных задач по оценкам двух судей; чем выше, тем лучше. Это не процент пройденных отдельных критериев, и она измеряет рабочие процессы юридических агентов, а не вопросы правового рассуждения из LegalBench. Методология оценки ↗
Vals IndexСводный индекс Vals
Составной индекс профессиональных задач в таких областях, как финансы, программирование и право. Его процентная оценка объединяет результаты бенчмарков с использованием метода взвешивания для соответствующей опубликованной версии; более высокое значение означает более высокую общую эффективность, а не точность отдельной задачи. Включаемые предметные области и веса меняются от версии к версии, поэтому более новую методологию нельзя применять задним числом к старым снимкам оценок. Методология оценки ↗
LegalBenchБенчмарк юридических рассуждений
Проверяет понимание и рассуждение по юридическому тексту, включая выявление правовых вопросов, воспроизведение и применение правил, а также оценку правовых выводов. Оценка — это точность ответов на вопросы правового рассуждения; чем выше, тем лучше. В отличие от Harvey's Legal Agent Benchmark, он не измеряет, как агент создаёт многошаговые юридические рабочие продукты путём редактирования файлов. Методология оценки ↗