AIモデル能力比較

ナレッジワーク

Only models released within the past year are shown. Only benchmarks covering at least 3 of these models are shown. Unknown release dates are excluded; historical data is retained.

Harvey's Legal Agent BenchmarkHarvey 法務エージェントベンチマーク

— means no published score for this candidate in this source, not zero.7/11 recent-year models have scores

番号モデルCost / TestテストあたりのコストInput cost100万tokenあたりの入力価格Output cost100万tokenあたりの出力価格Duration報告されたテスト所要時間
1Google DeepMindGemini 4 ArgonGemini 4 Argon27.08$10.55$4$2029.25 min
2AnthropicClaude Sonnet 5.5Claude Sonnet 5.510.42$16.61$2$1073 min
3AnthropicClaude Opus 5.5Claude Opus 5.59.17$21.38$4$2058.45 min
4OpenAIGPT-6 AstraGPT-6 Astra7.08$25.46$10$5032.55 min
5OpenAIGPT-6.1 SolGPT-6.1 Sol6.25$3.54$2$1040.43 min
6OpenAIGPT-6 LunaGPT-6 Luna4.17$0.3$0.1$0.521.75 min
7AnthropicClaude Haiku 5.5Claude Haiku 5.54.17$4.26$0.1$0.543.68 min

Vals.ai ベンチマーク

ソース: Vals.ai ↗ · 更新日 2026-10-19

Harvey's Legal Agent Benchmark · 更新日 2026-10-19

PandaNpc 更新日 2026年10月21日 06:01 UTC

ソース: Epoch AI, CC BY 4.0 · Vals.ai · Artificial Analysis (artificialanalysis.ai)

列ガイド

番号
表示順序のみです。並べ替えによりこの数値は変わりますが、公開された能力ランキングではありません。
モデル
評価対象のモデル名とプロバイダーのアイコン。スコア列のダッシュは、ここに公開スコアがないことを意味し、ゼロではありません。
Cost / Test
テストあたりのコスト · USD
Input cost
100万tokenあたりの入力価格 · USD / 1M tokens
Output cost
100万tokenあたりの出力価格 · USD / 1M tokens
Duration
報告されたテスト所要時間 · s / min
Vals.ai
コストと時間はこのベンチマークについて Vals によって報告されたものであり、普遍的なモデル価格やレイテンシではありません。CUA-bench の推定 API コストは評価での使用を対象としたもので、下限の推定値であり、タスクあたりのコストではありません。アクションあたりの時間は平均であり、中央値ではありません。アスタリスクは、キャッシュ書き込みコストを増加させたローンチ日のプロンプトキャッシュ動作を示します。欠損値は未公開であり、ゼロではありません。
Vals Finance Agent v2Vals 金融エージェント v2
検索、財務レポート、計算ツールを用いた財務分析をテストし、文書横断的なデータ確認、企業業績の比較、バリュエーションを含みます。主な指標は Partial Credit で、3回の実行の平均です。回答チェックには重大度に基づく重みが付き、重大な dealbreaker エラーがあるとその問題のスコアはゼロになります。高いほど優れています。これは別個の All-Pass 指標とは異なり、問題全体の合格率ではありません。 評価方法論 ↗
Harvey's Legal Agent BenchmarkHarvey 法務エージェントベンチマーク
ファイルを読み取り、編集して多段階の法務成果物を作成するエージェントをテストします。タスクは、すべての採点要件が満たされた場合にのみ合格となります。スコアは2人の審査員によるタスク合格率の平均で、高いほど優れています。個々の基準の合格率ではなく、LegalBench の法的推論問題ではなく、法務エージェントのワークフローを測定します。 評価方法論 ↗
Vals IndexVals 総合指数
金融、コーディング、法務などの分野における専門タスクの複合インデックス。そのパーセンテージスコアは、公開されたバージョンの重み付け手法を用いてベンチマーク結果を組み合わせたもの。高いほど総合性能が強いことを意味し、単一タスクの正確性ではありません。含まれるドメインと重みはバージョン間で変わるため、新しい方法論を古いスコアスナップショットに遡って適用してはいけません。 評価方法論 ↗
LegalBench法的推論ベンチマーク
法的テキストの理解と推論をテストし、法的論点の特定、ルールの想起と適用、法的結論の判断を含みます。スコアは法的推論問題の正確性で、高いほど優れています。Harvey's Legal Agent Benchmark と異なり、ファイルを編集して多段階の法務成果物を作成するエージェントを測定するものではありません。 評価方法論 ↗