本文へスキップ
評価ソース

FrontierMath v2 · Tier 4

Epoch AI / 推論 · さらに難しい数学研究の問題

公式サイト
AIサイシン での扱いランキング採用
配分1.2%
元データの日時10/20 07:39
最終同期10/24 02:22

何を、どう測るか

Tier 4 を独立して保存し、Tiers 1〜3 と数学の証拠予算を共有する。サンプル誤差は残す。

当サイトでの使い方

正式に採点する。同じ問題ファミリーは固定予算を共有する。

評価成績

一定のルールに従い、公開モデルごとに代表的な構成を一つ採用する。匿名のテスト版モデルは表示せず、元の順位をそのまま残す。各項目最大 30 件。

元の順位モデル名元スコア代表構成
1gpt-6.1-sol_maxOpenAI100.0%Max 推論
2gpt-6-astra_maxOpenAI97.6%Max 推論
6claude-opus-5-5_maxAnthropic95.0%Max 推論
7claude-fable-5_maxAnthropic90.2%Max 推論
8gpt-6-sol_maxOpenAI90.0%Max 推論
9claude-fable-5-1_maxAnthropic87.8%Max 推論
11gpt-5.6-sol_maxOpenAI82.9%Max 推論
13claude-sonnet-5-5_maxAnthropic80.5%Max 推論
15gpt-5.5-pro_xhighOpenAI78.0%xHigh 推論
15gemini-4-argon_highGoogle78.0%High 推論
18claude-opus-5_maxAnthropic73.2%Max 推論
19gpt-5.5_xhighOpenAI72.5%xHigh 推論
20gpt-5.6-terra_maxOpenAI70.7%Max 推論
20muse-wonder-1.0_max—70.7%Max 推論
22gpt-5.6-luna_maxOpenAI61.0%Max 推論
23gpt-5.4-pro-2026-03-05_xhighOpenAI58.5%xHigh 推論
24gpt-6-luna_maxOpenAI56.1%Max 推論
24claude-opus-4-8_maxAnthropic56.1%Max 推論
26gpt-5.4-2026-03-05_xhighOpenAI49.0%xHigh 推論
27claude-haiku-5-5_maxAnthropic46.3%Max 推論
27muse-spark-1.3_maxMeta46.3%Max 推論
27qwen3.8-max_xhighAlibaba46.3%xHigh 推論
27deepseek-v4.1-flash-1017_maxDeepSeek46.3%Max 推論
31gpt-5.2-pro-2025-12-11_xhighOpenAI46.0%xHigh 推論
33kimi-k3_maxMoonshot AI39.0%Max 推論
34gemini-3.7-flash_highGoogle36.6%High 推論
35qwen3.8-max-0902_xhighAlibaba34.1%xHigh 推論
35qwen3.7-maxAlibaba34.1%ソース既定の構成
37grok-4.6_xhighxAI31.7%xHigh 推論
37claude-opus-4-7_maxAnthropic31.7%Max 推論
評価の限界とデータの出典

正式に採点する。同じ問題ファミリーは固定予算を共有する。

データライセンス:CC BY 4.0 · Epoch AI が独自に実施した評価データ

成績は Epoch AI が公表したもの。元のスコアと AIサイシン のコンセンサス指数は尺度が異なり、そのまま比較・合算はできない。