本文へスキップ
原文
The Decoder· Manuel Uth·· 10 時間前AIスコア46

SemiAnalysisの実務ベンチマーク「GDPx」、AIエージェントの最高スコアは12%止まり

No AI agent scores above 12 percent on SemiAnalysis' new real-world work benchmark

AIによる概要

SemiAnalysisは、AIエージェントを模擬的な業務環境に置く新ベンチマーク「GDPx」を公開し、いずれのモデルも12%を超えなかった。最高値はClaude Opus 5.5の12%で、Gemini 4 Carbonは10.9%ながらタスク当たり16.29ドルと、Opus 5.5の約3分の1の価格である。206タスク、11分野で構成され、安全フィルタの影響で順位も変わる。

出典: The Decoder · the-decoder.com