Latent Space· Richard MacManus·· 2 時間前AIスコア29
Elorian、視覚推論ベンチマーク「DecoyCount」で Glimpse を検証
Can Frontier Models See Past a Decoy? Elorian Tests Visual Reasoning
AIによる概要
Elorianの視覚推論モデル「Glimpse」が、共同公開されたベンチマーク「DecoyCount」で50.48%を記録した。論文で最高だったGPT-6 Astraの43.17%を上回るが、これは社内テストの単発実行による結果で、論文のモデルは3回の平均値である。DecoyCountは1,660問から成り、視覚と推論を同時に検証する点が特徴とされる。
出典: Latent Space · latent.space