評価ソース公式サイト
WeirdML
WeirdML / コーディング · 未知のデータで機械学習の手法を実装する
AIサイシン での扱い観察中
配分採点対象外
元データの日時未確認
最終同期収集前
何を、どう測るか
実際のタスクリストと固定した GPU 時間で比較し、5 回の反復による採点プロトコルを維持する。
当サイトでの使い方
観察中:公式 CSV は読めるが、成績のライセンスとモデル別の実行時間はまだ完全には確認できていない。
評価の限界とデータの出典
観察中:公式 CSV は読めるが、成績のライセンスとモデル別の実行時間はまだ完全には確認できていない。
データライセンス:ランキングデータの利用範囲は確認待ち
成績は WeirdML が公表したもの。元のスコアと AIサイシン のコンセンサス指数は尺度が異なり、そのまま比較・合算はできない。