本文へスキップ
原文
SB Intuitions ブログ· wk0·· 2026年7月29日AIスコア38

JMT-Safety、日本語マルチターン安全性評価ベンチマークを公開

JMT-Safety:日本語マルチターン安全性評価ベンチマークを公開

AIによる概要

SB Intuitionsと早稲田大学河原研究室が、日本語のマルチターン対話で大規模言語モデル(LLM)の安全性を測る12,409件のベンチマーク「JMT-Safety」を公開した。AnswerCarefullyを元に8種類の攻撃手法で拡張している。主要23モデルを評価した結果、すべてでマルチターンの有害率がシングルターンより上昇し、最大で約3.9倍に達した。ベンチマークデータと評価スクリプトも公開されている。

出典: SB Intuitions ブログ · sbintuitions.co.jp