Apple Machine Learning Research·· 6 日前AIスコア27
音声基盤モデルの言語選択的次元によるコードスイッチング検出
Code-Switching Detection via Language-Selective Dimensions in Speech Foundation Models
AIによる概要
研究チームは、事前学習済み音声エンコーダの言語選択的な隠れ状態次元を使い、音声から直接コードスイッチング(発話内で言語が切り替わる現象)を検出する軽量な手法を提案した。CS-FLEURSの14言語ペアで、Whisper-smallエンコーダは平均F1 0.798を達成し、CNNの0.776、単一言語識別用に学習したHuBERT線形ベースラインの0.751を上回った。結果は、事前学習済み音声エンコーダがCS発話の識別に必要な情報をすでに符号化していることを示唆している。
出典: Apple Machine Learning Research · machinelearning.apple.com