Whisper-large-v3

深度分析

TRACE：結合 Whisper‑large‑v3 與情境/關係資訊的雙人語音情緒同步偵測框架

隨著語音AI代理人普及，情緒同步成關鍵。研究推出TRACE框架，結合情緒微調Whisper嵌入、對話情境與關係資訊，以窗口序列方式辨識雙人對話是否同步，於DyadEE資料集上達97.01%準確率。DyadEE包含8500對話段落，涵蓋朋友、同事、親密伴侶等六種關係與十四種情境標籤。