跨模態不協調

深度分析

HCIG：層次圖注意力網路實現跨模態不協調偵測，提升諷刺與霸凌辨識

隨著社群平台文字與圖片常出現語意衝突，研究提出HCIG層次式跨模態不協調圖網路，分別在詞彙、片語與全局層面建模不一致，並以層次注意力融合。實驗在MMSD與MultiBully上分別達85.74%準確與69.62%準確，顯示階層式圖式推理優於傳統融合。