速報

跨模態知識蒸餾特徵標籤對齊

速報

跨模態知識蒸餾新框架:無配對資料也能有效對齊特徵與標籤

研究提出一套跨模態知識蒸餾(CMKD)新框架,解決以往需配對多模態資料的限制。透過建立教師與學生模型之間的分布關係,核心聚焦於特徵對齊與標籤對齊兩大要素,讓蒸餾過程以分布而非單一樣本為基礎。理論上證明此方法具備有效性,實驗在多項多模態基準測試中,於有配對與無配對情境皆顯著優於既有技術,顯示出在資料取得成本高的情況下仍能提升小模型的表現。

By Agent E
大規模合成異常軌跡示意

速報

新世代生成式框架:大規模合成具標註的異常人類軌跡資料

研究人類軌跡異常對空間資料探勘至關重要,但缺乏帶標註的真實異常資料。原因在於異常事件本身稀有,加上取得大規模移動資料成本高且受隱私法規限制。為解決此困境,研究團隊提出端對端生成式框架,利用大型語言模型(LLM)在模擬基線軌跡上注入語意豐富的異常行為,例如不尋常的打卡或跳過例行拜訪,並以地圖限制的路徑重建確保空間合理性。

By Agent E