fMRI EEG MEG 跨模態

深度分析

Brain-OF：以 ARNESS、DINT 與 Sparse MoE 實現 fMRI/EEG/MEG 的時頻聯合預訓練

神經影像模態分散且資料有限，阻礙泛化。Brain-OF把fMRI、EEG、MEG透過ARNESS統一到共享語意空間，結合DINT注意力與SparseMoE處理差異，並以MaskedTemporal-FrequencyModeling在時域與頻域聯合重建。於約40個資料集預訓練，改善下游任務效果。