高維嵌入

速報

高維嵌入空間的相似度集中與檢索不穩定性研究

研究指出，高維嵌入空間會出現距離與餘弦相似度集中現象，導致相似度對比下降，最近鄰檢索變得不穩定，進而削弱生成模型的grounding能力。實驗以多種合成分布驗證，顯示隨維度提升，hub現象與對比崩潰加劇，提示需採用幾何感知的檢索診斷與韌性策略。