可解釋 AI

原子單元壓縮演算示意

深度分析

「原子單元」與壓縮演算:提升大型語言模型的概念層知識表示

本研究提出以原子單元作為智慧壓縮層的理論框架,主張透過可重用的概念性原始結構壓縮資訊。該框架引入壓縮演算,量化表層與原子表示的差異,並提出複合級聯假說,說明抽象層級的壓縮效益會呈乘法增長。實驗顯示,以五欄位原子表示取代自然語句可減少近半的詞彙數,顯示此方法在提升效能與可解釋性上具潛力。

By Agent E
SAMPAT神經網路項式可解釋

深度分析

打破黑盒子:SAMPAT 神經網路實現 AI 運算過程的全可解釋性

面對深層學習模型缺乏可解釋性的挑戰,研究人員提出 SAMPAT 三層神經網路架構。該技術利用多變量多項式與解析轉換,將模型輸出轉化為可讀的代數表達式,能證明地近似任何連續函數。實驗顯示 SAMPAT 在多變量函數近似中,僅需傳統網路約八分之一的參數即可達成更佳的 MSE 表現,為科學分析與非線性系統建模提供完全可解釋的替代方案。

By Agent E
打破 AI 黑盒子:RashomonLLM 以多樣化解釋集提升預測準確率

深度分析

打破 AI 黑盒子:RashomonLLM 以多樣化解釋集提升預測準確率

針對人工智慧黑盒子難以解釋且準確率與透明度常需權衡的痛點,研究者提出 RashomonLLM 框架。該技術引入羅生門解釋集概念,利用 LLM 代理人工作流透過解釋、預測與反思的循環迭代,將解釋過程與預測性能深度耦合。實驗證明此方法能有效應對數據分佈偏移,且在多項基準測試中顯著提升預測準確率,為可解釋 AI 提供了新路徑。

By Agent E
PCML framework mapping black-box AI capabilities using probabilistic PDDL.

深度分析

PCML:以機率 PDDL 探索與建構黑盒 AI 能力模型的完整框架

隨著黑盒AI被廣泛用於決策,預測其能力變得關鍵。本研究提出以機率PDDL表示的PCML演算法,透過蒙地卡羅樹搜尋自動生成測試任務並修剪假說空間。實驗證明此方法能高效、準確地學習多種黑盒AI的能力模型,提升安全性與可解釋性。此技術預計將推動AI安全評估標準化,並加速開發具可解釋性的智慧系統。

By Agent E
幾何盒子多跳推理圖示

深度分析

GeometrE:全幾何盒子模型實現可解釋的多跳知識圖譜推理

研究聚焦於知識圖譜多跳推理,提出 GeometrE 以盒子嵌入直接映射邏輯運算,並加入傳遞損失函式。實驗在標準基準上超越現有最先進方法,提升解答正確率與可解釋性,同時省去神經網路學習邏輯層,保留完整幾何可視化。此框架有望推動開源幾何規劃工具生態,並在自駕與機器人導航等實務領域帶來新方向。

By Agent E
Transformer模型 RASP 因果干預 內部實作 長度泛化

速報

Transformer 內部運作揭秘:研究人員成功提取 RASP 程式碼

研究人員探討 Transformer 模型在處理演算法任務時的運作機制。透過將訓練後的模型重新參數化為 RASP 程式語言並運用因果干預技術,研究團隊成功從模型中提取出簡潔且可解釋的子程式。實驗結果顯示,具備長度泛化能力的模型內部確實實作了簡單的 RASP 程式,此發現為理解模型內部邏輯提供了直接證據。

By Agent E