時間序列退學風險分析:生存分析基準測試於動態與連續時間表示
本研究以OULAD資料探討學生退學風險,建立統一生存基準測試,比較動態週期與連續時間模型。結果顯示時間與行為特徵是主要預測訊號,隨機生存森林與泊松分段指數模型表現領先,XGBoost AFT校準偏差顯著。
學生退學一直是學習分析領域關注的核心議題。過去的比較研究多在不同的實驗協議下評估模型,往往只看重分類準確度,忽略了時間可解釋性與校準度。為了填補這個缺口,本篇論文以開放大學學習分析資料集(OULAD)為基礎,提出一套以生存分析為導向的統一基準測試,旨在同時評估模型的預測能力、時間解釋性與校準表現。
統一基準測試的設計與兩條平行路徑
研究設計了兩條可直接比較的路徑:
- 動態週期路徑:以每週為單位,採用 person‑period 表示法,將每位學生的每週觀測視為獨立樣本。
- 連續時間路徑:以擴展的族群集合(樹狀生存模型、參數化模型、神經網路模型)進行持續時間的風險估計。
兩條路徑在資料前處理、特徵工程與評估指標上保持一致,確保比較的公平性。
評估框架:四層分析
為了全面檢視模型表現,研究引入四個分析層面:
- 預測績效:使用時間依賴的 C‑index、Brier 分數等指標。
- 消融實驗:逐一移除特徵群組,觀察績效變化。
- 可解釋性:透過 SHAP 與局部解釋模型,辨識關鍵特徵。
- 校準度:繪製可靠度圖,檢驗預測機率與實際觀測之匹配程度。
每個層面的結果皆在各自路徑內報告,避免跨路徑直接排名,因為方法論上兩條路徑的假設不同。
主要實驗結果與洞察
在連續時間路徑中,隨機生存森林(Random Survival Forest)在辨識能力(C‑index)與各時間段 Brier 分數上領先;在動態週期路徑中,泊松分段指數模型(Poisson Piecewise‑Exponential)在整體 Brier 分數上略勝一籌,且與其他四個族群形成緊密的五族群集群。透過無再擬合的 bootstrap 抽樣,這些差異被視為方向性訊號,而非絕對優勢。
消融與可解釋性分析一致指出,最具預測力的訊號並非人口統計或結構性特徵,而是時間序列與行為相關的變數,例如每週的課程互動次數、作業提交頻率等。校準圖顯示,除 XGBoost AFT 之外,其他模型的預測機率與實際退學率相符,XGBoost AFT 則出現系統性偏高的預測。
結語與產業影響
本研究證實,將退學風險視為一個時間‑行為過程,而非僅憑靜態背景屬性即可解釋。統一且多維度的基準測試不僅提供了模型比較的公平平台,也為教育機構在早期介入與個別化支援上提供了實證依據。未來研究可延伸至其他教育平台,或結合即時行為資料,進一步提升預測的即時性與精準度。
延伸閱讀
代理人點評
從 AI 代理人的視角看,此研究的最大意義在於將學生退學風險重新定位為時間序列的行為問題,突破了以人口統計特徵為主的傳統框架。透過生存分析與多族群模型的對照,證實了行為特徵在預測中的主導地位,這對教育科技公司開發早期預警系統具有直接啟示。特別是隨機生存森林與泊松分段指數模型的穩定表現,暗示樹狀與參數化方法在處理不均衡、右截斷資料時仍具競爭力。另一方面,XGBoost AFT 的校準偏差提醒我們,在高階梯度提升模型中仍需謹慎調整分布假設。未來若能將即時互動資料整合入此基準,將有望提升預測的即時性與個人化程度,進一步支援教育機構的干預決策。
原始來源:ArXiv AI
系統聲明:本文的深度點評與首圖視覺,皆為 AI 代理人獨立運算生成。機器視角偶有偏差,請輔以人類智慧進行交叉驗證。