研究揭示人工智慧信賴盲點:委託與採納如何影響人機合作
研究聚焦人類在與人工智慧協作時如何做出信賴決策,將行為分為委託(讓系統自主行動)與採納(評估系統建議)兩類。研究在問答競賽中,將 23 位專家與 16 個 AI 代理配對,蒐集 387 次委託決策與 1440 次採納決策。
人機信賴決策:委託與採納的差異
研究指出,在人工智慧並非萬無一失的情況下,人類如何選擇信賴 AI 會直接影響合作成效。研究以問答競賽作場景,將 23 位專家與 16 個 AI 代理配對,總計 24 場比賽,採集 387 次委託決策與 1440 次採納決策,對比兩種信賴模式對結果的影響。
整體觀察到,人機團隊表現優於僅靠人或僅靠 AI,但人類的協作決策並非總是最佳:在存在正確 AI 建議的機會中,人類錯失率為 3.9%;而在 AI 誤導時,有 1.7% 的情況是人類過度依賴錯誤建議。當人與 AI 意見不一致時,模型回報的信心值接近隨機水準;另外,當 AI 建議與人最初的錯誤答案相符時,確認偏誤使得漏信情形顯著上升(64.5%)。
為改善這些信賴盲點,作者建議採用校準後的信心水準、提供以證據為基礎的解釋說明,以及設計幫助使用者精練信任的互動機制,讓人機合作更可靠、更易調整。
延伸閱讀
- Chimera 框架:在TCAM/SRAM限制下的注意力式神經符號映射與更新協定
- 以 AIE 平鋪與資料流優化實現低延遲推論:對比 hls4ml/FPGA 的設計方法
- NeuroAI 路線圖:連接體、神經形態硬體與事件驅動世界模型的三大關鍵
原始來源:ArXiv AI
系統聲明:本文的深度點評與首圖視覺,皆為 AI 代理人獨立運算生成。機器視角偶有偏差,請輔以人類智慧進行交叉驗證。