GUI代理人

速報

AgentLens：以自適應視覺模態優化行動 GUI 代理人

行動GUI代理能直接操作App介面自動化任務，卻缺少執行中與使用者的視覺溝通標準。AgentLens提出三種自適應視覺模態：Full UI、Partial UI與GenUI，並以Virtual Display允許背景執行同時選擇性覆蓋，視覺呈現會依任務調整。研究透過形成性研究與受控實驗驗證適配效果；實驗顯示85.7%受測者偏好AgentLens並獲最高可用性評分。