多模態規劃

速報

OmniAct 框架：統合多模態規劃與異步視覺預佔的永續機器人系統

研究指出，在非結構化環境中建置持續運作的具身代理人，需要同時協調網路 API、物聯網裝置與機械操作，並能自動恢復實體失效。針對現有規劃器缺乏統一的網路‑實體行動空間、上下文膨脹以及開環執行無法偵測失敗等問題，研究團隊提出 OmniAct 框架。