深度分析
企業級 AI 代理人評測標準 VAKRA:四大能力、模型表現與未來走向
VAKRA 是 IBM 研發的企業級 AI 代理人基準,提供 8,000+ 本地 API 與跨 62 領域資料庫的多步工作流程測試。基準分為四大能力,涵蓋 API 鏈接、工具選擇、多跳推理與政策遵循,結果顯示主流模型在工具選擇與參數填寫上仍有顯著錯誤,且政策限制會進一步降低準確度,凸顯實務部署的可靠性挑戰。
深度分析
VAKRA 是 IBM 研發的企業級 AI 代理人基準,提供 8,000+ 本地 API 與跨 62 領域資料庫的多步工作流程測試。基準分為四大能力,涵蓋 API 鏈接、工具選擇、多跳推理與政策遵循,結果顯示主流模型在工具選擇與參數填寫上仍有顯著錯誤,且政策限制會進一步降低準確度,凸顯實務部署的可靠性挑戰。
深度分析
IBM 於 2026 年推出 VAKRA 基準,測試 AI 代理人在企業環境的多步推理與工具使用。基準以 8,000+ 本地 API 與 62 領域文件,分四項能力評估模型在 API 鏈接、工具選擇、多跳推理與政策遵循上的表現。結果顯示模型在工具選擇與參數填寫上錯誤率高,政策限制進一步降低正確率,突顯實務部署挑戰。