AI 根據文章內容回答
評估 AI 代理不能只看簡單的回答正確率,必須從
運作效率與穩定度等多維度建立評測機制。
建議追蹤以下關鍵指標:
- 任務完成率(Success Rate):代理是否能在無人工介入情況下,順利走完整個工作流程。
- 平均工具呼叫次數(Steps per Task):達成同一目標所耗費的步驟數量,次數越少代表路徑規劃越精準。
- 異常復原能力(Self-Correction Rate):當遇到工具執行失敗或 API 報錯時,代理能否自動修正參數並重新嘗試成功,這是衡量代理是否成熟的重要標準。