17 | 评估方法论——怎么知道 Agent 做得好不好?
Agent 开发不是写完 Prompt 就结束了——怎么评估 Agent 的质量才是生产化的关键。这篇讲解评估维度(任务完成率、工具调用准确率、幻觉率、成本效率)、评估方法(人工 vs 自动 vs LLM-as-Judge)、Ragas 框架的使用,以及如何建立持续评估的闭环。
Agent 开发不是写完 Prompt 就结束了——怎么评估 Agent 的质量才是生产化的关键。这篇讲解评估维度(任务完成率、工具调用准确率、幻觉率、成本效率)、评估方法(人工 vs 自动 vs LLM-as-Judge)、Ragas 框架的使用,以及如何建立持续评估的闭环。