AEO · Agent Effect Operations

Agent 效果运营平台

别等用户骂了，才知道 Agent 变差了。

AEO 自动盯住 Agent 的效果漂移：回答变水、误报变多、任务失败率升高、同类错误反复出现。它会追根因，判断是 prompt、数据、模型还是流程出了问题，然后给出修复方案。

Value

AEO 的价值

持续观察成功率、误报、返工和用户纠偏，提前发现质量下滑。

区分 prompt 问题、数据问题、模型问题和流程问题，不把锅乱甩。

把 badcase、纠偏和验收证据沉淀成可复用数据。

给出能执行的修复建议，让运营从发现问题走到改进落地。

接入观测采集任务结果、审计结论、用户纠偏和失败日志。

发现漂移识别同类问题变多、稳定性变差、输出质量下降等信号。

定位根因分析问题落在 prompt、知识、模型、工具还是流程。

生成改进输出修复方案、验证路径和后续追踪指标。

Agent 不是上线就完事，效果要运营。

AEO 盯住质量变化，把坏案例变成改进燃料。

First run

第一次跑起来，就能看到它接管哪一段工作。

需要长期追踪回答质量、任务完成率和用户满意度。

上线后要解释效果波动，知道该改数据、改 prompt 还是换模型。

把审计、失败和返工都纳入运营视角，持续减少重复错误。

一键接入OpenClaw

安装后执行 init，先看真实效果，再决定接入多深。

npm install @self-evolving-harness/aeo