先标明边界
以下Agent 工程案例来自社区种子数据,没有采集真实用户故事;案例只模拟将人工流程变成可验证脚本中的运行可观测性决策。
为了控制“将人工流程变成可验证脚本”的返工成本,运行可观测性必须同时满足任务边界和“工具权限没有超出任务需要”两项约束。
从哪里开始
第一轮先给失败路径留恢复入口并保存基线,第二轮再保持改动范围可解释;两轮都由数据所有者核对失败注入演练。
验收清单:
- 用权限拒绝日志固定“将人工流程变成可验证脚本”的当前基线。
- 请数据所有者复核失败注入演练与任务边界。
- 若模型总是改到无关文件仍出现,停止扩大运行可观测性的改动范围。
证据和回退
证据门槛:让数据所有者独立重放权限拒绝日志,并用失败注入演练确认“工具权限没有超出任务需要”。
当模型总是改到无关文件出现时,继续扩大自动化可能更快,也可能让数据所有者失去根据失败注入演练定位责任的机会。
对运行可观测性而言,可接受结果是“将人工流程变成可验证脚本”中的越界修改出现后仍能定位、停止并恢复。数据所有者应依据权限拒绝日志签署结论,而不是依据生成速度。
停止条件:当运行可观测性触碰无关模块或数据所有权不清时,固定依赖版本并重放同一输入,并撤销新增工具权限。
反方检查:给失败路径留恢复入口并非所有团队都适用,规模较小时仍要比较它与保持改动范围可解释的实际维护成本。
讨论题
对“将人工流程变成可验证脚本”而言,运行可观测性最值得自动化的环节是什么?哪一环必须保留人工判断?