对象与风险
为避免误解,先标明这是合成种子内容:推理成本与“在时间有限时确定最小交付”只用于演示越界修改的讨论方式。
独立评审者需要从版本固定的复现实验看到输入、动作与结果的关联,否则“在时间有限时确定最小交付”仍缺少可复现依据。
执行草案
执行时先列出不可改动区域,再让推理成本只处理一个失败样本;同一任务的盲测结果未出现前,不追加工具权限。
验收清单:
- 用版本固定的复现实验固定“在时间有限时确定最小交付”的当前基线。
- 请独立评审者复核同一任务的盲测结果与任务边界。
- 若模型总是改到无关文件仍出现,停止扩大推理成本的改动范围。
验收条件
证据门槛:让独立评审者独立重放版本固定的复现实验,并用同一任务的盲测结果确认“数据关系能够从明细重新计算”。
当模型总是改到无关文件出现时,继续扩大自动化可能更快,也可能让独立评审者失去根据同一任务的盲测结果定位责任的机会。
完成定义需要同时包含正向结果和失败结果:前者用版本固定的复现实验说明,后者用同一任务的盲测结果定位越界修改。缺少任一侧,都不能宣称推理成本已经稳定。
恢复路径:一旦模型总是改到无关文件扩大影响范围,立即回到最小样本重建失败条件,并用同一任务的盲测结果确认基线。
社区选择
请分享一个可重放的检查顺序:推理成本遇到模型总是改到无关文件时,先看输入、权限还是同一任务的盲测结果?