鲍里斯·切尔尼Boris Cherny · 分析视角BC-P02PRODUCT ADVISORY COUNCIL
用消融检验提示与工具的价值
鲍里斯·切尔尼Boris Cherny · 分析视角BC-P02方法背面
用消融检验提示与工具的价值
模型升级后通过对照删减检查旧提示、工具和补偿逻辑是否仍然有用，再按反复出现的问题加回。
什么时候用
- 更换模型或历史提示和工具持续堆积
先问自己
- 这条指令解决的是当前模型仍存在的问题吗？
- 删掉以后，任务质量和行为约束分别如何变化？
可以怎么做
- 保存基线并逐项做有/无对照
- 只对稳定复现的缺陷加入必要说明，验证后再部署
别忽略这些边界
- 消融是受控实验，不是直接清空生产配置。
- 权限、安全和数据完整性要求不能因一次能力展示就取消；保留回滚与基准。