主指标只留一到两个
主指标必须与假设直接对应，例如差异单占比或一次通过率。指标多了会分散判断，也容易在结论时挑选有利的那一个。如何固定？方向与阈值应在启动前定，运行中不改；确有调整需求时，要在报告里单列并说明影响。
护栏指标防副作用
效率提升常伴随质量或体验下降，护栏指标就是用来发现这类代价：差错率、投诉量、人工接管率、合规退回数。为什么设护栏？它越界时，即使主指标达标也不应判定成功。这一条要在启动前写明，否则结项时容易只谈效率。
对比基线要说清口径
如何验收？把试点期数据与冻结基线并列，注明统计区间、样本量与口径差异。若期间有促销、人员变动或系统升级，应在结论中说明干扰。省略这些说明，结论会被质疑为挑选数据，也难以在复盘时还原判断过程。
结论表述要留边界
结论怎么写？写成在何种条件下、观察到什么变化，而不是效果显著。同时写明未验证的部分与下一步验证计划。过度概括的结论在复制到其他单元时会失效，也会损害后续试点的可信度，让业务对数据汇报产生怀疑。
适用与不适用
适合谁
- 试点运行过半、需要准备结论的团队
- 要向管理层汇报试点结果的项目组
- 准备把结论复制到其他单元的管理者
不适合谁
- 尚无基线数据、无法做前后对比的试点
- 只关心是否上线、不看副作用与护栏的项目
典型场景
某银行验证柜面凭证识别，主指标是单笔录入时长，护栏指标是识别错误导致的退回率与客户等待投诉。八周数据与基线并列后显示时长下降但退回率略升，结论判定为调整后重试，并写明适用凭证类型与不适用情形。
可执行步骤
- 确定一到两个与假设对应的主指标，固定方向与阈值，运行中不改动
- 设定三到四个护栏指标及越界线，明确越界时的暂停、复核动作与责任人
- 把试点期数据与冻结基线并列比较，注明统计区间、样本量与口径差异
- 标注期间发生的促销、人员变动或系统升级等干扰因素及可能影响幅度
- 结论写明适用条件、未验证部分与下一步计划，不把试点数据用作对外承诺
常见坑
- 主指标定五个，结论时挑最好看的报，管理层据此扩大范围，问题被推迟到扩展后放大并归因于执行。
- 不看护栏指标，效率提升换来投诉上升，扩展后被客户倒逼回退，工期与预算反复调整、团队疲于应付。
- 基线口径与试点期不一致，数据不可比，结论被质疑，复盘也无法还原判断依据与计算过程。
- 结论写成效果显著，复制到其他单元后失效，团队对后续数据汇报逐渐产生怀疑，配合度下降。
自检与验收清单
- 主指标是否只有一到两个，且与假设对应、方向固定
- 护栏指标是否设了越界线与暂停动作及复核责任人
- 基线口径与统计区间是否一致、可比，并注明差异
- 样本量与干扰因素是否在结论中注明，便于复核
- 结论是否写明适用条件、未验证部分及下一步计划
常见问题
主指标没达标但护栏很好，算成功吗？
不算成功，但可以作为调整依据。应先分析主指标未达标的原因在方案、样本还是执行，再决定是否延长观察或改方案。把护栏好当成成功，会让试点失去验证作用，后续投入也缺乏依据。
样本量不够怎么办？
延长观察期或增加试点单元，而不是降低判据。样本不足时结论应标注为初步观察，不作为扩展依据。若时间紧，可先扩展到一个可控范围并保持同等观测强度，同时明确下一轮补数据的时间点。
试点结论能不能直接用于对外宣传？
不建议。试点结论有明确的范围与条件，对外表述容易变成效果承诺。若确需对外说明，应只描述方法与适用范围，不引用未经复核的数据，也不承诺他方复制后的结果，具体口径应经业务与法务确认。