年终质量度量：缺陷、自动化和线上告警

2025年12月记录，分类「测试工具」。这篇按当时的测试现场整理，重点放在目标、动作和可复用的检查点。

度量目的

质量度量不是为了年底汇报好看，而是找出下一年要重点改进的模块和流程。

这类问题如果只写结论，过一段时间就很难复用，所以我把判断依据也留了下来。

指标选择

• 缺陷按模块、严重级别、发现阶段、逃逸原因统计。
• 自动化看有效覆盖和失败定位，不只看用例数量。
• 线上告警和用户反馈要回流到测试策略。

缺陷逃逸率 = 线上缺陷数 / 总缺陷数
自动化有效率 = 有稳定执行记录的用例 / 自动化用例总数

数据口径

• 指标口径前后一致。
• 每个高风险模块有改进动作。
• 度量结果能影响下一轮测试计划。

如果要自动化，我会先挑稳定、关键、失败后能定位的部分，不急着全量脚本化。

行动

质量数据只有转成行动才有价值，否则只是报表。后面遇到类似需求，可以先按这个结构跑一遍手工验证，再决定是否自动化。