代码上线前那一遍回归 到底有没有必要全跑
测试跑得全不全,取决于改动碰到了哪几条链路,而不是取决于习惯。
很多团队的全量回归要跑几个小时,等到结果出来,发布窗口已经过了。于是有人提出只跑相关用例,争论往往停在凭感觉判断,缺少可依据的规则。
先要看改动的影响面。改一个文案不涉及逻辑,改一个公共函数可能牵动几十个调用方。把改动映射到调用链,才能知道哪些用例是必须跑的。
全量回归的价值在于覆盖那些没人想到的关联。历史上有过改缓存策略导致导出功能变慢的例子,这类问题只有跑全量才暴露,凭经验筛不出来。
比较务实的做法是分层:每次提交跑冒烟和单元测试,合并前跑受影响模块的集成测试,发版前跑一次全量。三层各管一段,既快也留了兜底。
测试本身的稳定性也要算进去。一个经常因为环境抖动失败的用例,会让团队逐渐忽略红色结果,这比少跑几条用例更危险。
并行化和缓存能显著缩短时间。把用例切分到多台机器、复用上一次的构建产物、跳过无改动的模块,全量回归从几小时压到几十分钟是可行的。
还有一种情况必须全跑:升级基础依赖、改数据库结构、动权限模型。这类改动的影响面无法穷举,省下来的时间远不如一次事故的代价。
从工程角度看,回归测试不是越全越好,而是要在覆盖和反馈速度之间找平衡。跑得快且稳定的那部分,才是团队真正会看的。
所以要不要全跑,答案取决于这次改了什么。把改动和用例的对应关系维护好,比争论跑不跑全量更有意义。
读者留言 · 3 条
分层跑这个思路我们也在用,冒烟加集成确实省了不少时间。
改权限模型那次没跑全量,后面补了两天,教训深刻。
用例不稳定比少跑更伤士气,红色看多了就没人当回事。
留言为读者个人观点,不代表本站立场。