质量成本分为两类:一类是事前防止失败的一致性成本;一类是事后处理失败的非一致性成本,包括内部 Bug 引发的返工成本,以及外部 Bug 导致的用户侧成本
近些年来,越来越多的公司在严格控制测试人员的比例,鼓励开发人员通过各类技术手段从上游保障质量,就是因为越发地认识到:事后检查处理的代价其实是最高的
实际上,质量是规划、设计、建造出来的,不是检查出来的。预防高于检查,预防错误的成本通常比在检查中发现并纠正错误的成本低得多
一次性把事情做对的成本是最低的。而一次性把事情做对就意味着,我们要有意识地提升预防类工作的占比,从根本上降低内部 Bug 率和外部 Bug 率。在这个质量改进的过程中,程序员是绝对的关键力量,而非测试人员
作为项目管理人员,该如何更好地规划质量管理活动呢?
规划质量,是识别项目及产品的质量要求和标准,并确定用哪些保障方法、改进措施来达到这些标准的过程。
在业务生命周期的不同阶段,质量标准应该是动态变化的。比如,业务初创期追求的是最小化 MVP 模型的快速迭代,在这个阶段,质量往往不会是最关键的因素。但是,当规模扩张到一定程度之后,对于质量的要求就非常高了。不同的项目对质量的要求也相差甚远,无法一概而论。因此,只能结合具体项目和具体阶段的质量诉求,对质量的标准进行合理定义
定义好了质量标准,你要思考的是,在整个项目的进程中,需要规划好哪些质量保障活动,以很好地达到这个标准
其中,你需要特别关注研发过程中的质量保障手段,制定适当的编码规范、提交规范和分支规范,同时设计代码准入标准,确保代码 Review、单元测试、接口验证和 UI 验证等手段与你的项目质量要求相匹配
项目经理的视角始终聚焦在项目的整体目标上。在项目经理看来,质量作为目标的一部分,达到要求是最重要的,不需要追求质量的无止境提升。因为,质量终究也是有代价的,是否够用则取决于项目目标和要求
质量分析,是指识别项目运行期间,整体质量上遇到的问题和制约因素,分析根本原因,并制定相应的预防措施和解决方案
可以采取相应的措施进行改进或预防
新功能适当放慢:在基本功能已经成型的情况下,进一步控制新功能开发在迭代中的占比与优先级。当时我们定义的是不超过 70%,在一定时期内,核心功能不再做大的变动。回顾总结:将线上 Bug 分析作为周会的一项固定内容,集体讨论出整体层面上的改进措施,并跟进实施到位。查漏补缺:对已有的测试用例进行全面梳理,与相关的开发、测试、运维一起集体 review,花大力气补充测试代码(增加异常、并发、稳定性测试等)。考虑到这是一项长期工作,要确保将其分解到各个迭代中,分批实施。走到前面:紧密跟进社区 Bug,分析重现并评估影响,定期总结梳理,并组织讨论应对措施,主动引入必要的补丁。以终为始:新功能需求确定后,测试用例同步设计并进行 review,然后开放冒烟测试标准,让开发人员在明确“什么是完成”的前提下,进行开发质量分析最重要的是要追根溯源,找到问题症结。推荐几种简单实用的方法
每月坚持开线上 Bug 分析会。你可以召集产品、研发、测试,一起对过去一个月的线上问题,进行深入的根因分析,制定策略并推进落实。持续进行内部 Bug 分类。从不同维度分析 Bug 原因,你可以按照具体引入阶段给 Bug 分类,比如需求不清、设计缺陷、逻辑错误、测试遗漏、变更引发的覆盖升级、历史遗留等,也可以按照 Bug 类别分为功能问题、性能问题、界面问题、兼容性问题等。从数据统计上,你就可以准确地知道,自己项目的质量问题主要出在哪个环节,下一步是要先规范代码准入标准,还是加强需求评审,以及哪些保障措施会更有效。建立质量大盘,拉通不同业务线或模块的每月 Bug 趋势,对齐千行代码 Bug 率、Bug 数 / 需求数的比率、Reopen Bug 率等,对低于平均线下的业务线或模块进行有针对性的原因分析。如果说质量分析的要点重在追根溯源,那么质量控制,就是将一些明确下来的质量规范和做法,真正落地到各个环节
想要推动质量改进措施的落地,与之相匹配的工具是必不可少的。我们使用 PMO 自主设计开发的企业效能平台 Overmind,来完成持续集成和持续交付,并在需求到发布的整个链条中,层层设置相应的质量卡点。你可以根据实际需要,逐步为自己的应用定制合适的持续集成方案,指定代码准入的阈值,比如静态扫描、单元测试、覆盖率测试、冲突检测、Jar 包版本检测的通过条件等。
需要注意的是,质量控制及卡点行为,是要结合项目的质量要求和团队的质量成熟度,一层一层地加强质量把关和收口。即便是在同个项目的不同应用中,也会因为线上要求的不同,而对质量卡点有不同的侧重。通过质量卡点的在线工具化,才能做到真正有效的质量保障。比如,某些团队在特定阶段,会按照静态代码扫描问题的级别来分级计算缺陷值,提交测试申请时,如果系统检测到缺陷值有升高,就不能够成功提交