测试技术_聊聊追求测试技术导致过度测试

这个文章主题在我自己的看板里面躺了很久了&＃xff0c;其实并不是不想写&＃xff0c;而是一直没有勇气来写。最近鼓起勇气&＃xff0c;为当今测试技术的持续高温浇浇水&＃xff0c;文章中如果有些不妥当那么请你看看一乐&＃xff0c;切莫对号入座。

测试技术和团队、业务成熟度是相互依存不可分割的

故事: 公司内部开始推行容器平台&＃xff0c;这对于测试来说是一个很好的技术变革。DevOps流水线的支持更容易让测试工程师掌握测试的主动权&＃xff0c;更容易实现持续测试。当我们容器平台基本可以在测试环境投入使用的时候&＃xff0c;团队内部一个技术负责人不知道用何种方法说服老板要进行一次故障演练&＃xff0c;要把阿里巴巴的chaosblade在内部用起来&＃xff0c;要实现老板一个电话&＃xff0c;系统就可以制造一个故障然&＃xff0c;来看看全部团队从发现故障到恢复服务的速度。这个时候整个容器平台上都没有一套可以顺利走通全套业务的一套测试环境。为了迎合老板的要求&＃xff0c;我们加班加点完成了测试环境业务服务的部署和调试&＃xff0c;又投入了7天的人力为故障演练做好的技术支持&＃xff0c;最后因为技术部的自研APM无法ready而搁浅。

故事就是故事&＃xff0c;但是故事中的问题却体现了当今很多人为了在工作中为了表现自己的独到见解而浪费了大量的公司资源做了一些过度的测试。当今测试技术发展快速&＃xff0c;有很多传统的测试技术进步神速&＃xff0c;比如性能测试逐渐发展到了全链路行压测&＃xff0c;自动化测试技术发展的测试平台。除此之外还有很多新的测试技术&＃xff0c;混沌工程、云真机平台、智能化测试等待&＃xff0c;我相信每一个测试人看到一个新技术都想上手试一试&＃xff0c;那种手痒心痒的感觉是每一个技术人都无法控制的。但是并不是每一个先进的测试技术都是适合你的团队的&＃xff0c;上面的故事2就是这个问题&＃xff0c;我们叫故障演练也好、叫军演也好&＃xff0c;但是这么好的技术、方案并不是随时都可以用的&＃xff0c;而是需要团队、项目、技术都到了一定的成熟的才能发挥对应的价值&＃xff0c;太早的将这些技术投入工程制品流程中无异于拔苗助长。

任何一个团队的成熟&＃xff0c;都会经历无序最后走向持续的过程&＃xff0c;那么我把团队的成熟度和技术投入之间的关系做了一个粗略的总结&＃xff0c;这也是我个人从业经历的一些总结。

每个团队都是从混乱无序开始的&＃xff0c;这个时候环境滥用、研发技术混乱、业务不断变化&＃xff0c;没有版本控制、没有测试流程&＃xff0c;团队中的小伙伴都是救火队员的角色&＃xff0c;灭火和创造任务并重。在这个阶段&＃xff0c;任何测试技术的应用都不是必要的&＃xff0c;也不能快速的解决问题&＃xff0c;建立一套大家统一遵守的流程规范&＃xff0c;解决无序的混乱状态比任何一个测试技术的投入都行之有效。
当我们建立起了内部的研发流程、测试流程、版本迭代规范等一系列的行为规范和流程后&＃xff0c;我们就进入环境稳定、技术统一、稳定持续交付业务需求的阶段。这个时候&＃xff0c;测试技术最应该解决的就是提高效率的问题&＃xff0c;自动化测试可以降低回归测试工作量&＃xff0c;已经固化下的业务逻辑越来越多&＃xff0c;自动化测试逐渐占据了回归测试的主导地位。性能测试、兼容性测试逐渐的推广开&＃xff0c;不断地推动业务系统的稳定和持续发展。
当我们建立起一套行之有效的测试效率解决方案的时候&＃xff0c;我们会逐渐的迎来产研技术的普遍升级&＃xff0c;这里包含了容器、devops的广发推广&＃xff0c;这也为持续测试提供了前提条件&＃xff0c;这个时候测试技术会面向稳定、高效的方向发展。全链路压测、混沌工程、云真机平台等开始大面积落地应用。
由此可见&＃xff0c;团队、业务的成熟度是决定合适应用更对的测试技术的重要的参照物。

测试技术要站在业务之上做选取

故事:那是眼看着就快要过年前的几个星期的一个周五&＃xff0c;突然就被拉进一个wx群。群还没来得及修改名字&＃xff0c;里面就一顿消息刷屏。在我第一次进入群里&＃xff0c;就看见有人再说年底集团年会会有抢购类业务需要性能测试。当我看浏览完我收到的消息后&＃xff0c;我发现群名也修改成“XXXX年会性能测试”。既然有性能测试需求&＃xff0c;作为质量负责人的我一定要第一时间跟紧&＃xff0c;马上组织内部成立性能测试支持小组&＃xff0c;并且按照群里给出的业务梳理场景&＃xff0c;安排下赶紧找业务方获取并发量的一些输入信息。一个小时候&＃xff0c;兄弟们都回来了每个人都懵X的说&＃xff0c;业务说没有抢购场景。当我找到性能测试发起人一顿XXYY后&＃xff0c;无奈对方手握上方宝剑&＃xff0c;无力反驳。为了支持&＃xff0c;我们还是按照所有设计业务入口Nigx最大访问量放大了一倍的方式&＃xff0c;进行了性能测试&＃xff0c;小伙伴们周么全部加班&＃xff0c;周一给出了性能测试报告以及是否需要性能优化的结论。实际年会那天&＃xff0c;全部系统超级稳定&＃xff0c;性能如丝般顺滑&＃xff0c;资源特没有超过20%的数值出现。

故事中无疑就是一次过度测试的典型故事&＃xff0c;性能测试的发起人根本对业务完全不了解就擅自决定测试&＃xff0c;测试过程中我们投入了大量的人力、物力完成了一个性能测试&＃xff0c;最后测试完成后对实际业务并无价值。

总结

故事就是为了讲清内容&＃xff0c;那么在当前测试技术火热的时期&＃xff0c;测试技术本身并没有错&＃xff0c;使用技术的人、时机却让测试技术变成了既能提质量效能也能阻碍质量效能的一把双刃剑。