由 OverOps 发布的《 2020 年软件质量状况调查》显示,70%的工程组织认为,软件质量的重要性胜过交付速度,与此同时,软件交付速度比以往任何时候都更快。超过一半的受访者表示,他们会在两周内多次发布新代码/功能,而每季度或更少频率发布代码的受访者仅占19% 。
越来越快的交付速度,带来的最直接的影响是代码质量下降。更令人尴尬的是,其中超过 40% 的关键生产问题首先由最终用户或客户报告,而不是由内部工具或流程首先发现。
步入高效时代,开发团队要如何在提升速度的同时保证软件质量, 从而保证用户体验?答案就测试自动化。
手动测试 VS 自动化测试
软件的质量依赖于测试。早期,测试都是以人工手动测试为主。在手动测试中,测试用例是在没有任何工具或脚本支持的情况下手动执行的。随着 DevOps、CI 和 CD 的兴起,自动化测试工具不断涌现。在自动化测试中,测试用例在工具、脚本和软件的帮助下执行。
选择手动或自动测试取决于各种因素,包括项目要求、预算、时间表、专业知识和适用性。任何成功项目的目标,都是在降低所需成本和时间的同时,保持质量输出。
以下是手动测试和自动化测试的对比:
目前,手动测试和自动化测试均有广泛使用。在以下四大场景中,自动化测试往往是首选项:
回归测试:在这里,自动化测试是合适的,因为频繁的代码更改需要及时运行回归的能力。
负载测试:在负载测试方面,自动化测试也是高效完成测试的最佳方式。
重复执行:需要重复执行任务的测试最好是自动化的。
性能测试:同样,需要模拟数千个并发用户的测试需要自动化。
围绕这四大场景,很多开源或商业的自动化测试工具或平台应运而生,比如 Eggplant、ACCELQ、Kobiton、Avo Assure、Applitools、Subject7等等。这些工具或平台各有千秋,Eggplant 支持Windows、Mac、Linux、SaaS、Android等多个平台,ACCELQ支持24小时在线服务,Kobiton 价格亲民,并且提供免费版本······在国内,飞算博采众家之长,打造出了具有可视化、低门槛、高效率等特性的飞算SoFlu 全自动测试平台。据了解,该平台能够以自动化的方式实现测试生命周期管理、测试用例自动生成、测试数据管理、精准回归测试等一系列功能。
尤其是在回归测试方面,飞算 SoFlu 能极大地提升效率。由于每次修改源代码时都要重复软件测试,手动修改测试不仅耗时而且成本极高。相比之下,利用飞算 SoFlu 创建自动化测试,能自动识别所有变动的接口,自动查找接口关联的所有测试用例,可以一次又一次地执行,帮助测试团队快速确定由于代码库更新而导致的问题。在自动化回归测试的帮助下,总时间可以从几天减少到几个小时。同时,回归测试自动化也可以给测试团队腾出时间,从而对生产环境中的更多异常情况进行手动探索。
测试自动化的六大优势
虽然并非每个测试环节都可以或应该自动化,不过自动化的方式确实要比手动测试更能保证质量。尤其是当测试自动化覆盖率达到 70%-80% 的时候 ,其优势作用在软件开发过中,软件产品质量能得到显著提升,从而形成企业自身的优势。正如亚里士多德所说的:“品质不是一种行为,而是一种习惯。”
因此,当测试自动化发展出手动测试所不具备的巨大优势时,这就说明,软件测试是时候由手动过渡到自动化了。六大优势如下:
1.更快的反馈循环
应对市场变化的唯一方法是加快发布周期。而测试自动化最大的好处是可以实现更快的反馈循环,缩短发布周期,加快上市时间。
正确部署的自动化测试脚本或工具,将被集成到 CI(持续集成)工作流中,该工作流可以在每次代码提交时触发。当测试团队同时在多个设备上执行多个功能测试,可以快速向开发人员提供反馈;开发人员也可以将修复的代码快速返回给测试团队。这是手动测试无法完成的。
2. 增加测试覆盖率
测试自动化允许扩展套件,并在多个设备和操作系统上并行运行测试。而手动测试只允许一个测试人员在一个平台上进行测试,并且只能进行一次。例如,在 10 台设备上一个接一个,或并行执行 100 个登录场景,利用自动化工具是能迅速完成测试,但如果将其分配给手动测试人员,那么将会耗费大量时间。
很明显,测试自动化增加了测试覆盖率,团队可以进行更多、更快的测试。
此外,还可以同时针对各种设备和操作系统版本启动单个测试套件。对于在不同地区拥有客户,并且必须在不同的设备或操作系统上进行测试的公司来说,这是一个巨大的优势。
3. 减少测试疲劳
测试自动化减少了人为制造错误的可能性——尤其是对于那些必须一遍遍重复的令人麻木的测试。
4. 更快发现错误
测试自动化允许将更多测试转移到构建和开发阶段的早期,使得开发人员有机会在编写代码时发现问题,这可以帮助 DevOps 团队在发布软件更新之前做出更好的决策,以减少时间和成本投入,而不是在软件开发后期才发现问题,那将会付出高昂的代价。此外,测试自动化还有助于消除重复代码,并使代码更简单、更清晰、更易于扩展。
5. 测试更加高效
测试自动化允许在多个平台上并行测试。这对于夜间批量测试或其他类型的时间密集型、大容量测试尤为有益。
6. 给手动测试留出时间
正如我们已经提到的,测试自动化的高效率,可以给手动测试留出更多的时间。处理临时/探索性测试、视觉和 UI 测试以及审查测试结果时,仍然需要手动测试。
要注意的是,虽然自动化测试有很多优点,但也有一些缺点需要考虑。自动化测试减少了测试阶段重复的手动任务,但是在实施阶段,仍然需要手动创建基线测试脚本,这个可能非常耗时。此外,测试过程可能不稳定,如果操作不当会产生大量无用数据。
不过总的来说,测试自动化的优点要远远大于缺点,这也是越来越多的企业孜孜不倦追求测试自动化的原因。
|
|
