1 分层测试

分层测试:就是不同的时间段,不同的团队或团队使用不同的测试用例对产品不同的关注点进行测试。一个系统/产品我们最先看到的是UI层,也就是外观或者说整体,这些是最上层,最上层依赖下面的服务层,也就是接口或者模块,最底层就是单元,这个单元是函数或者方法。按照这三层选择不同时间段,不同团队不同测试用例进行的测试就是分层测试。

通读上述概念,先对分层测试有个大体的印象,下面结合测试金字塔模型来具体说明:

1.1 单元(Unit )测试

单元测试是针对代码单元(通常是类/方法)的测试,单元测试的价值在于能提供最快的反馈,在开发过程中就可以对逻辑单元进行验证。

1.2 接口(Service/服务/API)测试

接口测试是针对业务接口进行的测试,主要测试内部接口功能实现是否完整。如主要业务流是否能走通,异常处理是否正确,数据为空时校验等等。接口测试的主要价值在于接口定义相对稳定,不像界面或底层代码会经常发生变化,所以接口测试比较容易编写,用例的维护成本也相对较低。在接口层面准备测试的性价比相对较高。

1.3 集成(UI)测试

集成测试从用户的角度验证产品功能的正确性,测的是端到端的流程,并且加入用户场景和数据,验证整个业务流。集成测试的业务价值最高,它验证的是一个完整的流程,但因为需要验证完整流程,在环境部署、准备用例及实施等方面成本较高,实施起来并不容易。

1.4 分层测试总结

Google的自动化分层投入占比是:单元测试(Unit):占比70%;接口测试(Service):占比20%;集成测试(UI):占比10%。

测试过程中需要尽量提早介入测试,针对重点模块功能进行摸底测试,根据金字塔模型 越往上,越接近QA、业务和最终用户,发现问题后解决问题的成本会越高。采用分层测试存在以下优势:

  • 尽量测试前移,在开发前期发现问题解决问题,开发成本会迅速下降。
  • 不同时间段关注不同,分重点测试,层层防护。
  • 容易定位问题,测的哪一层,出现问题,就是哪一层的问题,很明确。
  • 分层测试在用例设计和执行测试的时候,更具有针对性,思维更加清晰,不容易遗漏。
  • 加强测试对代码实现的理解,可以更好的进行测试技能拓展。

最后,在具体实施时,层级如何划分要设计好,设计好对应层级的测试用例,且用例执行时要持续追踪,前面的工作要为后面的工作起到实际作用。

2 UI自动化

UI自动化测试,即通过模拟手动操作用户UI界面的方式,以代码方式实现自动操作和验证的一种自动化测试手段。从测试渠道上可以分为WebUI测试和App测试,WebUI包括PC和H5两个方向。

2.1 UI自动化作用

  • 重复性的功能测试及验证;
  • 避免疲惫操作时的人为测试遗漏;
  • 通过UI自动化操作获取其他测试数据的能力。

2.2 UI自动化优点

  • 用例编写简单,降低上手门槛;
  • 节省人工测试成本,提高功能测试、回归测试的测试效率;
  • 保障软件质量的一种手段和方式。

2.3 UI自动化缺点

  • UI控件的频繁变更导致控件定位;
  • 用例脚本的维护成本较高,投入和产出比例低;
  • 元素定位的不稳定导致用例的效率和稳定性差。

3 常见的UI自动化框架分析

常用的WebUI自动化测试工具主要有强大且免费开源的Selenium家族,也有体验良好收费很贵的QTP工具,还有新兴崛起的Cypress,以及其他工具。

3.1 Cypress和Selenium用户量对比

Cypress和Selenium的下载量对比分析:Selenium相对稳定,Cypress下载量在21年度正式超过了Selenium,并且分差不断拉大。

3.2 Cypress和Selenium实现架构对比

Selenium系统的架构:由代码通过JSON Wire网络协议和driver进行通信,由driver和真实浏览器交互操作,最终返回操作结果到代码。

Cypress系统的架构:使用 webpack 将测试代码中的所有模块 bundle 到一个 js 文件中。测试代码和被测程序在同一个浏览器的不同iframe 中,无需通过网络访问。

3.3 Cypress和Selenium环境框架对比

Cypress和Selenium自动化环境搭建对比:Cypress只需要安装的方式即可使用,Selenium作为库包形式提供,需要自己选择对应的框架,断言以及额外的依赖。

3.4 Cypress和Selenium环境对比汇总

4 如何做好UI自动化

4.1 我不想写UI自动化的N个理由

  • 自动化编写脚本成本高,selenium需要自己搭框架,cypress只能用js写,且都需要对前端有所涉略才能写好。
  • 自动化手动编写脚本案例需要很长时间,编写场景数过少,发现不了多少问题。
  • 录制、编写时候页面有变化时候每个用例都需要修改,需要专人维护,维护成本非常高。
  • 经常出现脚本问题出现的错误,页面加载异常等等,写出来的的用例非常不稳定。

4.2 我不得不写UI自动化的N个理由

  • 需要回归测试的场景太多,手工重复频繁执行太耗时。
  • 需要进行线上环境测试,无线上接口操作权限。
  • UI自动化测试更贴近用户实际使用场景,通过接口测试无法完全保障质量。

4.3 如何做好UI自动化—降低代码维护成本

针对不想写UI自动化又不得不做的时候,我们需要选择一个好的框架来管理我们的自动化用例。不管是selenium还是cypress,我们都需要将我们的自动化脚本代码尽量的复用。如果我们只是想测试流程数据的时候,需要将我们控件和操作进行封装。下面我们将主要用仓储Cypress自动化来举例子。

4.3.1 基础控件进行封装

一般系统的基础封装控件是有一定风格的,譬如下图中我们如何快速寻找到订单号的输入框呢?显然如果直接通过“请输入”字段查找会查到多个,无法定位唯一。针对仓储系统由于页面都是配置出来的,没有固定唯一的id管理。

通过dom树分析得出,普通的输入框可以通过label名称查找到对应的label,然后查找到公共的父节点el-form-item,再根据查找el-form-item的子节点el-form-item__content的子节点el-input来查找到要输入的输入框进行输入内容。

将此操作封装为两个基础自定义命令:

//查找label所在的el-form-item控件组合根节点,正则全词匹配更加精确
Cypress.Commands.add('getElFormItemByLabel', (label) => {
cy.get('.el-form-item__label').contains(new RegExp("^" + label + "$", "g")).first().parent('.el-form-item')
}) // 输入框填写值,根据传入的el-form-item找到el-input-inner对象进行输入,增加去除readonly事件,enter事件,以及强制输入
Cypress.Commands.add("cTypeWidthEvent", { prevSubject: 'element' }, ($elSelect, value, event = 'enter') => {
cy.wrap($elSelect).find('.el-input__inner').then(($el)=>{
$el.removeAttr('readonly')
}).type(value + `{${event}}`,{force:true})
}) //后续使用输入框时候只需要这样使用
cy.getElFormItemByLabel('订单号').cTypeWidthEvent(orderNo)
cy.getElFormItemByLabel('派车单号').cTypeWidthEvent(TJNo)

根据dom树分析可以得到el-button class样式的span标签内容是设置,找到此唯一节点点击即可实现点击事件。

//封装点击自定义命令
Cypress.Commands.add('btnClick', (label) => {
cy.get('button > span').contains(new RegExp("^" + label + "$", "g")).parent('button').click()
}) //如下使用封装所有页面的点击事件
cy.btnClick('设置')

通过如上的方法首先将系统的基础操作元素都封装到customCommands中,作为系统基础控件管理。可以极大程度上降低维护控件变化的成本。

4.3.2 Page-Object模式针对系统页面进行管理

将如下的订单列表页面进行页面封装,譬如我在出库单据中心只会做根据订单号搜索,然后点击订单号跳转进入详情页。

只是需要建一个订单PO管理的页面class,由于仓储是用来跑流程的所以只封装一些用到的控件即可。

//创建PO管理,通过封装的基础命令来封装控件操作,此最好做到只维护控件名称数据
export default class OrderCenterListPage{
constructor() {}
clearReceiveOrderDate(receiveStartOrderDate,receiveEndOrderDate){
//删除接单时间
cy.getElFormItemByLabel('接单时间').children('.el-form-item__content').find('.el-icon-clear').first().click({force:true})
} orderNoFilterInput(orderNo){
cy.getElFormItemByLabel('订单号').cTypeWidthEvent(orderNo)
} openOrderDetail(orderNo){
cy.get('.el-table_1_column_3').contains(orderNo).click()
}
} //同时将此页面的操作封装成一个自定义页面操作命令
// 按订单查询明细
Cypress.Commands.add('OrderCenterListPage.openOrderDetail', (orderNo) => {
var page = new OrderCenterListPage();
page.clearReceiveOrderDate()
var routeName = 'queryOrderListInfo'+ Date.now()
cy.intercept('POST','**/order/web/queryOrderListInfo').as(routeName)
page.orderNoFilterInput(orderNo)
cy.wait(`@${routeName}`).then((res=>{
page.openOrderDetail(orderNo)
}))
})

4.3.3 针对操作流程进行再度封装

上述封装如果针对页面测试的话已经够了,如果是要针对流程测试,类似仓储的出库流程中有如下的步骤,需要再次对每个页面操作进行封装到一个流程当中,进一步提升代码复用。

基于此,我们做了生产流程的封装,见如下图:

4.3.4 测试用例组织

首先新建一个测试套件,然后将每个页面的主要操作封装成流程的一个用例。为什么要这样做呢?将测试用例拆散验证方便失败重试,如果你写的在一个it里面意味着失败重试需要全量触发,反之只需要重试其中一个步骤即可,大大提升成功的效率和缩短重试执行的时间。还可以快速的发现问题所在的位置。

import ExceptionInBoundFlow from '../../support/flow/exceptionInBoundFlow'
import passBackList from '../../fixtures/0_990/passback.json' describe('5.0到6.0切仓出库全流程验证', () => { const flow = new ExceptionInBoundFlow()
const ibOrderNo = 'UAT_'+Date.now()
const oBOrderNo = 'WMSESL140760105630761' //WMSESL140760105632249 before(()=>{
cy.clearCookies()
}) after(()=>{
//cy.clearCookies()
}) beforeEach(() => {
//登陆系统
cy.intercept('**/*',(req) => {
req.headers['origin'] = 'http://sunlon.wms.jdl.cn'
}).as('headers') cy.visit(Cypress.env('baseUrl')) }) it('1.查询生产流程和生产状态', () => {
flow.getOrderProductionInfo(oBOrderNo)
}) it('2.根据定位异常下单', () => {
flow.receiveIbOrder({oBOrderNo:oBOrderNo,ibOrderNo:ibOrderNo})
}) it('3.扫描收货', () => {
flow.scanReceiving({orderId:ibOrderNo,locationNo:Cypress.env('locationNo').pickLocation})
}) it('4.重新定位', () => {
flow.reLocate(oBOrderNo)
}) it('5.是否手工定位', () => {
flow.manualLocation(oBOrderNo)
}) it('6.任务分配', () => {
flow.createOutboundTask(oBOrderNo)
}) it('7.拣货', () => {
flow.pickNew(oBOrderNo,Cypress.env('locationNo').pickLocation)
}) it('8.前合流', () => {
flow.confluenceBeforeCheck()
}) it('9.复核', () => {
flow.check({platformNo:Cypress.env('review').defaultPlatformNo,containerNo:Cypress.env('review').defaultContainerNo, palletNo:null, defaultConsumableCode:Cypress.env('review').defaultConsumableCode})
}) it('10.后合流上架', () => {
flow.upToShipmentLocation(oBOrderNo,Cypress.env('locationNo').fahuoLocation)
}) it('11.客单生成包裹', () => {
flow.createPackage(oBOrderNo)
}) it('12.发货', () => {
flow.quickShip(oBOrderNo)
}) describe('13.校验生产单回传', () => {
for(const index in passBackList){
const node = passBackList[index].node
const whiteList = passBackList[index].whiteList
const desc = passBackList[index].desc
it(`校验生产单回传节点${index},订单号=${oBOrderNo},回传节点=${node},回传名称${desc},校验内容校验字段=${whiteList}`, () => {
cy.log(`校验生产单回传节点,订单号=${oBOrderNo},回传节点=${node},屏蔽校验字段=${whiteList}`).then(()=>{
flow.passBackCompare(oBOrderNo, passBackList[index].node,passBackList[index].whiteList)
})
})
}
})
})

以上为UI自动化(实际上不限于UI)降低代码脚本维护成本的方法。

4.4 如何做好UI自动化—提升脚本效率以及稳定性

4.4.1 去掉等待

我们在编写脚本时候由于一些操作需要等待后台接口的返回才能进行下一步操作,我们可能会增加cy.wait(10000)设置等待时长10秒来处理。这种如果接口没有10秒内返回的话,会导致用例的失败。针对此我们采用了 cy.intercept来设置拦截接口路由,通过wait来等待后台接口返回后再进行下一步操作。

   //设置路由名称
var routeName = 'queryOrderListInfo'+ Date.now()
cy.intercept('POST','**/order/web/queryOrderListInfo').as(routeName)
//操作页面按钮触发请求
page.orderNoFilterInput(orderNo)
//等待页面请求结束后进行下一步操作
cy.wait(`@${routeName}`).then((res=>{
page.openOrderDetail(orderNo)
}))

用 cy.intercept除了可以解决操作问题外,还可以用来进行判断断言接口返回值,并且根据接口返回值进行重试操作,增强稳定性。

cy.intercept('**/queryWaitTaskAssignOrderInfo').as('queryWaitTaskAssignOrderInfo1')
//点击查询
page.search()
cy.wait('@queryWaitTaskAssignOrderInfo1').then((res) => {
// 针对响应进行断言
if(res.response.body.resultValue.total != 1){
console.log('查找待组单的订单不成功,可能是未定位完成,再等待一分钟')
cy.wait(30000)
cy.intercept('**/queryWaitTaskAssignOrderInfo').as('queryWaitTaskAssignOrderInfo2') page.search()
cy.wait('@queryWaitTaskAssignOrderInfo2').then((res) => {
// 针对响应进行断言
if(res.response.body.resultValue.total != 1){
console.log('查找待组单的订单不成功,可能是未定位完成,再等待一分钟')
cy.wait(60000)
cy.intercept('**/queryWaitTaskAssignOrderInfo').as('queryWaitTaskAssignOrderInfo3')
page.search()
cy.wait('@queryWaitTaskAssignOrderInfo3')
}
})
}
})

最后还可以通过 cy.intercept修改请求属性,并且设置接口mock结果来解决外部接口依赖问题。

//设置所有请求添加请求origin
cy.intercept('**/*',(req) => {
req.headers['origin'] = 'http://sunlon.wms.jdl.cn'
}).as('headers') //将widgets接口mock掉
cy.intercept('POST', 'http://example.com/widgets', {
statusCode: 200,
body: 'it worked!'
})

4.4.2 数据传递

Cypress自动化通过上面4.3.4方式设计用例,提升稳定性问题,同时也带来了用例间如何传递数据的问题。在Selenium中同步传递数据使用一个全局变量可以解决,在Cypress中由于每个操作都是异步的,全局变量方法不可行。这里我们可以采用读写文件方式,读写cookie方式,配置文件方式读取静态变量。这里我们介绍一下cookie的方法(需要注意:cookie中是不支持中文的,如果有中文会系统异常报错)。

//配置cookie全局生效:
Cypress.Cookies.defaults({
preserve:/^testData*/
})
//获取生产流程和生产状态写入cookie:
getOrderProductionInfo(oBOrderNo){
var json = JSON.parse(res.resultValue[0].json)
//获取单据类型映射
this.#testData.shipmentOrderType=json.ruleDetail[0].value[0]
//获取生产流程
this.#testData.productionInfo.location.mode=json.outboundProcessDto.locatingRuleVo.operationMode
this.#testData.productionInfo.splitOrder.mode=json.outboundProcessDto.splitOrderRuleVo.operationMode
//单据生产流程和状态存入缓存,注意缓存不能放汉字
cy.setCookie('testData.info.productInfo',JSON.stringify(this.#testData))
})
})
//cookie读取使用:
receiveIbOrder({oBOrderNo,ibOrderNo,wait=30000}){
//获取生产流程和上一步测试数据
cy.getCookie('testData.info.productInfo').then(cookie=>{
//存储sku和是否需要采购收货状态
cy.setCookie('testData.info.productInfo',JSON.stringify(testData))
})
})

通过动态数据获取传递针对同一个订单不但实现了不同生产流程的通用执行操作,还实现了基于状态的重试,始得整个用例未成功的时候可以设置重新执行保证测试通过。

4.4.3 异步Promise获取方式

通过引入异步Promise的方式将代码中原先需要then层层递进的方法进行异步平铺返回结果。(需要注意的是不能在测试用例中将it改成async异步属性)

 export async function doTaskAsign({orderNo,orderType,pickType}){
var batchNo = await promisify(cy['assembleFormCreat.doTaskAssign']())
return batchNo
}

4.4.4 屏蔽系统异常提升稳定性

通过在support中引入如下配置解决系统错误报错,非cypress断言报错引起的失败现象。

Cypress.on('uncaught:exception', (err, runnable) => {
// returning false here prevents Cypress from
// failing the test
return false
})

4.4.5 使用录制来辅助定位复杂的控件

作为初级使用者,可能通过录制能更好更快的学习语法,Cypress也支持录制的方式。

只需要配置: “experimentalStudio”: true

4.4.6 漂亮的工程结构框架

5 学习UI自动化的途径

Selenium本文没做介绍,比较成熟的框架网上也有一堆项目案例,各个公司也有类似开发的录制工具。Cypress可以学习小菠萝测试笔记101篇总结,该位大佬基本上介绍了Cypress所有的API使用实践,测试组这边也有一本实体书可以供参考学习,遇到问题还可以去Cypress社区群求助。

其他就不多说了,欢迎大家一起来学习Cypress自动化,为我们的自动化事业添砖加瓦

作者:京东物流 徐桂贵

来源:京东云开发者社区 自猿其说 Tech 转载请注明来源

浅谈仓储UI自动化之路的更多相关文章

  1. [原创]浅谈Web UI自动化测试

    [原创]浅谈Web UI自动化测试 Web UI自动化测试相信大家都不陌生,今天来谈谈这个,我最早接触自动化测试时大约是在2004年,2006年当时在腾讯财付通算是开始正式接触自动化测试,之所以是正式 ...

  2. 浅谈我的编程之路——感谢引领我的leader

    在开发的道路上,就始终无法避开版本控制,哪怕你是独自一人进行开发,版本控制也是有必要的,从最早开始使用CVS,到后来使用SVN,再到git,最后又回到了SVN,但是不知道为什么真的对SVN很无爱. 现 ...

  3. 浅谈构建前端自动化工作流程一 之 node

    一.Node环境 1.什么是Node? Node.js类似于jquery.js,不是js文件,也不是一个js框架,而是Server side JavaScript runTime,服务端的一个JS运行 ...

  4. 浅谈构建前端自动化工作流程一 之 nvm

    1.NVM简介 我们可能同时在进行2个项目,而2个不同的项目所使用的node版本又是不一样的,或者是要用更新的node版本进行试验和学习.这种情况下,对于维护多个版本的node将会是一件非常麻烦的事情 ...

  5. 一个简单的工具开发:从学生端更新程序部署工具说起,浅谈qt中自定义控件制作和调用、TCP协议下文件的收发 、以及可执行文件的打包

    一个简单的工具开发:从学生端更新程序部署工具说起,浅谈qt中ui的使用和TCP协议下文件的收发.以及可执行文件的打包 写在前面,Qt Designer是一个非常操蛋的页面编辑器,它非常的...怎么说呢 ...

  6. 浅谈Android系统进程间通信(IPC)机制Binder中的Server和Client获得Service Manager接口之路

    文章转载至CSDN社区罗升阳的安卓之旅,原文地址:http://blog.csdn.net/luoshengyang/article/details/6627260 在前面一篇文章浅谈Service ...

  7. 浅谈Android Studio3.0更新之路(遇坑必入)

    >可以参考官网设置-> 1 2 >> Fantasy_Lin_网友评论原文地址是:简书24K纯帅豆写的我也更新一下出处[删除]Fa 转自脚本之家 浅谈Android Studi ...

  8. Python测试开发-浅谈如何自动化生成测试脚本

    Python测试开发-浅谈如何自动化生成测试脚本 原创: fin  测试开发社区  前天 阅读文本大概需要 6.66 分钟. 一 .接口列表展示,并选择 在右边,点击选择要关联的接口,区分是否要登录, ...

  9. 【Android测试】UI自动化代码优化之路(临时发布, 随时删除)

    ◆版权声明:本文出自胖喵~的博客,转载必须注明出处. 转载请注明出处:http://www.cnblogs.com/by-dream/p/5993622.html 关于UI自动化的抱怨 听过不少人这样 ...

  10. Airtest 网易 UI 自动化工具 Airtest 浅用记录

    一 使用目的 该工具主要是面向游戏UI测试基于图像识别,如游戏框架unity,Cocos-js以及网易内部的游戏框架同时也支持原生Android App 的基于元素识别的UI自动化测试.本文主要使用目 ...

随机推荐

  1. Redis从入门到放弃(6):持久化

    1.引言 Redis作为一种高性能的内存数据存储系统,常被用作缓存.会话存储.消息队列等多种应用场景.然而,由于其数据存储在内存中,一旦发生意外或服务器重启,数据就会丢失.为了保障数据的持久性和安全性 ...

  2. 基于Go编写一个可视化Navicat本地密码解析器

    前提 开发小组在测试环境基于docker构建和迁移一个MySQL8.x实例,过程中大意没有记录对应的用户密码,然后发现某开发同事本地Navicat记录了根用户,于是搜索是否能够反解析Navicat中的 ...

  3. SpringBoot项目统一处理返回值和异常

    目录 简介 前期准备 统一封装报文 统一异常处理 自定义异常信息 简介 当使用SpringBoot开发Web项目的API时,为了与前端更好地通信,通常会约定好接口的响应格式.例如,以下是一个JSON格 ...

  4. ATtiny88初体验(六):SPI

    ATtiny88初体验(六):SPI SPI介绍 ATtiny88自带SPI模块,可以实现数据的全双工三线同步传输.它支持主从两种模式,可以配置为LSB或者MSB优先传输,有7种可编程速率,支持从空闲 ...

  5. LSTM推导

    LSTM推导 forward propagation def lstm_cell_forward(xt, a_prev, c_prev, parameters): """ ...

  6. 搭建企业知识库:基于 Wiki.js 的实践指南

    一.简介 在当今知识经济时代,企业知识库的建设变得越来越重要.它不仅有助于企业知识的沉淀和共享,还能提升员工的工作效率,促进企业的创新发展.企业知识库是企业中形成结构化文档,共享知识的集群,可以促进企 ...

  7. ipmitool配置机器的BMC

    一.设置IP地址 1.确定操作对象 #ipmitool mc info 输出中"Device Revision"是命令的操作对象 2.设置BMC IP # ipmitool -I ...

  8. [Maven] maven插件系列之maven-shade-plugin

    [Maven] maven插件系列之maven-shade-plugin 1 插件简述/Plugin Overview 1.1 定义与目的/Definition & Goals Officia ...

  9. Blazor前后端框架Known-V1.2.15

    V1.2.15 更新日期 2023-09-17 更新内容 修复角色不启用相关问题 RadioList组件支持平原(Plain)模式 CheckList组件支持平原(Plain)模式 DataGrid组 ...

  10. Teamcenter RAC 开发之《AbstractRendering》

    背景 关于Teamcenter RAC 客制化渲染表单,做一两个有时间做还是可以的,问题是大批量做的时候就会存在很多重复的代码 例如: 1.定义很多 TCProperty,JTextFiled,ite ...