移动App兼容性测试工具Spider

美团点评技术沙龙由美团点评技术团队主办,每月一期。每期沙龙邀请美团点评及其它互联网公司的技术专家分享来自一线的实践经验,覆盖各主要技术领域。

目前沙龙会分别在北京、上海和厦门等地举行,要参加下一次最新沙龙活动?赶快关注微信公众号“美团点评技术团队”。

本期沙龙首次在上海举行,包括四场讲座:一直被呼吁开源的测试工具Spider;移动端用户体验数据如何量化;大促活动前团购系统如何评估流量和容量;腾讯P图App的测试。其他几场讲座的图文实录会陆续发表,请继续关注。

美团·大众点评公司旗下的多款App拥有大量的用户,App测试的过程中需要考虑到不同机型、系统、分辨率的兼容性,同样一个功能要在不同的机型测试。

为了加快整个测试流程,提高兼容性测试效率对我们来说就变得尤为重要

概述

这次分享的主要内容包括以下3个部分:

  1. Spider功能介绍;
  2. 介绍相关背景;
  3. Spider功能实现。

Spider的主要功能

  1. 同时查看、修改、共享多台设备API接口数据;
  2. 接口测试数据存储和回放;
  3. 同时操作多台设备。

功能展示

回放测试数据并跳转

多设备兼容性测试

背景介绍

移动App的测试经常要对同样一个页面,不同逻辑的页面展示和功能进行测试。一般会通过MOCK API接口返回不同的数据,去测试页面的多种样式的展示;为了覆盖到所有样式的逻辑组合,需要花较多时间去准备测试数据。

上面的三个页面,其实是同一个页面(购买结果页),根据API回传的数据不同,展示不一样的样式和提示文案。这种情况如果不借助工具的话,手工测试会比较麻烦,需要真实购买测试团购单,然后通过修改数据库状态字段模拟购买结果的三种不同状态,这样测一个页面的展示就要花很长的时间。

使用Spider的固化数据功能,在1分钟之内就可以完成购买结果页多种不同状态的展示测试。

客户端请求流程图

首先,App的请求流程如上图所示,移动App把请求发送给Web层的API Server,API Server再去调用服务端各个应用获取数据,并整合之后返回给App,这个时候App才能展示正常的数据。这时如果需要制造或者修改测试数据的话,我们可能要深入到最后一层去修改,需要了解服务端各个应用的调用逻辑和对应的DB读写,增加了测试App的时间成本。如果测试会有数据库写操作的,数据测试一次之后就变更了,下次还得继续改,非常耗时。

接入Spider之后客户端请求流程图

这个时候在App和API中间加一层“Spider请求处理模块”来操作App的数据。App先发请求到Spider,Spider来判断这个请求是否继续往后面走,如果需要返回固化测试数据,则直接将准备好的测试数据序列化之后发送给App。如果不需要返回固化测试数据,Spider会把请求原封不动的转发给API,并将从API的返回结果返回给App。

点评列表页

给大家看一下点评App的列表页,每一个商户标题右侧的小标签都由API接口的某个字段代表,像这么多的情况记的话真的是很难,而且一个个把数据整合起来也是非常花时间的。像这样一个页面,以前列表页的测试可能要需要两三个小时,每一次发版前需要做回归测试的时候,数据到底哪个代表什么可能不太记得了。这时使用Spider储存的测试接口数据,直接点击一下页面就能跳转并返回特定的测试数据了。

多设备管理

Spider的优势在于可以一次同时查看修改设备数据和操作设备,从而节省QA的测试时间,提高测试效率。

一个用户能同时测试多台移动设备,不论设备系统、版本或分辨率,设备数理论上没有上限。

可以随时连接测试和查看、修改设备的请求数据。

Spider功能实现

下面介绍下Spider实现:Spider主要有两个功能模块,一块控制App跳转到某个页面,还有一块处理App发出的本来应该发送到服务器的那些API请求,由Spider做一下中转。

首先App肯定是需要做一些代码改造,在APP Debug面板打开测试开关之后,所有的App发送到服务器的请求,都会发送到Spider。比如说发送到点评.com域名全部是Spider的域名,由Spider决定是不是继续往后台去发。

然后App需要另起一个线程,轮询调取Spider的心跳接口,并告知Spider测试设备的一些基本信息,以便Spider控制测试设备去做URLScheme的跳转。

具体来说,URLScheme的跳转都是通过这个流程来实现的,首先App发起心跳请求后,把基本的设备信息告诉给Spider,Spider拿到之后,就会在设备池里面添加一个新的设备,这个时候请求就先挂起在Spider上面,不会返回,这样能够节省网络开销。Spider拿到这个请求之后,分析出来有新的测试设备连接,这个时候会通知连接的所有前端“某个设备上线了”,用户可以在设备池里面看到这台设备的状态。

如果要使用某台测试设备测试固化数据的展示或者页面的跳转,首先在前端上面勾选这台测试设备,这时Spider会把这个设备跟前端建立一个映射关系。之后在前端上面做跳转的操作或者MOCK的操作,都能找到对应的设备。

关于持续集成和移动自动化,其实Spider还能做很多的事情,比如说能够通过接口控制设备的数据固化、设备的跳转、获取设备请求详细信息。

平时做移动App自动化测试的时候,比较困扰的一个问题是:同一套自动化测试脚本调试时可以跑通,但因为测试数据总是会变化(可能测试团单下线了,或者某个接口超时了),由于测试数据不稳定,UI自动化测试失败率会比较高。这时可以用Spider的固化测试数据功能,使UI自动化测试更加稳定,就是说,我们消除了数据不稳定的瓶颈,这样自动化会更加稳定。

下图是移动UI自动化结合Spider的测试报告:

利用Spider稳定的数据和跳转,在新版本回归测试时对老的功能进行图形对比测试(测试失败的会在对比不通过的地方自动标红)

原文发布于微信公众号 - 美团点评技术团队(meituantech)

原文发表时间:2016-10-21

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏何俊林

Android 插件化和热修复知识梳理

本文来自IAM四十二授权发布,IAM四十二的简书地址:http://www.jianshu.com/u/c6f7cfa366d9 概述 在Android开发中...

2659
来自专栏互联网杂技

箭头符号:一个最常见却不容忽视的图标

箭头符号可能是人类图形史上最伟大的创造。 足够简单的图形承载着丰富而又抽象的概念。如果追溯起来,箭头符号的现实原型就是弓箭的箭头。所以箭头指向的方向意味着猎物,...

37011
来自专栏张善友的专栏

如何使用Microsoft技术栈

Microsoft技术栈最近有大量的变迁,这使得开发人员和领导者都想知道他们到底应该关注哪些技术。Microsoft自己并不想从官方层面上反对Silverlig...

1826
来自专栏钱曙光的专栏

一周极客热文:依赖 IDE 做开发,会让你成为一名糟糕的程序员么?

上图为:Mac系统文本编辑器Chocolat 事实上,一款优秀的IDE会让你的工作更有效率:优质的框架加快了项目进度,自动编译和IDE重构工具让编码进行得更快,...

18110
来自专栏石瞳禅的互联网实验室

从京东主页里寻找技术的真相

刚刚经过“618购物节”的挑战,京东(此文简称JD)首次向大众公布了618的交易额,那就是1199亿元。什么?才1199亿,阿里系小伙伴肯定在后面偷笑,搞了18...

601
来自专栏macOS 开发学习

iOS图文混编先说一下我遇到这个问题的思路:

CoreText 之后,苹果新增加了UITextkit,更容易实现图文混排,甚至混编!

933
来自专栏Alan's Lab

Cordova 是什么

给两个链接: - webView:shouldStartLoadWithRequest:navigationType: public void addJavas...

543
来自专栏程序员互动联盟

如何提高编写代码的速度?

如何提高代码编写的速度,一直是一个逃避不了的问题。在天朝你得像打字员一样做程序员,不然老板和上司都觉得你是在玩耍。对项目的贡献体现在哪里?码农难道不是以code...

3728
来自专栏美团技术团队

前端工程化开发方案app-proto

什么是前端工程化?根据具体的业务特点,将前端的开发流程、技术、工具、经验等规范化、标准化就是前端工程化。它的目的是让前端开发能够“自成体系”,最大程度地提高前端...

4113
来自专栏WebHub

前端系漫游指南

这份指南纯粹是某人的自嗨产物,因为有不少人会来问他前端该如何入门种种,于是他就自己对于前端的认知整合了这玩意儿,仅代表个人意见,供以参考(´c_`)

732

扫码关注云+社区