专栏首页WeTest质量开放平台团队的专栏一分钟读懂兼容测试报告(一):概况篇

一分钟读懂兼容测试报告(一):概况篇

WeTest 导读

在WeTest深度兼容测试上线之后,为大量手游及应用挖掘了兼容问题,为测试开发同学提供了极大的便利。为了能够让测试开发同学能够迅速的了解测试后的结果,您是否真的读懂了WeTest的兼容报告?是否了解具体问题的准确定位?

WeTest兼容测试报告总共分五大块:测试概况、问题列表、设备详情、性能报告和重测。

测试概况

提交测试后,一般等待1-4小时后,可在“我的报告”中查看测试报告,最先看到的是测试概况。

通过测试概况可以看到:

1. 测试通过率:通过的机型数/测试的机型总数;描述的是应用在数百部机型上,通过机型数占比,是衡量应用质量最直接的指标。

2. 覆盖用户数:测试的每款机型对应的使用人数之和。WeTest根据各款机型的销量情况及第三方统计数据,得出每款机型对应的使用人群数量。

3. 问题概述:本次测试总共发现问题次数,问题概述会重点显示用户最需要关注的问题,一般是严重级别和致命级别的问题。

4. 问题分布情况:问题级别分为四类,根据问题对用户使用影响分为四类,影响从高到低分为四级,分别是致命严重一般提示(提示级别的问题,不会影响测试通过率)。

5. 问题机型聚类:问题机型聚类这部分旨在帮助用户高效定位问题发生的规律和原因。报告将某一特定问题如UI异常、App Crash,按品牌系统分辨率三个维度进行聚类分析,帮助用户就某一特定问题进行机型锁定。

Tips:底部可以添加附件和备注信息,主要用于用户上传/填写反馈意见,包括使用困难、产品功能预期等,以便于报告流转过程中,进行信息沟通,以不断优化WeTest产品。

问题列表

问题列表一栏提供了本次测试中所有出现的问题,用户可以根据需求,对问题进行级别和类别的筛选。

右侧查看一栏可以跳转到相应设备的测试详情页面,包含本次测试设备的问题原因、问题现场、截图、日志信息和性能数据。

问题原因:直观看到设备出现的问题概述。

定位问题:可按时间轴点击直接跳转到问题所在,结合下方操作过程截图和实时日志信息,帮助用户更好定位问题。

设备详情页

设备详情页可查看每台设备的测试情况,可通过不同维度的筛选功能,定位具体设备的测试结果。

点击“调试”可以跳转到云真机,进行远程真机调试。

查看设备详情页

从列表中点击设备详情页面,可以查看详细测试情况,主要包括测试结果、测试数据、数据和截图三大块

测试结果可以查看测试出现的问题。

测试数据包括安装时间、拉起时间、cpu占用、平均内存占用、流量消耗、平均FPS、测试耗时情况。

数据和截图

可以查看每次操作的截图情况,浏览全部测试操作,方便用户更好定位问题。

性能数据包括测试中实时CPU数据、内存、流量、FPS数据情况。

日志信息

可以查看本次设备测试的日志情况,更精准定位问题出现原因。

性能报告

性能报告由两部分内容组成,一是每款机型的性能数据,二是本次测试覆盖机型性能的区间分布及性能最差5款机型的情况。

性能测试数据包括:安装耗时、启动耗时、CPU占用、内存占用、流量消耗和FPS数据。

性能总览包括:安装耗时分布、启动耗时分布、平均内存分布占用、内存峰值占用、流量消耗分布情况。

“深度兼容测试”现已对外,腾讯专家为您定制自动化测试脚本,覆盖应用核心场景,对上百款主流机型进行适配兼容测试,提供详细测试报告。

本文分享自微信公众号 - 腾讯WeTest(TencentWeTest)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2018-11-30

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 测试开发者盛宴!WeTest邀您一同参加2019 MTSC移动测试开发大会

    ? 导读   MTSC2019 中国移动互联网测试开发大会(Mobile Testing Summit China)由国内最大的测试开发技术社区之一 Tes...

    WeTest质量开放平台团队
  • 2019年中国测试行业问卷调查报告-TesterHome社区

    ? 前言   TesterHome 社区在2019年12月发起了第二次中国测试行业问卷调查,截止目前已经收集到 2142 份问卷结果,感谢每一位参与者的大力支...

    WeTest质量开放平台团队
  • MTSC2019大会日程重磅发布,腾讯WeTest独家Topic大揭秘!

    ? WeTest 导读 中国移动互联网测试开发大会 Mobile Testing Summit China(简称 MTSC)是由国内最大的移动测试技术社区 T...

    WeTest质量开放平台团队
  • 通过一张图来了解一下敏捷测试和DevOps测试

    现在DevOps已经成了一个非常热门话题,但是又有谁真正理解了DevOps,可能少之又少。上周聆听了茹炳晟老师的在线课程,通过一张图我才发现真正理解了DevOp...

    小老鼠
  • 软件测试菜鸟入门

    随着技术的发展,各种应用程序、各种App应运而生!在早期,这些应用程序只是通过开发人员、产品以及部分用户使用之后,给出相应的修改意见,感觉都OK后...

    软件测试君
  • 聊聊基准测试的可行性方案

    上篇文章介绍了基准测试的一些思路和方法策略,这篇聊聊基准测试的MVP(最小可行性方案)。

    写博客的老张
  • React Native自动化测试

    大凡做软件开发,肯定会涉及到很多的测试,本地测试,Junit测试,用例测试等,今天就来说说RN的测试。 React Native的官方代码仓库里有一些测试代码,...

    xiangzhihong
  • DevOps之自动化测试

    ? 大家好,我是冀博,目前负责新一代数字化企业云平台 “The Platform” 的测试工作,很荣幸有这次机会和大家分享交流,今天向各位分享的主题是《Dev...

    yuanyi928
  • 性能测试执行:测试,调优,回归形成闭环

    其他关键设置项:并发用户数、pacing、log(一般设置为关闭)、ThinkTime(一般设置为关闭)、Multithreading(分process和thr...

    互扯程序
  • TW洞见〡今日最佳答案:为什么互联网公司不开除测试?

    点击上方“思特沃克”可以订阅哦! 本篇洞见内容来自知乎。 欢迎点击最底部【阅读原文】跳转至ThoughtWorks官方微博就此问题发表你的看法。 文章末尾另有关...

    ThoughtWorks

扫码关注云+社区

领取腾讯云代金券