专栏首页搜狗测试软件品质评测系统-开篇

软件品质评测系统-开篇

上个系列给大家分享了基于白盒测试的质量保障体系,相信大家对如何高效保障产品质量都有了一些想法。

不过质量没问题了,只是代表着这个产品能用,随着时代的发展各种产品越来越多,用户的选择也越多,只是能用已经很难吸引用户了,我们需要打造优秀的品质,让用户觉得好用

所以我们也将开启第二个系列,讲讲如何进行评测,尽早发现品质问题并为优化方向提供建议。

1 为什么要做品质评测

前言部分已经讲了品质的重要性,那么评测的意义具体何在呢?

这里可以从问题发现的方式来说,有以下三种:

1. 用户反馈:这个方案的好处是简单直接,但缺点也明显就是时间太晚。据我们统计,出了问题用户反馈的概率大概是万分之一,等到有用户反馈时才发现问题,对产品的口碑影响较大,一些严重问题甚至会关系到生死存亡。当然也不是用户反馈的监控不重要,这是最后一道关卡一定要做好,但只有这个是不够的。

2. 线上监控:这个方案相对用户反馈能敏感许多,在产品发布初期就能发现问题。但还是会有用户感知,一些严重或者不好修复的问题仍然会影响到用户口碑。同样这块也是必不可少,只不过对于一些核心问题我们还需要发现的更早。

3. 线下评测:评测能够在上线前就发现问题,理论上是最佳的选择。不过评测往往需要跑大量数据进行分析,难度很大成本较高,建议重点关注核心部分。

综上,评测的意义就是在上线之前发现产品核心品质的问题。

2 什么是好的品质评测系统

●什么是评测这里就不再讲了,大家可以自己去搜搜资料。这里重点想强调下一个好的评测系统应该具有哪些因素:

1. 准确:这是最核心的,评测出来的趋势要和线上一致,否则就不能发现问题没有意义了。

2. 高效:这里不是一味地强调效率,但往往想要得到一个准确的评测结果都需要跑大量的数据,如果不能在上线前跑完也就没有意义了,这里会对我们的系统有一定的效率要求。

3. 直观:结果必须直观,我们评测可能会跑各种场景,得到很多指标数据,这些数据变化趋势往往不尽相同。如果不能把大量的指标数据合并成几个大的宏观维度的直观结果,对于核心指标的变化趋势也就无从预测了。

3 搭建好的品质评测系统

前面讲了什么是好的品质评测系统,那要怎么搭建呢?参照我们的经验,主要有5个部分:

1. 评测体系

2. 数据挖掘处理平台

3. 评测执行工具

4. 任务分发管理平台

5. 结果分析展示平台

由于这块内容较多,后续由其他同学结合我们工作中的实际案例给大家进行分享。

本文分享自微信公众号 - 搜狗测试(SogouQA),作者:吴芳昱

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2020-06-30

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 智能算法评测系统实践(一)

    随着人工智能的发展,我们现在各个产品线中都融入大量的智能算法,方便了用户的同时也给我们评价产品的具体效果带来了很大的困难。这里就简单介绍一些我们在智能算法评测实...

    用户5521279
  • 智能算法评测系统实践

    评测系统的设计是整个评测系统的灵魂,决定了整个评测系统该怎么做,而且对后续产品算法的走向都起到至关重要的作用。

    用户5521279
  • 软件品质评测系统-评测体系

    相信每个测试同学都会有这样的疑问,有时候评测效果很棒的项目,仍然会接到某些场景下的用户反馈,这个时候就需要我们重新思考应该怎么去整体的评估产品质量的好坏,怎么样...

    用户5521279
  • 软件品质评测系统-评测体系

    相信每个测试同学都会有这样的疑问,有时候评测效果很棒的项目,仍然会接到某些场景下的用户反馈,这个时候就需要我们重新思考应该怎么去整体的评估产品质量的好坏,怎么样...

    用户5521279
  • 智能算法评测系统实践

    评测系统的设计是整个评测系统的灵魂,决定了整个评测系统该怎么做,而且对后续产品算法的走向都起到至关重要的作用。

    用户5521279
  • 智能算法评测系统实践(一)

    随着人工智能的发展,我们现在各个产品线中都融入大量的智能算法,方便了用户的同时也给我们评价产品的具体效果带来了很大的困难。这里就简单介绍一些我们在智能算法评测实...

    用户5521279
  • 软件品质评测系统-评测结果展示

    在前几次的分享中,设计了好的评测体系、具备了数据挖掘分析能力、选择高效稳定的评测执行工具后,我们会拿到第一手的评测数据。在我们之前的实践过程中,拿...

    用户5521279
  • 中国没有莫博士,谁的失落?

    不知道莫博士还在评价罗王吵架的人,可以先歇菜了。莫博士(Walt Mossberg)1970年加入《华尔街日报》,1990年从时政记者转战科技评论及评测,这一转...

    罗超频道
  • 记录一次接口评测的优化

    我们在测试过程中往往使用不同的方式评估产品的质量,这些方法种类繁多,从简单的缺陷计数到严格的统计建模不一而足。当我们的功能涉及到过量或者无法穷尽的数据时,我们需...

    用户5521279
  • 腾讯教育智聆口语评测亮相微信公开课,英语好不好AI告诉你

    ? ? “没想到我的中文语音测评分数竟然还没有英文高,看来我要好好练习一下自己的普通话发音了。” 1月9日,在腾讯2019微信公开课PRO展区,智聆口语评测体...

    腾讯智慧教育

扫码关注云+社区

领取腾讯云代金券