大数据测试学习笔记之01

大数据特征

即通常所讲的大数据4V特征:

  • Variety:数据类型分为结构化数据、半结构化数据(例如电子邮件、办公处理文档)、非结构化数据(文本、音频、视频等等)
  • Velocity:大数据具有时效性,要求在正常业务处理时必须及时的处理大数据才能最大化的挖掘和利用大数据的潜在商业价值
  • Volume:即海量数据,当前对大数据的定义会有些不一样,但有一个基本的共识就是:数据量将急剧增长
  • Value:即数据价值,大数据处理的目的是从海量的低价值密度的数据中挖掘出具有高价值的数据,尤其是商业价值,即如何有效利用好这些数据

一些思考

从大数据的4V特征来看,我们如何保证大数据及大数据处理过程的质量将会面临如下一些挑战,尤其对当下的软件测试工程师:

  1. 面对更为庞大和复杂的场景下,思维转变的挑战
  2. 大数据处理相关技术,成为了目前软件测试工程师的拦门虎
  3. 随着与人工智能、区块链等进一步场景落地结合,所带来的思维和技术的挑战将会是前所未有的
  4. 传统经典的测试方法在应对更为复杂的应用场景时,显得攻势不足,我们需要站在经典的测试方法上去创新、构建新的测试方法

结合工作的思考

结合这些年所从事的行业和岗位,关于大数据测试方面有些简单的思考:

  1. 大数据基础理论和技术是需要长期坚持学习和提升的
  2. 结合所在行业和工作,从解决一点、一件事情做起,逐步的引入一些理念,有利于培养整个团队的意识
  3. 深入分析所在行业的用户数据特征、商业模式和行业发展趋势等有利于构建本行业的大数据的质量模型和测试技术体系

总结

大数据测试在国内的落地依旧有很长的路要走,我们要面临的挑战不能以多来形容,应该说是从无到有的艰难

从2014年开始考虑构建车险行业的数据质量测试模型,碰到了无数的坑,依旧有很多无法落地的事项,所面临的的问题不仅仅是技术问题。同样的团队、流程、机制、企业文化、人等等都会成为助力也会成为阻力

原文发布于微信公众号 - 开源优测(DeepTest)

原文发表时间:2018-03-07

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Android 研究

PMI-ACP 敏捷项目管理2——敏捷12原则

在软件项目或者其他类型的有高变更比率的项目而言,严格的变更管理流程会带来很多问题。相比而言,敏捷项目管理允许变更的发生,比如极限变成(XP)提倡"拥抱变化"。敏...

4473
来自专栏Linyb极客之路

一个思维习惯,让你成为架构师

  程序员的迷茫不仅仅是面对技术繁杂的无力感,更重要的是因为长期埋没于软件 世界的浩大的分工体系中,无法看清从业务到软件架构的价值链条,无法清楚定位自 己在分工...

923
来自专栏EAWorld

加速企业敏捷的DevOps平台

大家好,本次内容我在我司上个月的PWorld大会上分享过,线下会议参与人数有限,这次应邀在微信上向更广泛的人群分享。希望对大家能有帮助,谢谢! ? 今天分享的主...

3858
来自专栏Cloud Native - 产品级敏捷

微服务产品级敏捷设计的初衷

2016.9.29, 深圳, Ken Fang 微服务产品级敏捷,设计的初衷, 绝不是肤浅的快速交付。而是要能使团队可持续改善,打造ㄧ永远幸福的团队文化与永远世...

2207
来自专栏铭毅天下

收藏 | 架构设计的基础认知

只有规模较大的软件系统才面临软件架构相关的问题。 例如: 1)系统规模庞大、内部耦合严重,开发效率低; 2)系统耦合严重,牵一发动全身,后续修改和扩展困难...

1372
来自专栏python读书笔记

python 数据分析基础 - 总结

至此,经过19天的阅读,《python数据分析基础》已经阅读完毕。 个人感觉,这是一本不错的关于数据分析方面的入门书籍。但是,这本书是有阅读门槛的,必须初步了...

3306
来自专栏SDNLAB

DevOps:新的业务浪潮

DevOps是一种基于将敏捷和精益哲学应用于运营工作的新业务,过去,运营和研发工程师在不同的领域工作,DevOps完全改变了这一状况,两者在整个生命服务周期中紧...

3475
来自专栏数据的力量

数据分析中,你认为用户行为分析最重要的点是什么?

1895
来自专栏WeTest质量开放平台团队的专栏

WeTest入驻腾讯云 助游戏开发者造“精品”

2015年7月31日的ChinaJoy,WeTest质量开放平台在腾讯云展台上正式亮相。WeTest平台,旨在将腾讯内部打磨已久的质量工具对外提供服务。除了为...

1362
来自专栏WeTest质量开放平台团队的专栏

用上WeTest适配测试,流失用户减少一半!

为什么需要适配测试? 近期,腾讯游戏工作室对近2000名流失玩家进行了一次问卷调查活动。

1052

扫码关注云+社区

领取腾讯云代金券