5大数据挑战正在改变数据中心的面貌

引言:新的数据中心架构提出了新的数据挑战——数据捕获是如何驱动边缘到核心的数据中心架构的。

数据显然不是以前的样子了!各种组织都在寻找数据的新用途,这已经成为他们数字化转型的一部分。从喷气式发动机到杂货店,各行各业都有例子可以证明,数据正在成为竞争优势的关键之所在。我们将这些称为新数据,因为它们与我们最熟悉的财务数据或者ERP数据截然不同。那些旧的数据大部分都是交易性的,并且是从内部来源私下捕获的。

新的数据既是交易型的,也是非结构化的,公开可用的和私人收集的,其价值来源于我们对数据进行汇总和分析的能力。大致来说,我们可以将这些新数据分为两类:

1,大数据:用于批量分析的大量聚合数据集。

2,快数据:来源非常广泛的数据集,这些数据用于做出快速性的决策。

大数据和快数据的新模式正在推动数据中心(无论是公共的还是私有的)建立一种全新的架构。

图片来源于网络

在接下来的文章中,我将介绍新数据中心架构提出的前五大数据挑战:

1,数据采集正在推动边缘到核心的数据中心架构

新的数据正在从源头被捕获。这个源头可能来自于海面之下,或者来自于石油和天然气的勘探过程中,或者来自于在轨道运行的卫星,及天气预报的应用,或者来自于你的手机上的照片,视频和推文,或者来源于一组电影。从源头收集的数据量将会比我们今天所熟悉的数据量高出几个数量级。

2,数据规模正在推动数据中心自动化

大型云提供商的数据规模已经迫使他们必须大量地投资于自动化和智能化,用来管理其基础设施。任何人工的管理在这种运行的规模上都是成本高昂的。

3,数据的移动性正在改变全球网络

如果数据无处不在,那么我们就必须移动数据,才能实现对其的汇总和分析。正当我们认为(但愿如此)网络的速度将从40Gbps上升到100 Gbps,从而快于互联网带宽的要求时,数据的移动可能会增加100至1000倍。

4,数据价值的存储正在经历一场革命

在之前的文章“衡量数据的经济价值”(下文有链接)中,我们介绍了一种思考和衡量数据价值的方法。毫无疑问,数据对组织来说变得越来越有价值,数据在较长时间内的实用性正在随着机器学习和基于分析的人工智能(AI)的发展而日益增长。这意味着更多的数据需要被存储更长的时间,并且这些数据必须是可以整体处理的,以使分析变得有效。

5,数据分析是未来计算密集型体系结构的驱动者

通过分析性质和特别化的机器学习,组织不得不保留更多的数据,以便将其聚合到大数据存储库中。当其应用于多个更大的数据源时,这些分析类型提供了更好的答案。

分析和机器学习是计算密集型操作。因此,它们对大数据集的分析,驱动了大量的高速进程。与此同时,分析的计算密集性推动着我们使用更多新的方式来存储和访问数据,从小型的内存数据库到100 PB级别的对象存储器。

《衡量数据的经济价值》:https://www.networkworld.com/article/3221387/data-center/measuring-the-economic-value-of-data.html

原文链接:https://www.networkworld.com/article/3241245/big-data-business-intelligence/5-top-data-challenges-that-are-changing-the-face-of-data-centers.html

原文作者:Joan Wrabetz

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏大数据文摘

网络营销大数据实操七步走

2826
来自专栏SDNLAB

企业网络战略之边缘计算:细数它的5大优势

对于希望超越传统基于云的计算架构的限制的公司而言,边缘计算已迅速成为热门。虽然企业级数据中心依旧在现代网络中发挥重要作用,但物联网设备提供的能够在更接近源的地方...

872
来自专栏云计算D1net

混合还是不混合?是正确的云问题吗?

只要有混合云,那么关于混合云的功效的争论可能会持续下去。纯云计算的倡导者表示,混合云只是供应商寻求保留其传统平台的一种营销手段,而混合云支持者则表示他们只是满足...

2563
来自专栏python+iOS学习交流

BAT架构师教你如何三个月从开发瓶颈期进阶iOS高级架构师?

最近好多人私信问我,该怎样才能成为架构师,还有一个就对当前的状态感到迷茫。我在此做一个简单的说明,或者对迷茫中的你来说有些许帮助。

1382
来自专栏CSDN技术头条

Scrum是用来发现问题的

机械的Scrum对比真正的Scrum,差别在哪里? 最近,我和一个朋友聊到了他们公司实施Scrum的情况。他们有些迷茫!在实施Scrum之前,他们经常为了访问一...

1868
来自专栏新智元

邓力:如何把深度强化学习用于BOT开发

【新智元导读】深度强化学习(RL)高效利用了日益增加的数据和计算资源,提高我们为世界环境和所有与我们生活相关的应用领域建立计算模型的能力,这为新一代的人机交互方...

3656
来自专栏腾讯研究院的专栏

腾讯云平台部总经理陈磊:大数据背后的技术支撑

image.png 大数据似乎在一夜之间迅速走红,它势不可挡地冲击着金融、零售等各个行业。云计算将如何改变计算的世界?未来将有怎样的应用前景?如何解决“...

2457
来自专栏BestSDK

产品狗,为何总是手撕程序猿?

产品原型制作完成了,下一步的工作就是将原型及相关文档交付给开发团队进入到产品开发环节,这时作为产品经理,可以稍微松一口气了。但是!并不是这以后的事情和自己没关系...

2585
来自专栏DevOps时代的专栏

浅谈海量平台的质量管理

3163
来自专栏SDNLAB

云计算十问

Q1:云服务提供商在未来几年中面临的问题是什么? Gartner预测,到2017年公有云服务市场的总体预计将增长18%,将从2017年的2468亿美元增长到20...

4117

扫码关注云+社区