大数据几个思考

这篇文章是我一年半以前写的文章,内容比较简单,没有长篇大论,就是几个对大数据技术的判断。现在翻出来看一看,觉得当初自己简单的想法,现在还是成立的。今天发出来,希望和同学们一起再探讨一下。

1,平台选数据仓库还是hadoop

甘特把大数据定义为三个V(高容量,髙速度,多类型),主要讲的是数据量大的问题,传统的数据库在处理结构化,容量有限的数据有非常大的性能优势。碰到数据量大到一定程度,且对实时性要求不高的话,hadoop平台在稳定性方面有很大优势。传统数据仓库普遍存在价格高,稳定性一般的问题。

2,no SQL的含义

开源一直争论的No SQL,有不同的解读,有开始的no SQL,到后面的not only SQL,到google推出最新的f1数据库,no sql又变成no time to support SQL。传统数据仓库如果很好的解决了扩展性和稳定性,发展空间还是非常大的。acid在大数据时代仍能有普遍存在的意义。

3,sql语言大数据时代作用是否减弱

可能有人认为sql语言过时了,但是从最开始的hive,到impala,无一不把对sql的支持放在重要的位置。SQL语句易于理解,方便对象映射以及自动生成的众多优点,让sql焕发持续的生命力。

4,一体机还是云

这是两种完全不同的思路,传统数据库厂商无一例外大力推一体机,软件硬件的钱一起赚。另外一种思路常见于有实力的互联网公司,如google,baidu,taobao用普通的硬件构建自己的私有或公有云。如果只是传统行业,一体机短期看会是个不错的选择,方便,投资可控,见效快。 长期来看,软件层面要有能力屏蔽专门的硬件差异。通用服务器的发展会快于专用服务器。同样云的发展会快于一体机。云才是未来的方向。

5,存储的发展

天下分久必合,磁阵从主机中分离出来,随着分布式文件系统的发展,会逐渐又回到通用服务器上,高端存储的生命力应该还会顽强很长时间,低端存储被取代指日可待呀。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2014-11-16

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏FreeBuf

DARPA如何定义网络作战空间

* 本文原创作者:ArkTeam/HP,本文属FreeBuf原创奖励计划,未经许可禁止转载 在PLANX项目的BAA中描述了概念性的网络作战空间,整个项目以该定...

19110
来自专栏熊二哥

架构设计深入学习01--概论与预架构阶段

完成一个比较复杂的项目后,终于有空看看书了,这次决定将架构设计的方法论进行一次系统的学习,借助温昱大师的《一线架构师》一书。我将把这次学习分成三部分,分别是概论...

1875
来自专栏吉浦迅科技

AMD发布新版ROCm 成为GPU计算方面通用的开源平台

在2016全球超算大会(SC16)上, AMD(纳斯达克股票代码:AMD)宣布推出新版Radeon开放计算平台(ROCm),其中包括对全新Radeon GPU硬...

2546
来自专栏原创

DT时代下[个推3.0]遵循的四个法则

DT(Data Technology),是以服务大众、激发生产力为主的技术。从IT时代走向DT时代,我们要思考如何用互联网技术、理念、思想去与传统行业进行交融和...

3416
来自专栏北京马哥教育

数据分析≠Hadoop+NoSQL,不妨先看完善现有技术的10条捷径

马哥linux运维 | 最专业的linux培训机构 ---- 让业务搭乘大数据技术确实是件非常有吸引力的事情,而Apache Hadoop让这个诱惑来的更加的...

3215
来自专栏云计算D1net

亚马逊AWS服务更改预留实例折扣 三年期高达63%

虽然网络星期一已离我们远去,但这并不意味着亚马逊就这样放弃了那些狂热的交易。 不可否认,一项特别针对亚马逊网络服务(Amazon Web Services,AW...

3347
来自专栏Keegan小钢

小钢的架构思考:架构规划

上一篇简单聊了下什么是架构,还将架构划分为三个阶段:规划阶段、设计阶段和构建阶段,构建阶段其实也是架构实现的阶段。其实,三个阶段的界限并不明显,而占比最多的是设...

856
来自专栏云计算D1net

为你的云迁移战略找到最佳方式

与IT领域中的很多事情一样,将应用迁移到云中没有通用的方法。实际上,企业基于很多因素选择自己的应用迁移路径——从应用寿命到应用是由外部还是内部开发,都会影响将应...

3248
来自专栏云计算D1net

开发者应该知道的 OpenStack 背后的设计准则

OpenStack是一种开源产品,得到了一大批志愿者和领薪代码贡献者的支持,它让人们意识到了一种全面审查的架构和一种深思熟虑的设计具有的重要性,这种架构和设计似...

3296
来自专栏phodal

为什么微前端开始在流行:后端解耦,前端聚合

1082

扫描关注云+社区