大数据几个思考

这篇文章是我一年半以前写的文章,内容比较简单,没有长篇大论,就是几个对大数据技术的判断。现在翻出来看一看,觉得当初自己简单的想法,现在还是成立的。今天发出来,希望和同学们一起再探讨一下。

1,平台选数据仓库还是hadoop

甘特把大数据定义为三个V(高容量,髙速度,多类型),主要讲的是数据量大的问题,传统的数据库在处理结构化,容量有限的数据有非常大的性能优势。碰到数据量大到一定程度,且对实时性要求不高的话,hadoop平台在稳定性方面有很大优势。传统数据仓库普遍存在价格高,稳定性一般的问题。

2,no SQL的含义

开源一直争论的No SQL,有不同的解读,有开始的no SQL,到后面的not only SQL,到google推出最新的f1数据库,no sql又变成no time to support SQL。传统数据仓库如果很好的解决了扩展性和稳定性,发展空间还是非常大的。acid在大数据时代仍能有普遍存在的意义。

3,sql语言大数据时代作用是否减弱

可能有人认为sql语言过时了,但是从最开始的hive,到impala,无一不把对sql的支持放在重要的位置。SQL语句易于理解,方便对象映射以及自动生成的众多优点,让sql焕发持续的生命力。

4,一体机还是云

这是两种完全不同的思路,传统数据库厂商无一例外大力推一体机,软件硬件的钱一起赚。另外一种思路常见于有实力的互联网公司,如google,baidu,taobao用普通的硬件构建自己的私有或公有云。如果只是传统行业,一体机短期看会是个不错的选择,方便,投资可控,见效快。 长期来看,软件层面要有能力屏蔽专门的硬件差异。通用服务器的发展会快于专用服务器。同样云的发展会快于一体机。云才是未来的方向。

5,存储的发展

天下分久必合,磁阵从主机中分离出来,随着分布式文件系统的发展,会逐渐又回到通用服务器上,高端存储的生命力应该还会顽强很长时间,低端存储被取代指日可待呀。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2014-11-16

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏大数据架构师专家

你只是想学好linux而已

这段时间收到了很多学员关于学习上的疑惑,在这些疑惑当中有80%是关于学习方向的疑惑。比如: 1. 我想学好Linux ,是不是应该先学好英语?...

1353
来自专栏张善友的专栏

陈皓谈对待技术的态度

最近在酷壳上,陈皓撰文阐述了对待技术的态度,如何面对技术的快速更新?是否做软件开发比以前更加困难了?他都给出了自己的见解。 陈皓首先针对“如何看待日新月异的新技...

1985
来自专栏Android 开发者

[译] 利用 Android 构建 TV 的未来

1513
来自专栏达观数据

通过苹果APP Store站内搜索故障 来告诉你站内搜索水有多深

苹果站内搜索故障已修复 5月5日下午,发生了一件你不可错过的大事!苹果APP Store站内搜索故障犹如洪水猛兽,来势汹汹,多款应用疑似下架,但一家欢喜一家愁...

35210
来自专栏非著名程序员

程序员平时该如何学习来提升自己的技术

自从运营了公众号以来,应该说分享了不少的技术干货和人生感悟,也应该帮助了不少程序员和开发者。最近发现了一个问题,就是经常有开发者私聊我说:我遇到了一个什么什么问...

19310
来自专栏企鹅号快讯

元旦这一天,很多程序员都做了这10个决定!

今天是2018第一天,我们又开始了新的一年。在大家都为新年制定目标计划的同时,作为一名程序猿,要想在互联网世界混得风生水起都有哪些要做的?下面小编为你列出了20...

17310
来自专栏大数据文摘

数据可视化入门——我该从何开始?

22110
来自专栏数据和云

Oracle和微软联手推云数据库

6月24日(周一),甲骨文和微软召开联合新闻发布会,宣布将在云计算上结成联盟,甲骨文拳头产品数据库,将可以在微软云计算平台运行。这是两大重量级厂商在云计算领域的...

2985
来自专栏web前端教室

【今晚8点】- 先行者计划:作业 &总结 & 讲一些有难度的事情

这就至于了一个问题,很多同学会花了很多心思在教程的收集上,花心思在各种示例、demo等的代码的整理上面。就像七龙珠一样,收集了n篇教程之后,你的前端开发能力就自...

820
来自专栏网络产品使用分享

腾讯云发布Supermind智能网络

信息网络的应用逐渐渗透社会发展的各个领域,网络业务量的迅速膨胀给数据传输能力和大吞吐量的交叉能力提出了更高要求。11月22日,腾讯云正式发布Supermind智...

3416

扫码关注云+社区