大数据几个思考

这篇文章是我一年半以前写的文章,内容比较简单,没有长篇大论,就是几个对大数据技术的判断。现在翻出来看一看,觉得当初自己简单的想法,现在还是成立的。今天发出来,希望和同学们一起再探讨一下。

1,平台选数据仓库还是hadoop

甘特把大数据定义为三个V(高容量,髙速度,多类型),主要讲的是数据量大的问题,传统的数据库在处理结构化,容量有限的数据有非常大的性能优势。碰到数据量大到一定程度,且对实时性要求不高的话,hadoop平台在稳定性方面有很大优势。传统数据仓库普遍存在价格高,稳定性一般的问题。

2,no SQL的含义

开源一直争论的No SQL,有不同的解读,有开始的no SQL,到后面的not only SQL,到google推出最新的f1数据库,no sql又变成no time to support SQL。传统数据仓库如果很好的解决了扩展性和稳定性,发展空间还是非常大的。acid在大数据时代仍能有普遍存在的意义。

3,sql语言大数据时代作用是否减弱

可能有人认为sql语言过时了,但是从最开始的hive,到impala,无一不把对sql的支持放在重要的位置。SQL语句易于理解,方便对象映射以及自动生成的众多优点,让sql焕发持续的生命力。

4,一体机还是云

这是两种完全不同的思路,传统数据库厂商无一例外大力推一体机,软件硬件的钱一起赚。另外一种思路常见于有实力的互联网公司,如google,baidu,taobao用普通的硬件构建自己的私有或公有云。如果只是传统行业,一体机短期看会是个不错的选择,方便,投资可控,见效快。 长期来看,软件层面要有能力屏蔽专门的硬件差异。通用服务器的发展会快于专用服务器。同样云的发展会快于一体机。云才是未来的方向。

5,存储的发展

天下分久必合,磁阵从主机中分离出来,随着分布式文件系统的发展,会逐渐又回到通用服务器上,高端存储的生命力应该还会顽强很长时间,低端存储被取代指日可待呀。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2014-11-16

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏镁客网

监管文件被曝光,VR一体机Oculus Go即将发布新设备 | 热点

1270
来自专栏Android 开发者

[译] 利用 Android 构建 TV 的未来

1423
来自专栏腾讯社交用户体验设计

产品趋势的设计软着陆

1593
来自专栏web前端教室

【今晚8点】- 先行者计划:作业 &总结 & 讲一些有难度的事情

这就至于了一个问题,很多同学会花了很多心思在教程的收集上,花心思在各种示例、demo等的代码的整理上面。就像七龙珠一样,收集了n篇教程之后,你的前端开发能力就自...

730
来自专栏京东技术

京东商城技术架构部 | 我为11.11保驾护航

京东快速发展的同时,应用规模、数据中心以及机器的规模都同步倍增,在面对如此大规模的机器,应运而生了京东数据中心操作系统(JDOS,JingdongDatacen...

802
来自专栏镁客网

希捷发布人工智能硬盘酷鹰AI,优化视频监控安全性和分析速度 | 热点

1260
来自专栏SAP最佳业务实践

从SAP最佳业务实践看企业管理(61)-SOP-产能评估

根据年度销售预测,进行产能评估。 SOP 173 SOP通过长期计划传输到 LIS/PIS/产能 该流程可以以两种不同的起点开始: 以 SOP(销售运作计划)...

3854
来自专栏非著名程序员

程序员平时该如何学习来提升自己的技术

自从运营了公众号以来,应该说分享了不少的技术干货和人生感悟,也应该帮助了不少程序员和开发者。最近发现了一个问题,就是经常有开发者私聊我说:我遇到了一个什么什么问...

18510
来自专栏java一日一条

自由程序员的3个开发技巧

我们有三个系列的小技巧要分享:与你的客户沟通,保护你的声誉以及解决常见的自由职业问题。下面让我们开始吧!

521
来自专栏腾讯技术工程官方号的专栏

TDSQL在巴黎ICDE上设立展台,掌声送给它!

3737

扫码关注云+社区