平台发展趋势

Hadoop从2006年项目成立开始,已经风风雨雨走过了10年,从最开始的HDFS和MapReduce两个组件到现在完整的生态链。展望未来,随着技术和业务的发展,下面这些趋势应该是所有设计和实现大数据平台的人需要认真考虑的。

  • Cloud First:云优先。服务端利用云的部署和扩展能力,保证数据访问高并发、高可用、高可靠。
  • —Stream Default:流优先。数据源端更多的是流数据,要求实时分析,进行秒级或分钟级计算。
  • —Pervasive Analytics:普适分析。将分析能力推至数据源端、管道和服务端,低时延反馈结果。
  • —Self Service:自服务。无须太多的人为干预和人力投入,使得数据合理放置,转换为适合分析的数据类型,方便APP开发等。

现在看着风光无限的组件或者平台,会不断地被后来者所替代。

上面是我在《大数据架构详解:从数据获取到深度学习》一书中总结,大数据趋势,现在看越来越成为现实了。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2017-04-26

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Java架构师进阶

怎么从初、中级Java程序员过渡到高级Java程序员?

原文地址:https://www.toutiao.com/i6599524702937416195/

421
来自专栏ytkah

多客服功能终于也向所有微信认证的订阅号开放了

  多客服功能支持多人同时为一个公众号提供客服服务,经过半年多仅对认证服务号开放后,现在终于也向所有微信认证的订阅号开放了,所有微信认证的服务号和订阅号可以在“...

3336
来自专栏云计算D1net

云爆发架构中哪些应用可以良好运行?

云爆发是管理峰值业务的一个方法,但对于特定的应用说,这很难实现。因此,你知道哪些类型的应用可以最好地爆发到公有云中? 混合云的一个卖点就是IT团队可以达到的成本...

2676
来自专栏Java架构

这些分布式知识,BAT的架构师都在用!一,通信二,伸缩性三,稳定性四,可维护性

1742
来自专栏腾讯大讲堂的专栏

解密Midas、Webank、金融云背后的核心数据库TDSQL【海量服务之道2.0】

如果,你在寻找一款数据库,希望: •在任何情况下,数据都不丢失或错乱; •能7*24小时不间断的对外提供服务,即使故障也不会中断; •能支撑业务量10倍以上的弹...

2189
来自专栏java技术学习之道

分布式架构的演进过程

1113
来自专栏美团技术团队

孵化业务快速落地与优化

海外酒店是酒旅事业群第一个孵化的业务,从2016年9月份开始到现在已经半年多的时间。在业务后台搭建、成长、优化过程中,经历了很多的思考与选择。 主要分为下面几个...

3489
来自专栏北京马哥教育

大神分享美团外卖订单中心演进之路

? 作者:何轼 来源: http://tech.meituan.com/mt_waimai_order_evolution.html 前言 美团外卖从20...

3227
来自专栏云计算D1net

阻碍云实例优化的5个常见问题

目前所推出的公有云环境(如AWS,微软Azure和谷歌云平台),已经成为企业在IT基础架构资源上节省资金的一种手段。不幸的是,情况并非如此。云端产品日益增加的复...

3186
来自专栏IT技术精选文摘

日活跃数千万,10亿级APP大数据统计分析平台的架构演进

美图拥有十亿级用户,每天有数千万用户在使用美图的各个产品,从而积累了大量的用户数据。 随着 APP 的不断迭代与用户的快速膨胀,产品、运营、市场等越来越依赖于数...

3576

扫码关注云+社区