大数据那些事(32):风暴,山寨风暴和遥遥无期的风暴二代

Stratosphere的投票表明89%的人不知道这个是什么鬼东西。但是我想这些人都知道Flink是什么。很有意思的一个数据。

周末遇到一个和我差不多时候做公众号的大姐闲聊。我做IT码农的,对方做吃喝拉撒的。彼此各做半年,我有8000粉对方7万。我一篇文章大概2000阅读,对方过万。我一篇文章打赏平均几十人民币,个位数的观众,对方轻松两位数观众,几百人民币。总之就是完败。于是对方教育我说女人和小孩的钱好赚,你开这公众号写东西给程序猿看。写得再好也难让人掏腰包啊。我实在不知道该如何接这个话,只得点头承认自己的公众号做得实在不成功,比不上大姐。

大数据里可以写的东西很多,但是我知道的多又能写得好的东西有限。毕竟术业有专攻,我知道的东西就那么多。转眼之间写这个系列小半年了,也差不多应该结束了。我打算把我想要写的几个东西写完就结束这个系列了。至于以后写什么,我先歇歇再说。

Storm大家应该都不陌生。Twitter写的做流计算的开源框架。国内外用Storm的人也很多。算得上是很成功的框架。技术层面的来说,其实MapReduce的framework里面有的东西它都有,无非是执行,调度,管理,数据传输。流计算需要定义topology和相关的计算。这和MapReduce的框架不同。但是我想只要是用过流计算Storm的都知道我在说什么,所以技术层面我就不展开了。因为我本人的研究方向也不是流计算,我想我真的展开了也只能显示自己的无知,没法做到深入浅出。

Twitter是个勇于吃螃蟹的公司,喜欢新技术。Storm是用clojure写的。这个语言是个函数式编程语言,但是跑在JVM上。和Scala这种大杂烩比,又更纯粹一些。函数式编程语言精炼优美,就是写的东西有时候对智商低一点的,长期受过程化编程毒害的码农们,比如我,来说就有点高深莫测,装13的味道。选择Clojure来写这样一个平台是不是好,我想很难一棍子打死。但是起码的,两条腿写Java的码农不缺,两只手写Clojure的码农,尤其是有经验的资深码农,不是玩票的,不好找是事实。

所以阿里巴巴在大量使用Storm以后就给克隆山寨了,用JAVA克隆了。这个克隆的东西叫做JStorm。被阿里巴巴集团加入Apache基金会的时候作为厚礼之一给捐献给了基金会,成为了Storm下面孵化器里面的子项目,取名JStorm。用真名更像花名的JStorm主将封仲淹的话来说,这代表着更高更快更强。封大大也加盟进了Storm的PMC。这算得上是开源界里面当年的一件很牛逼的事情了。

至于为什么会用Java克隆了,这个问题到差不多一年以后阿里巴巴集团在西雅图开技术峰会,封大大作为大牛之一做了一次演讲,演讲结束以后我蹭过去问他。他说Clojure这鬼东西能熟练运用的人不好找啊,Java嘛,中国最不缺的就是会写Java的猴子了。 猴子是我后来加上去的,封大大是个待人非常有礼貌,又很有真知灼见的人,很多时候人有见面不如闻名的感觉。但是封大大给我的感觉的确是闻名不如见面,见了才会觉得这人的确是非常的牛。

Storm的版本发布了一个又一个,一个又一个。2015年JStorm进去作为子项目的时候,就听到传闻社区要出Storm2.0,会基于JStorm。但是大家也都知道,有人的地方就有江湖啊。无论是阿里里面还是Apache基金会里面,又或者是Storm的社区,我想用毛主席的话来说,党内无派千奇百怪。我刻意登录Storm的官网看了看,还是新版本,bug fix之类的。就是没有看到传说中的Storm 2.0.

从传闻到现在一年半的时间应该有了。在IT行业里面18个月是个不短的周期。18个月过去了,JStorm还在孵化器里面孵化着。基于JStorm的Storm2.0也没啥声音。由不得我不去联想阴谋论和雷声大雨点小了。但是无论如何,我觉得JStorm这个项目展现出了中国人在开源的世界里面的拳头和实力。是非常值得骄傲的事情。

原文发布于微信公众号 - 飞总聊IT(feiitworld)

原文发表时间:2017-03-27

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏ThoughtWorks

敏捷团队的办公室设计

ThoughtWorks武汉办公室的装修花了三个月时间,整个办公室的装修设计体现了很多敏捷的特点,环境布置的目标就是为开展敏捷实践提供最大的方便。 ? Thou...

3644
来自专栏IT派

我们从58 万个微信小程序中,精心挑选了这 14 个!!!

新媒体人经常加班,导致很多人睡眠质量很差。所以小睡眠这款助眠神器就非常适合你!已经有千万以上的用户使用。因为我们睡觉的时候,并不是越安静越容易入睡,科学研究表明...

2351
来自专栏知晓程序

「跳一跳」拿到高分,全靠这些骚外挂

凭借新版本的「启动屏幕」宣传攻势,微信新推出的「跳一跳」游戏,从一开始就火遍大江南北。

1022
来自专栏SAP梦心的SAP分享

从《致加西亚的信》看项目管理

很多领导者或者成功学大师很喜欢在不同的场合引用《致加西亚的信》的内容,以此来激励和教育别人怎样做事才是好员工,他们对文中的主人公罗文的做事风格钦佩不已。

3484
来自专栏Java学习网

从 .NET 和 Java 之争谈 IT 行业

一、有些事情难以回头 开篇我先表明自己的立场:同时使用 .Net 和 JAVA,但更加偏爱.Net。原因很简单: .Net语言更具开放性,从开源协议和规范可以...

2428
来自专栏企鹅号快讯

请善待你身边的“人工智能”

请善待你身边的 “人工智能” 提起人工智能,绝大多数人想到的无非就是AlphaGo或者智能机器人。再不济也是QQ小冰或是自动回复。 电脑在线的时候,可以设置自动...

1965
来自专栏大数据文摘

D-News | 中国移动打造华北最大数据中心,OPEC与阿联酋将推出“油气大数据项目”

2354
来自专栏VRPinea

动起来!大朋M-Polaris定位交互套件开发者版下月全球首发

2918
来自专栏飞总聊IT

大数据已死,AI当立,世界崩溃

1 一觉醒来,发现InfoQ的大数据杂谈公众号改名叫AI前线了。相关的微信群也变成了AI前线群。大数据已死,AI当立,大概是这样一个节奏。 我依稀记得编辑拉我进...

50613
来自专栏程序员互动联盟

一个程序员的奋斗历程

也许,你还为你的未来感到迷茫,也许,你还对程序员的历程感到神奇.就让我们来看看这位程序员的奋斗历程好了. 这些日子我一直在写一个实时操作系统内核,已有小成了,...

4138

扫码关注云+社区

领取腾讯云代金券