大数据那些事(9):起早贪黑竹篮打水的18摸(IBM)

18摸的名字在国内怎么来的已经无法可考察了。International Business Machine的名字听起来要霸气很多。大数据这趟集,IBM是赶得早,自己把自己给玩掉了,现在一无所获的只能蹭Spark的残羹冷炙。

曾经每次走进IBM Almaden Research Center的那个山顶的时候,我都油然升起一种顶礼膜拜的感觉。IBM Almaden Research Center里面有两个镇山之宝,一块油桶一般大的硬盘,一本System R的手册。前者代表它做出了世界上第一块硬盘。虽然说18摸早早就把硬盘的业务卖给日立了。后者则是第一个关系数据库系统原型。DB2的前身。

作为一个生长在relational algebra的光辉下,日夜受着图领奖获得者的Michael Stonebraker的红宝书(如下)熏陶,一心要做关系数据库接班人的我。一踏上这地方,就像是穆斯林到了麦加一般,顶礼膜拜,说不出的崇敬。

但是我必须说,在整个计算机研究界,industry research lab这个东西,通常都是需要很多关系的。尤其是18摸这样的讲政治,讲正气的地方,如果没有点背景,没有个好导师,找实习是非常的艰难。我找了好几年,年年都被拒。正好赶上了我导师和18摸里面的一个实权人物的老公有合作,于是我就浑水摸鱼的混进了这个让关系代数红小将的我心潮澎湃的地方。时过境迁啊,当初的红小将已经沦落成卖弄文字,纠结于join有几种写法的孔方兄了。

我进去的那个组正在进行着一个非常非常的先进的项目研究。而我的任务有俩,第一是作为被试,要用那个项目的东西来实现我做的那个关于蒙特卡洛数据库的东西,二是作为这个项目的全世界最早的第一个外来使用者,好好的做小白鼠多找bug。

这个项目是什么呢?在2008年的硅谷很多人都知道,是JAQL:JSON Analytical Query Language。有那么一段时间,开Hadoop的会的时候,这个东东是和另外两个东东并列的,分别是HIVE和PIG。这是一个在Hadoop上面,以JSON作为数据模型的query language。组的领导者是Eugene Shiketa。这位一直是我见过的最让我尊敬的最为睿智的人之一。在18摸实习的那几个月里面他说过的话很多年以后我回头看依然很有受益。

这个Team四个人,在做两个项目,另外一个是基于Lucent的JSON 搜索系统。这些人后来有两个去了Google,包括Eugene,一个去了非死不可,一个城了Platfora的构架师,是不是首席我忘了,还有一个则是Linkedin的开源大项目Kafka的创始人之一的那个中国人。这是一个非常强大的团队,团队里面的人让我也很惊艳。

后来发生了什么呢?首先是一场巨大无比艰难的开源还是不开源的斗争。在18摸里面开源是个很麻烦的事情,吃力不讨好。队伍好不容易把JAQL给开源了,这个开源也没持续多久,最后又成了IBM自己内部产品用的语言,不让开源了。在这个大数据开源的年代里,不开源真的能存活么?

其次就是各种各样的政治和站队的问题,很不幸的是我们的领导并不太擅长玩政治,虽然技术上非常有远见,又对IBM极其热爱。最终当手下的人都一个一个离开以后,自己也只能走了。而会玩政治的,则慢慢的就升成了IBM fellow。

中国有句古话,百足之虫死而不僵。IBM这种百年老妖怪,里面的技术积累人才储备应该是从来都不缺的。但是大公司往往特别喜欢自己和自己玩,左割一坨肉,右砍一只手。18摸后来还推了一个项目SystemML,这个项目也不是很成功,写了好几个版本。最新版的好像底层都换到了Spark上来了。我想这到底是IBM的失败还是Spark的胜利呢?

原文发布于微信公众号 - 飞总聊IT(feiitworld)

原文发表时间:2016-11-02

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏养码场

一周播报|加班现状:996已成过去,927已经来临.......

养码人A在社群里提到,某电商X宁,领导要求大促停休,全部无偿加班到十点,有时候甚至到凌晨两点,心好累,无力吐槽了。

981
来自专栏更流畅、简洁的软件开发方式

个人理财小助手 —— 设计思路、功能说明

详细功能(初步) 经过了几天断续的思考,终于有了一个比较完整的思路,先记录下来以免忘记。同时也请大家多多帮忙,看看思路是否可行。 一、收入 1.   工资...

1979
来自专栏知晓程序

朋友圈被它们刷爆了!这些小程序,你还没用上吗?| 晓榜 #28

如果你也有这个困扰,也许可以试试用「微信相框」及其配套小程序,随时上传照片,让父母从相框就能看到你的近况。

1460
来自专栏飞雪无情的博客

高效能程序员的修炼

892
来自专栏阮一峰的网络日志

每周分享第 16 期

影视作品经常出现,病人的心脏停止跳动,医生使用两块电极板对心脏电击。它叫除颤器(defibrillator),通过放电刺激心脏恢复跳动。

1062
来自专栏斑斓

晴窗闲谈 | 今天,你写自动化测试了吗?

一艘货轮满载着货物从港口启航,向浩瀚的大海深处破水而去。海面平静,微微皱起波浪,从容而显得宽容。然而,货轮的步履却有些蹒跚,发动机“轰轰轰”地嘶吼着,不堪重负,...

3265
来自专栏FreeBuf

永不消逝的电波(一):无线电入门篇

0x00 无线电发展简史 · 1837年,摩斯发明了电报,创造了摩斯密码(Morse code),开始了通信的新纪元。 · 1865年,英国的麦克斯韦总结了前人...

2949
来自专栏VRPinea

CES 2018奇葩产品盘点|打开你的脑洞,放飞你的产品设计灵感

40810
来自专栏编程一生

作为初级管理者必会的方法论和分析法

1585
来自专栏腾讯数据中心

没有观众的裸奔

2015年8月12日深夜,原本应该是一个平平常常、稍显闷热的仲夏夜晚。 23点35分,刚刚冲完凉的老韩,对着电脑屏幕打了一个懒洋洋的假呵欠,然后关机,准备上床编...

2044

扫码关注云+社区