浅论Hadoop应用工作思路

随着企业对大数据越来越重视,hadoop应用达到了前所未有的高度。今天聊聊hadoop应用的工作思路,我想了下以下几方面,和大家一起讨论:

首先最重要的是建立一支以开发人员为主的团队。

Hadoop虽然很火,但是还是在初级阶段,开源的东西存在业务不完全匹配,成熟度低等诸多问题。所以不管是什么公司,什么部门,应该建设一支以开发人员为主的团队。立足于能读懂开源代码,能修改bug,可以根据自己的场景进行适度匹配。

团队建立之后,以团队技能成熟度模型为指导,牵引团队技能逐渐成熟,达到事成人爽。关于团队成熟度,以前写过一篇博文《开源软件使用3个level》。

活都是人干出来的,好的团队,事情能干成,差的团队也能把事情干砸,所以各个公司的老板,经理再打算部署hadoop时,先应该把团队建设放首位。

第二,确立工作总体思路。基于自己公司的当前现状,业务的需求,每个阶段都应该确立工作的指导思路。是自立更生为主,还是应用为主。指导思路确定,工作工作才能有条不紊的开展。不同阶段的,思路应该是不一样,不要抱残守缺。IT行业变化很快,工作思路也应该根据客观条件的变化积极转变。

第三,重视知识管理。Hadoop技术发展很快,各种开源软件日新月异,知识爆炸很厉害。所以追踪开源发展,各种技术的学习天天有。整个团队要重视知识管理,知识技能可以得到继承。团队成员的流失和新加入,应该不会明显影响整个团队成熟度。

第四,创建自己的bendchmark。每种业务对应不同的场景,所以hadoop应用团队开展工作的第一件事情,就是建立适合自己业务的bendchmark。最好的不一定好,合适的才是最好。

第五,选型应该坚持one fit a branch。没有一个包打天下的组件和解决方案。各种组件应该组合思路,各取所长。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2014-11-09

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏企鹅号快讯

更深入地了解人工智能到底是什么

人工智能是否已经成为一个营销工具,一个引起关注的流行词,让公司看起来像是前沿公司? ? 具体来说,是什么定义了人工智能?人工智能只是你在电影《终结者》和《机器人...

1666
来自专栏机器人网

“机器人杀人”真相:故意杀人,还是人为失误?

德国大众汽车工厂内的“机器人杀人”事件迅速发酵,短短两天之内已经成为各大网站媒体的热门话题,关于“机器人杀人”,百度上的新闻就有二十多万篇。但真的是机器人把人杀...

3426
来自专栏华章科技

土豪们都在砸钱抢Here,我们不妨来聊聊地图产品及数据

前阵各大汽车厂商(宝马、奥迪和奔驰)、互联网公司(Facebook、百度等)竞购诺基亚Here地图的新闻把地图这事重新又推回到了人们眼球的中心。地图是一种有点特...

462
来自专栏AI科技评论

深度 | 人工智能的盲点在哪?

编者按:当我们都在关注人工智能对生活带来的积极影响时,另一种担忧的声音正在产生:自主智能系统在许多社会机构早已司空见惯,但我们却无法找到真正能评估其持续性影响的...

35410
来自专栏大数据文摘

业界 | 造辆皮卡?2020年特斯拉要实现的12个小目标

691
来自专栏新智元

人类将拥有“超人”视觉,IBM发布未来 5 年 5 大创新趋势

【新智元导读】IBM近日公布了“IBM 未来五年五大创新趋势”年度报告 (“IBM 5 in 5”),其中包括:借助人工智能,语言将成为洞察心理健康的窗口 ;基...

3386
来自专栏CDA数据分析师

斯坦福重磅报告:十张图剖析AI发展趋势,这类人的工资中位数已超10万美元!

? 本文为 Wind整理自斯坦福报告 美国顶尖学府斯坦福大学(Stanford University)AI 100中AI Index项目旨在追踪人工智能的活动...

1835
来自专栏新智元

中国指挥与控制学会刘玉超:智能车产业化必须要考虑3个要素(18PPT)

【新智元导读】中国指挥与控制学会副秘书长刘玉超18日在自动化学会与新智元携手举办的首届 AI WORLD 2016世界人工智能大会 智能驾驶论坛上发表演讲。他的...

39917
来自专栏量子位

儿童自闭症AI诊断平台Cognoa首获FDA监管认证

原作 Natasha Lomas Root 编译自 TechCrunch 量子位 报道 | 公众号 QbitAI 在美国,等一次自闭症的诊断,需要排队1到3年。...

3567
来自专栏Rainbond开源「容器云平台」

好雨云使用OKRs做绩效管理

984

扫描关注云+社区