还在雾里看花?解读“大数据”产业的“真实面目”

“大数据”一词越来越火爆,煽动全球。本文作者及其团队结合自身近几年走访国内外多家知名大数据企业宝贵经验,深入调研剖析“大数据”产业到底是怎么回事。

从美国的SaaS、亚马逊、谷歌、苹果、思科到中国的华为、腾讯、浪潮及航天某某研究所;从美国北卡三角地、旧金山的硅谷、波士顿的哈佛及MIT到中国的北京中关村、深圳前海、清华大学及北大——等等。我们通过诸多神不知鬼不觉的走访、调查和分析,终于可以撕下“大数据”神秘的面纱,也确实搞明白了:数据处理技术如何才能服务于各个产业领域的技术升级和业态创新;同时也搞清楚了:为什么海内外相当一些所谓的“技术权威”及科研机构,能够靠玩概念、攒项目从政府和投资人那里攫取大把大把的资金,最后却没有实质性成果。

而实实在在的大数据成果,却来自一流的IT企业内部。最近几个月,受邀走访调研了全国二十多家科技产业园区,感触良多。

一、撕开“大数据”的神秘面纱:原来如此!

中国经济运行虽然已经步入严寒季节,但“大数据”一词热得烫嘴,无论是政府官员、产业精英,还是IT领域、高等学府、高技术开发区,如果开口闭口不说“大数据”,似乎都不好意思“混在当下”;如果嘴里偶尔能蹦出一两个诸如Hadoop、Storm、Spark、IOE的时髦名词,就更显出一幅业内高手的神态。

其实,我要说的是:“大数据”并不是什么新鲜玩意儿,自从工业革命开始以来,数据科学就越来越得到人们的重视,只是到了21世纪初,数据应用的积累,深深触动了产业重构和业态创新,“大数据”一词才应运而生。

“大数据”并非数据越多越好、运算量越大越好,其综合含义应当是:针对并服务于某个特定目标的立体数据生态系统,而且这个系统中的前端功能模型、中断数据架构及后端算法及编程,是一个统一体系。确切地说,“大数据”概念的内涵及外延,主要体现在三个层面:

一是基于行业趋势及产业业态创新的需求端“功能模块”的构建,这是一个需要具有大数据思维逻辑的产业经济的命题。比如:如果要优化一个区域的旅游产业结构、投资结构、资源配置结构,可以通过完善产业供给链达到延伸游客消费链的目的,这就需要建立区域性的动态运行的“旅游产业大数据”信息系统,而此举首先要做的是:产业发展物理模块的策划、设计、搭建和论证。这项工作是实施这项大数据项目的“前提”。

二是基于产业发展功能模块基础的“数据模块”的搭建设计,这是一个紧密服务于应用端诉求的有效数据关系分析、确定算法的复杂过程,这也是数据建模及搭建特别功能属性的数据仓库的过程,需要用人力思维与计算机算法的有机结合。目前,这个领域的技术才刚刚开始向产业领域渗透,未来可拓展空间很大。

三是基于数据模块进行的数据挖掘、采集、清洗和应用编程。这个过程实际上是“技术工人”的工作,多数计算机及信息系统专业的人都可以完成,如果在熟练应用传统计算机信息系统应用软件的基础上,熟练掌握Hadoop、Spark、IOE等操作系统,就可以完成此项工作,但更多的工作量还得基于Excel来完成,因此,把Excel玩熟玩透是玩好大数据的基础,或许更有价值。

综合来看,大数据人才的价值主要体现在上述的前两个层面。

二、一流的大数据人才到底隐身何处?

当下的中国乃至全球,能真正看清“大数据”的真正面目,并通过数据革命引领产业创新的优秀人才屈指可数,到是人云亦云、跟风弄潮者确实不少。可以不夸张地说,全球范围类,类似Perntland(MIT)、Norvig(Google)、Geoffrey Hinton(Google)、鄂维南(北大)、Andrew Ng吴恩达(百度)这样的大数据专家,全球也不过二三百人,而赴其后尘者的新锐大数据专家,估计全球不过千人左右。

所谓的大数据专家,不单是计算机及信息系统领域的专家,也不是行业及专业领域里的权威,而是善于把应用诉求端与数据技术服务端,用大数据思维整合到一起的复合专家,通俗来讲,是市场行家、产业及产品专家、有效数据资源识别及配置高手的复合体。

大数据专家既可以是一位在某个行业领域里具有这三项功能的复核人才,比如:MIT的Perntland、谷歌的Norvig、百度的吴恩达等大牛,也可以是具有这三项功能的人形成的“人才组合Team”,比如亚马逊的物流物联研究小组。真正的大数据专业人才之所以太稀少,是因为他们的思维细微深深扎根于市场,他们是从市场上“野蛮”生成的,绝非闭门于高等学府可以修炼出来的。

上述的这些大数据专家到底隐身潜伏在哪里呢?俗话说:大隐隐于市。他们就隐身于一流的科技公司埋头钻研。纵观全球,百分之七八十的优秀大数据专业人才,都就职于全球顶尖的科技公司,在高等学府和基础研究机构的大数据专家的确很少。

三,中国要振兴“大数据产业”得先做好两件事

中国作为全球经济产出体量最大、消费需求规模最大的新型经济体,大数据产业对推动各个产业领域的创新发展,具有不可估量的发展空间。但是,振兴“大数据”产业,既不能盲目受产业领域专家的影响,也应当突破“技术官僚”的小圈子,面向市场、面向一流的科技企业、面向年轻的技术队伍。大致来说,应当在两个方面发力:

一是加速大数据应用的系统工程建设。这是最主要的、也是见效最快的,此举需要具备“乔布斯式的组合混搭思维”加速推进中国的大数据产业发展,即:用大数据思维模式把行业、产业专家与数据专家有机结合起来,直面各个行业领域的产业转型及业态创新。

二是加速基础数据工程建设。这是一项基础研究,是慢功夫,需要在西方现有的技术软件基础上创新研发,短期内要有突破性的成果还比较难,但要舍得投入。这方面应当由数据技术专家领衔和主导,在高等院校和对应的科研机构完成。从长远看,此举是提升国家大数据技术水准的战略举措。

切记:不要将上述两个方面混为一谈。但这与“产学研一体化”不矛盾。

大数据不是万能的,老老实实地基于人类经济及社会进步的理性诉求,推动大数据产业的理性发展才是正途。因此,未来中国大数据产业的发展,应当着眼于中国经济社会发展进步的未来趋势及生产力水平,构建不同行领域的大数据生态循环系统。

原文发布于微信公众号 - 钱塘大数据(qtbigdata)

原文发表时间:2017-08-09

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏安全领域

使用技术拯救自然:物联网版

几个世纪以来,人类把大自然视为可被驯服和征服的东西。而最近有所改变。近几十年来,社会意识已经改变,注意力已经转向保护环境,而不是试图控制环境,让它...

3529
来自专栏大数据文摘

车品觉——忘掉大数据

2478
来自专栏新智元

任正非十问十答:华为虽然在人工智能方面晚了一步,但投资也是极大的

来源:心声社区 【新智元导读】任正非说,华为虽然在人工智能方面晚了一步,但投资也是极大的,主要在重复工作自动化,模糊判别智能化这两个方向上努力。在被问及华为如何...

3097
来自专栏华章科技

苹果与Google的文化之咒

我们常说要居安思危。但是对于许多伟大的公司来说,最大的问题是他们看不到危机的存在。为什么会看不到危机?因为根深蒂固的文化已经让组织所有人都形成了一组基本的假设,...

643
来自专栏AI研习社

闪耀鹏城!中外AI业界最拉风的新品都在这里展示了 | CCF-GAIR 2018

AI 研习社按:2018 全球人工智能与机器人峰会(CCF-GAIR)在深圳召开,峰会由中国计算机学会(CCF)主办,雷锋网、香港中文大学(深圳)承办,得到了深...

843
来自专栏CSDN技术头条

第八届中国大数据技术大会将于12月中旬隆重召开

为了迎接大数据时代的到来,更好地交流大数据的实践经验,进一步推进大数据技术创新与应用,展示国内外大数据领域的最新科研成果,2014年12月12-14日,由中国计...

17510
来自专栏腾讯游戏云的专栏

腾讯游戏云全球化案例剖析

回顾2017年,游戏界真可谓忙碌的一年,众多IP级别游戏出现。《塞尔达传说:荒野之息》、《怪物猎人:世界》、《超级马里奥:奥德赛》、《命运2》、《茶杯头》、《绝...

70114
来自专栏腾讯高校合作

腾讯创始人陈一丹:腾讯要向90后创业者学习

本文转自腾讯开放平台公众帐号open-qq 文 | 陈一丹(腾讯公司主要创办人之一) ? 关注微信“腾讯开放平台”并回复“90”,阅读《2014年那些融资过千万...

36410
来自专栏镁客网

跨越一甲子的AI之路为何愈发坚定?我们与5位顶级大咖进行了深入探讨

1315
来自专栏新智元

BAT 机器人落地,人工智能应如何崛起?

人工智能需要拥有与我们一样的三观。 新智元点评 2015 百度世界大会的报道引发全球关注,今天英国金融时报 FT 的记者也通过【新智元】的相关报道针对中国人工...

3499

扫描关注云+社区