首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

北京大学燕云DaaS技术负责人张颖:ABC时代,大数据的

“数据是新的石油。”

几年前,不少专家和经济类杂志报刊便下了如此定论。近些年国内外大小企业对于数据的掘金,也的确印证了这句话。

而当大家都在钻探大数据油田时,有人已打通数据油田的流动“管道”。

今年年初,在2018年度国家科学技术奖励大会上,北京大学的“云—端融合系统的资源反射机制和高效互操作项目”荣获了“国家技术发明一等奖”,成功破解了多年来各系统间数据孤立存在的难题,将中国的大数据进程向前推进了一大步。

睿合泰产城发展研究院名誉院长、北京大学副教授张颖是打破信息孤岛的关键人物之一。在他的推动下,该技术已成功转化为“燕云DaaS”系列产品,并运用在了多个部委及省市自治区,产生了显著的社会效益。

53家单位315个系统2290个功能项

燕云DaaS1个月就让数据实现互相“串门”

以数据的深度挖掘和融合为主,实现“人、机、物”融合是信息化智能化阶段的重要特征。

对于大数据产业链条上的所有“玩家”来说,数据的开放、流通、共享意味着可获得的资源和机会更多,对整个经济也将产生“刺激”作用。

与此同时,一个现实的问题也像一双有力的手,死死地钳住了数据应用的咽喉——

我国信息技术发展了30多年,各个城市、单位、部门都积累了种类繁多且大量的IT系统和宝贵的数据资源。

由于历史、技术、原开发团队流失、协调不畅等原因,这些信息系统成为一个个的信息孤岛,就好比一座拥有丰富自然资源的小岛,四面都是海水,既没有往来船只,也没有可以运送的管道,导致信息孤岛中的信息资源不能很好的融合、共享和交互。

在张颖看来,大数据真正的价值并不在于这些数据孤岛信息量的堆砌,“大数据不是强调量大,是指数据来源多、维度多。只有打破信息壁垒,让数据之间产生交互和沟通,这才是大数据最重要的价值。

燕云DaaS图示

燕云DaaS的诞生,成为了技术上主动打破信息壁垒的一把利器,它能在无原开发商配合、无源代码、无数据库开放等条件下,将原系统所提供的业务功能和数据开放为接口,为系统之间的互联互操作、多源数据汇聚提供强有力的支撑。

感觉真是一个

不得了的操作!!!

大数据热潮带来的数据共享开放需求为这一技术带来了广阔的市场前景,特别是政务数据共享开放为技术成果应用提供了时代机遇。

到目前为止,燕云DaaS已广泛应用于科技部、工信部、农业农村部等10多个部委和山东、贵州、浙江等20多个省市自治区的电子政务建设,以及北京、贵阳、上海、深圳、成都等地的智慧城市建设,累积打破了数千个政府和央企信息孤岛,开放融合数据源覆盖公安、司法、教育、农业、通信、能源、电力、交通等多个行业。

哇塞,好想变成一个

数据小分子,去跟这些大佬们摆哈龙门阵!

在与燕云DaaS平台合作前,为了打通全市各单位的数据系统,贵阳市政府经历了长达两年的探索与尝试,用尽了数据搬家、数据重写,或者是把数据格式统一起来等办法,最后仍以失败告终。

直到遇到燕云DaaS,仅1个月,5名实施工程师便完成了贵阳全市53家单位315个系统2290个功能项的梳理,形成1016个数据目录,给出了一份“又全又鲜活”的数据资源台账,初步实现了政务数据的有序流动和按需共享,极大提高了共享和开放的效率。

在浙江,同样是在燕云DaaS的帮助下,4人15天便完成了工商、食药监局、烟草局3个单位相关的5个系统中7大高频热点便民事项的159个数据接口,最终实现部门数据共享和部门间审批网上流转,避免了商事证照登记申请材料的二次录入,达到了“减事项、减材料、减流程、减时间”的目的。

毋容置疑,燕云DaaS已成为支撑我国大数据产业生态发展的一项共性关键技术。

而如此成果的取得,离不开团队对“做有用的研究”的坚持。

燕云DaaS:高效打破信息孤岛的“盾构机”

在技术学科,我们要做有用的研究”,这是北大系统软件团队一直秉持的理念。张颖也一直把“做有用的研究”放在首位,不断在实践中检验自己的科研成果。

打破信息孤岛,实现业务数据和功能与第三方系统的高效互操作,是实现数据融合应用的前提,是公认的世界级技术挑战

虽然目前讲起燕云DaaS,张颖一脸的自豪和轻松。但是,整个成果的实现过程却充满了不易。

北大在互操作系统上的相关研究起步于2007年。

当时,按照国际传统思路,要打通信息壁垒,要先做一个采用某种“插座”标准的“接线板”(即中间件),同时公布一个接口标准,随后各自的系统按照标准进行内部改造,从而形成连接。

这种思路也被喻为“白盒”思路,方式庞杂且繁琐。

“燕云DaaS则区别于传统手段——可以在不打破原有数据的基础上,构建连接各种系统的数据共享流通管道,让深藏在各自独立而封闭系统中的核心数据‘安全流动’,保障数据‘鲜活、按需、有效、安全’。”

这种思路被喻为“黑盒”思路。

张颖为了进一步解释燕云DaaS的原理,用修地铁做了个比方。

一个城市新建地铁,不再需要开膛破肚地把马路挖开,影响沿线工作和生活,而是采用“盾构机”,在地下隧道中掘进的同时,铺设好地下管道,然后实现城市交通各集散点的地铁连通。

而燕云DaaS就像是这台盾构机,在获得用户授权后,就可以构造出连通不同系统的数据管道。

如同水在水管、燃气在燃气管流动一样,各个系统的数据就在这些对应的数据管道中有序流动,实现按需交换共享。

数据的提供方可通过管道的总闸来控制数据流出的内容,数据的使用方可以拧开管道的终端龙头来使用鲜活的数据,管道的运营方负责维护好管道的正常运行,责、权、利很明晰。

通过“黑盒”方法最终取得的成果,让数据开放效率平均提升了两个数量级。而该成果也因突破了国际上传统的通过中间件实现信息系统连接的思路,被同行誉为“颠覆式重大发明和创新”。

后记

有不少人困惑:今天到底是什么时代?智能时代,大数据时代还是云计算时代?

其实说得都没错。

但更准确地说,我们处在ABC时代,A即人工智能(AI)、B即大数据(Big Data)、C即云计算(Cloud Computing),三者紧密联系在一起。大数据是云计算和人工智能最基础的东西,支撑着整个体系。

党的十九大报告提出建设“数字中国”。日前,四川省政府也印发了《关于加快推进数字经济发展的指导意见》,剑指大数据、人工智能、5G等产业,明确提出要加快推进数字经济发展,力争到2022年,全省数字经济总量超2万亿元,成为创新驱动发展的重要力量。成都在四川数字经济的版图中担当重任,无论是智慧城市的建设,还是大数据、人工智能、5G等产业的发展,都充满着需求与机遇。

大数据时代在快速发展着,生产、生活及城市的运转都享受着它带来的高效与便利。而这一切的背后,是“张颖们”孜孜不倦地探索,与充满智慧的创造。

———— /往期推荐/ ————

喜欢本篇内容请给我们点个在看

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20190904A07C2800?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券