首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

初识大数据

人工智能、大数据等概念近年来炙手可热,为了抓住时代的尾巴,我最近拜读了吴军博士的《智能时代》。吴军以其深厚的知识储备,旁征博引,从人类思维模式的理论基础及变迁、大数据的内涵及特点、智能时代中大数据的应用等诸多方面,深入浅出的讲述了大数据的前世今生。

思维决定行为

从欧几里得、托勒密到牛顿、笛卡尔,再到爱因斯坦,对自然规律的探索使人们形成了根深蒂固的机械思维。人们认为世界变化是有规律且确定性的,规律可被认知并用公式或语言描述,并应用于各种未知领域以指导实践。人们遵循因果律,分析问题-寻找原因-得出结果,这解决问题的基本方法。

机械思维影响了人类几百年,它带来了工业革命,为人类创造了惊人的生产力。瓦特发明的万用蒸汽机,应用到了各个领域。这是机械思维的成功—一个通用方法解决所有问题;机械思维成就了以抗生素研究为代表的现代医学,从而延长了人类的生命;机械表、计算机等发明使机械与时间、音乐、计算相挂钩。

当时间来到20世纪,以玻尔为代表的一票物理学家对微观世界的研究证实这个世界是不确定性的。信息论中香农用“信息熵”描述了信息系统的不确定性,量化了信息。即想消除不确定性,就要增加信息。

大数据思维正是基于不确定性的一种思维方式。通过大数据,找到两个事物间的关联性,从而加以利用,即使不知晓其中的原因。大数据思维中,相关性就代替了因果律。将来,我们的生活方式也将发生翻天覆地的变化。

雷军与董小姐的赌约,本质上就是两种思维方式的碰撞

数据与大数据

人与动物的区别就在于人可以通过观察生活中的现象总结出数据,分析数据而得到信息,将信息系统化形成知识,四者之间由具体到抽象。历法的形成、天文学的研究都遵循这一过程。

现代社会中,数字、语言、文字、图像等均为数据的范畴。

随着互联网及现代科技的发展,数据的收集、存储、传输与处理水平不断提高,数据逐渐具备了多维度、低成本、完备性、时效性等特点,数据也就变身成为了大数据。

人们对机器智能的探索由来已久,但直到互联网的发展成就了大数据,机器智能的研究才实现了质的飞跃。

智能革命的核心是数据驱动方法,即不预设模型,基于大数据,用多个简单模型去契合数据。机器智能最早在语言识别领域实现突破,就是因为IBM首先拥有了足够的计算能力与大量电传文本数据。

大数据应用

大数据可以应用到人们生活的方方面面。行政部门可以通过家庭智能电表分析用户用电规律;电商根据用户搜索、购买数据分析用户的生活状态,从而给他进行商品的个性化推荐;在搜索引擎中输入几个拼音它就知道你要搜索什么,也是根据大数据……

让我们回顾人类技术革命的历史。第一次工业革命:现有产业+蒸汽机=新产业,纺织品、瓷器等产品大量生产,生产力水平实现飞跃。第二次工业革命:现有产业+电=新产业,电梯、电车等出现,催生了大都市;留声机、电影,催生了娱乐业;现代传媒与通信业,催生了全球性品牌,形成产业链、广告产业。信息革命:现有产业+摩尔定律=新产业,创造了电视、传媒等信息产生、传输、处理的产业,也应用到了金融、农业等产业。一种资源,少数企业生产,多个领域应用,世界将呈现一个崭新面貌。可以预见,正在掀起的智能革命,即现有产业+大数据=新产业,也将渗透进我们的生活。智能化行政管理,预测道路、景区流量;个性化医疗、教育服务……,更美好的生活指日可待。

来自智能革命的挑战

技术领域发展遇瓶颈,如视频数据,医疗、飞机制造等行业数据复杂,难以进行大数据随机访问;数据格式未标准化;数据处理能力滞后;数据量增长速度快于存储设备发展等。

个人安全难以保障,在生活中,我们通常都会通过暴露个人隐私换取便利性。

似乎,我们要被时代抛弃了。在以往的革命中,新技术在提升生产力的同时,也使很多人失去了价值。世界上大部分人在革命开始后半个世纪并未享受变革的红利,反而因此失去工作。在即将到来的智能革命中,仅有2%的人可以控制未来,成为他们或淘汰,我们将何去何从呢?

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180227G1H9UY00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券