大数据技术介绍（二）

第二章 信息技术（IT）时代的数据观

从1946年世界上第一台电子数字计算机诞生以后，计算机就开始慢慢改变人类的生产和生活，并把人类带上了高速发展的轨道。有了计算机，就开始了机器制造数据、利用数据和处理数据，数据时代来临了。

在上世界五十年代，政府、研究机构、企业等纷纷借助计算机的高速计算和精准结果来提高自己的工作效率。开始进入实际应用的一些昂贵的大型机和微型计算机终端，全世界也总共才有几千个应用，而能接触到计算机的人全世界也就几百万人而已，可以说是“贵族阶层”才能用到计算机，而且都是单机模式，机器之间没有交互。这时无论计算机的性能和数据存储量都不是很高，因此这些计算机产生和处理的的数据总量有限。这个时代的计算总和被称为第一平台。

从上世纪六七十年代，随着科技的发展，计算机的运行速度越来越快，内存容量越来越大，存储容量也不断提升，使用计算机的来处理业务的应用系统也越来越多，因此全世界的数据量慢慢多了起来。由于计算机制造成本的下降，个人计算机（PC）就出现了，使用计算机的人就慢慢多起来了。随着网络技术的发展，LAN出现了。客户端/服务器（C/S）模式的应用出现了。各种应用系统如雨后春笋般出现了，如大量的信息管理系统（MIS、HIS），企业资源管理系统（MRP、ERP），数据库系统（SQL Server、Mysql、Oracle、DB2）等。这些系统的大量出现，造成了数据量越来越大，但存储能力也足以能够容纳。随着互联网Internet的普及，浏览器/服务器（B/S）模式的系统出现了，利用浏览器通过网络访问系统，方便快捷，因此很多客户端/服务器模式的应用系统纷纷向浏览器/服务器模式迁移，企业新开发的系统也越来越多地采用浏览器/服务器模式。由于互联网的普及深入普通民众，个人计算机（PC）走进了千家万户，个人计算机（PC）时代来到了。这时候，使用计算机的人全世界有数亿人，数万个应用程序在运行，当然产生的数据量也是越来越大。截止到智能手机大量使用（2010年）之前，这个时代的计算总和被称为第二平台。

在第二平台时期，人们已经认识到数据的重要性并开始进行充分利用。一些IT企业开发了对数据进行有效管理和分析的数据库（SQL Server、Mysql、Oracle、DB2）与数据分析产品（商业智能BI产品，如IBM的Cognos、Oracle的OBIEE、SAP的BO、Tableau、Qlikview、微软的PowerBI），专门对数据进行收集、管理和利用。很多企业也建立了各种应用系统，利用软件系统来管理业务，提高效率，降低风险，节约成本。商业智能BI得到了快速发展，很多BI分析工具帮助企业对企业存储在数据库中的业务数据进行分析，产生各种汇总报表、图标，企业的决策人员可以利用这些汇总报表数据对业务情况、公司盈利情况进行分析，并参照这些数据制定后续的生产计划等。可以说这个时期，人们已经很重视数据分析了，利用数据分析结果来指导业务，而不仅仅是领导拍脑袋来决定业务。但由于数据总量有限，没有能完全反映企业整体情况的全面数据和反映企业所在环境的外部情况的更多数据，因此这个阶段的商业智能BI数据分析是受局限的，并且商业智能BI的数据分析只是对企业过去发生的数据情况的汇总，很难准确有效地指导后续企业的业务发展。