到底什么是大数据，大数据职业的具体工作内容是什么？真相揭开让人不敢相信

大数据的定义。大数据，又称巨量资料，指的是所涉及的数据资料量规模巨大到无法通过人脑甚至主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。

互联网是个神奇的大网，大数据开发也是一种模式，你如果真想了解大数据，可以来这里，这个手机的开始数字是一八七中间的是三儿零最后的是一四二五零，按照顺序组合起来就可以找到，

数据采集

调查显示，未被使 用的信息比例高达99.4%，很大程度都是由于高价值的信息无法获取采集。因此在大数据时代背景下，如何从大数据中采集出有用的信息已经是大数据发展的关键因素之一。

数据清洗

将不规整数据转化为规整数据，刚刚采集到的原生数据，格式还无法满足我们对数据处理的基本要求，需要对其进行预处理，转化为我们后面工作所需要的较为规整的数据。

数据存储

是将经过清洗、集成和归约的数据存储在空间中，方便后续数据分析使用的一种技术。面对海量数据，传统的数据库存储方式已经无法满足人们对数据存储的诉求，可以采用分布式文件系

大数据的有体量大、增长迅速的特点，一般需要建立大型的数据中心才能实现，其要求是：一要有极大的数据吞吐与存储能力，二是要具备实时不间断运行的能力，三是要具备严格的网络安全及攻击防控能力。

数据采集部分不同的企业的架构划分略有不同，在此我们不在讨论其放在哪一层，我们仅仅谈一下数据采集相关的技术。数据采集用到的技术包括：ETL工具、flume、网络爬虫等等。在搜索方面，开源的搜索引擎主要就是lucene、solr和elasticsearch。

比如数据科学家，其就需要掌握数据模型设计与开发、数据分析方法、数据挖掘等技能。

从以上不同岗位的要求能看出，大数据也是一门综合学科，而其中对数学模型的理解与设计、算法、数据挖掘要求较高，所以当你在选择大数据方向的职业时，还是要从自己最擅长的技能分支去考虑，只要精通掌握其中一个分支，就能发挥自身价值，做出成绩。