大数据工程师的简易解释 转

数据工程师是在Linux系统下搭建Hadoop生态系统（cloudera是最大的输出者类似于Linux的红帽），把用户的交易或行为信息通过HDFS（分布式文件系统）等存储用户数据文件，然后通过Hbase（类似于NoSQL）等存储数据，再通过Mapreduce（并行计算框架）等计算数据，然后通过hiv或pig（数据分析平台）等分析数据，最后按照用户需要重现出数据的工程师。 

(adsbygoogle = window.adsbygoogle || []).push({});