北方互联学院：大数据开发工程师需要具备哪些知识？

大数据开发工程师需要具备三个知识结构，包括大数据基础知识、大数据平台知识和大数据场景知识。

大数据的基础知识包括三个主要方面，即数学基础、统计学和计算机基础。数学基础是大数据从业者的重要基础，因为大数据的核心是算法设计，数学是算法设计的基础。统计学的基础知识也是大数据从业者必须掌握的内容，包括基本的统计方法、绘制方法、统计算法等内容。计算机基础包括操作系统（Linux）计算机网络、数据结构、算法设计、数据库等内容。

大数据平台知识需要学习Hadoop、Spark相关内容，包括HadoopCommon、HDFS、MapReduce、Hive、Pig和其他列内容。从事大数据平台开发需要掌握Python、Java、Scala、r等编程语言，每种语言都有相应的开发场景。

大数据场景知识要结合具体行业，包括教育大数据、金融大数据、交通大数据、医疗大数据，场景大数据分析是目前大数据领域的一个重要应用。