腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大数据技术学习

专栏作者

51

文章

45345

阅读量

35

订阅数

大数据学习路线指南（最全知识点总结）

大数据 spark hadoop java scala

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。

2019-03-13

7280

零基础如何学习大数据，大数据学习路线是什么

hadoop linux 数据处理大数据 mapreduce

在目前，当零基础学习大数据视频教程前，首先我们要学习Java语言和Linux操作系统，这两个是学习大数据的基础，学习的顺序不分前后。

2019-02-22

4250

大数据要学哪些技术大数据工程师必备技能有哪些？

hadoop mapreduce python spark

HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。

2018-12-23

9780

大数据学习路线

linux 大数据数据库 sql hadoop

学习要根据自身情况来定，如果你是零基础，那就必须先从基础Java开始学起（大数据支持很多开发语言，但企业用的最多的还是JAVA），接下来学习数据结构、Linux系统操作、关系型数据库，夯实基础之后，再进入大数据的学习，具体可以按照如下体系：

2018-12-19

4480

Storm与Spark、Hadoop三种框架对比

数据库大数据数据分析数据处理 hadoop

Storm与Spark、Hadoop这三种框架，各有各的优点，每个框架都有自己的最佳应用场景。所以，在不同的应用场景下，应该选择不同的框架。

2018-12-07

2.2K0

大数据技术的发展趋势

大数据存储 hadoop 数据分析

大数据领域已经涌现出了大量新的技术，它们成为大数据采集、存储、处理和呈现的有力武器。这些技术下一步将如何发展？它们之中哪些技术将广为流行？又会诞生哪些新的技术？

2018-06-26

1.5K0

大数据-Hadoop小文件问题解决方案

大数据 hadoop mapreduce jvm

HDFS中小文件是指文件size小于HDFS上block(dfs block size)大小的文件。大量的小文件会给Hadoop的扩展性和性能带来严重的影响。

2018-06-25

1.4K0

大数据概念：史上最全大数据解析

大数据 go hadoop 分布式存储

现如今，我们身边很多人对一些热门的新技术、新趋势往往趋之若鹜却又很难说得透彻，比如大数据，如果被问大数据和你有什么关系，估计很少能说出一二三来。究其原因，一是因为大家对新技术有着相同的原始渴求，至少知其然，在聊天时不会显得很“土鳖”；二是在工作和生活环境中，真正能参与实践的大数据案例实在太少了，所以大家没有机会花时间去知其所以然。

2018-12-09

1.1K0

在未来的大数据和机器学习领域，获得一份不错的工作？

编程算法 unix hadoop 机器学习神经网络

AI 的发展脚步会加快，这一年将是 AI 技术重生和数据科学得以重新定义的一年。对于雄心勃勃的数据科学家来说，他们如何在与数据科学相关的工作市场中脱颖而出？会有足够多的数据科学相关工作吗？还是说有可能出现萎缩？接下来，让我们来分析一下数据科学的趋势，并一探如何在未来的大数据和机器学习 /AI 领域获得一份不错的工作。”

2018-12-01

8730

大数据时代，就业转型必备技能！

大数据 hadoop java spark linux

Java编程是大数据开发的基础，大数据中很多技术都是使用Java编写的，如Hadoop、Spark、mapreduce等，因此，想要学好大数据，Java编程是必备技能！

2019-05-09

4550

如何学习大数据技术

spark 大数据机器学习 linux hadoop

针对第一个问题，就是ETL技术-数据的抽取，清洗，加载。传统数据抽取、清洗、加载是无法做到的。例如一个1TB的数据，需要抽取一些客户的基本信息。上万的文件，多种数据库，每个数据库有很多节点等，这些问题如何解决。第二是时间问题，如果这个ETL过长需要半个月时间，那么就没有意义的。

2019-06-11

5030

如何从零开始规划大数据学习之路!

hadoop spark 人工智能机器学习神经网络

针对第一个问题，就是ETL技术-数据的抽取，清洗，加载。传统数据抽取、清洗、加载是无法做到的。例如一个1TB的数据，需要抽取一些客户的基本信息。上万的文件，多种数据库，每个数据库有很多节点等，这些问题如何解决。第二是时间问题，如果这个ETL过长需要半个月时间，那么就没有意义的。

2019-06-12

5550

大数据技术有哪些应该重点学哪些知识

hadoop nosql mapreduce 云计算

想学习大数据技术，是不是首先要知道大数据技术有哪些呢？这样也好知道自己未来应该往哪个方向发展，应该重点学习哪些知识？

2019-05-29

9240

大数据划重点，你必须掌握的三大关键技能

hadoop spark 分布式 scala

因为数据时代全面来临，大数据、人工智能等技术引领科技创新潮流，获得国家政策大力支持，前景广阔。

2019-06-08

4620

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态