腾讯云开发者周刊36期：《Hadoop全方位详解》 - 腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯云开发者周刊36期：《Hadoop全方位详解》

入门介绍

hadoop介绍

Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。

Hadoop 基础知识

大数据到底是啥？大数据是一个概念也是一门技术，它是在以Hadoop为代表的大数据平台框架上进行各种数据分析的技术。

Hadoop系统架构

本文梳理了Hadoop的系统架构及多代对比，方便清晰有效的进行学习。

实践应用

如何部署 Hadoop 集群

本指南将教您在云上搭建Hadoop集群。Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，而MapReduce则为海量的数据提供了计算。

Hadoop的mapreduce的简单用法

Mapreduce是一个计算框架，既然是做计算的框架，那么表现形式就是有个输入（input），mapreduce操作这个输入（input），通过本身定义好的计算模型，得到一个输出（output），这个输出就是我们所需要的结果。

Zookeeper应用：hadoop的HA简单实现

hadoop的HDFS集群的分布式存储是靠NameNode节点（namenode负责响应客户端请求）来实现。NameNode对应整个hadoop来说，无非是很重要的。

高级技巧

在hadoop2.0上实现深度学习

我们讨论如何在一个Hadoop集群中实施和部署深度学习，一个顶尖的机器学习框架，而且提供了该算法如何在分布式系统中适应并运行的细节，并给出了在标准数据集上运行算法的结果。

惊心动魄的Hadoop-6小时350T数据恢复

这次文章是记录一下数据恢复。上周五在调试Spark数据的时候发现了一个问题，就是一直显示No lease的问题，我们的实时处理程序升级之后，处理的数据量在一个小时内暴增1T。

Java线程池管理及分布式Hadoop调度框架搭建

多线程一直不是件容易的事情，然而开发过程却又经常碰到，有时甚至还会被作为考校程序员实力的一个指标。这样一来，多线程已然成为一道必须迈过的坎！