腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

WindCoder

所有文章首发于https://windcoder.com/，文章均自动同步于此。

专栏作者

417

文章

790147

阅读量

38

订阅数

Hadoop MapReduce简介

MapReduce作业（job）通常将输入数据集拆分为独立的块，这些块由map任务（map tasks）以完全并行的方式处理。框架对maps的输出（outputs）排序，然后输入到reduce 任务（reduce tasks）。通常，作业的输入和输出都存储在文件系统中。该框架负责调度任务，监控它们并重新执行失败的任务。

2020-01-21

6840

hadoop yarn apache node.js 开源

Apache Hadoop软件库是一个允许使用简单的编程模型跨计算机集群分布式处理大型数据集的框架。它旨在从单个服务器扩展到数千台计算机，每台计算机都提供本地计算和存储。

2020-01-21

5440

Logstash6整合Hadoop

hadoop java xml 大数据 php

本文是之前elk的后续，故默认已搭建好logstash等elk相关环境。侧重点是Hadoop安装以及其与logstash的Output插件的整合。ELK的搭建可见：ELK实时日志管理-系统搭建

2020-01-21

5430

Logstash6整合Hadoop-报错与解决方案

hadoop java 大数据网站 xml

196.168.0.79上未在/etc/hosts中配置192.168.0.80的记录

2020-01-21

2.8K1

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态