腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
北京马哥教育
专栏作者
举报
1832
文章
3334565
阅读量
203
订阅数
订阅专栏
申请加入专栏
全部文章（999+）
linux（427）
python（425）
其他（403）
运维（172）
存储（141）
数据库（103）
安全（82）
编程算法（79）
shell（72）
云数据库 SQL Server（66）
开源（65）
https（57）
bash（56）
nginx（52）
爬虫（52）
unix（43）
人工智能（43）
sql（42）
windows（40）
java（38）
自动化（37）
ssh（37）
容器（35）
git（34）
分布式（34）
html（33）
容器镜像服务（32）
php（31）
api（31）
tcp/ip（31）
大数据（30）
bash 指令（29）
http（28）
网络安全（28）
grep（28）
缓存（26）
微信（25）
github（24）
yum（24）
数据分析（24）
数据处理（24）
ubuntu（23）
云数据库 Redis（22）
黑客（22）
apache（21）
正则表达式（21）
zabbix（19）
centos（18）
机器学习（17）
django（17）
网站（17）
数据结构（17）
node.js（16）
游戏（15）
dns（15）
devops（14）
tomcat（13）
hadoop（12）
系统架构（12）
ruby（11）
oracle（11）
ftp（11）
数据可视化（11）
云服务器（10）
openstack（10）
虚拟化（10）
数据挖掘（9）
javascript（9）
kubernetes（9）
kvm（9）
安全漏洞（9）
go（8）
nosql（8）
mongodb（8）
gui（8）
kernel（8）
nat（8）
负载均衡（7）
mac os（7）
.net（7）
json（7）
打包（7）
负载均衡缓存（7）
微服务（7）
c++（6）
xml（6）
access（6）
访问管理（6）
es 2（6）
压力测试（6）
erp（6）
unity（6）
scrapy（6）
lamp（6）
小程序（6）
网站建设（6）
云计算（6）
人脸识别（5）
ios（5）
ide（5）
腾讯云测试服务（5）
jdk（5）
图像识别（5）
wordpress（5）
sql server（5）
cdn（5）
ddos（5）
udp（5）
socket编程（5）
架构设计（5）
android（4）
mapreduce（4）
numpy（4）
单元测试（4）
腾讯云开发者社区（4）
NLP 服务（3）
c 语言（3）
perl（3）
css（3）
jquery（3）
memcached（3）
flask（3）
搜索引擎（3）
神经网络（3）
数据安全（3）
express（3）
spark（3）
jvm（3）
asp（3）
jenkins（3）
lnmp（3）
anaconda（3）
物联网（3）
kafka（3）
Elasticsearch Service（3）
进程（3）
区块链（2）
lua（2）
scala（2）
bootstrap（2）
ajax（2）
汇编语言（2）
嵌入式（2）
mvc（2）
jar（2）
apt-get（2）
spring（2）
深度学习（2）
文件存储（2）
命令行工具（2）
图像处理（2）
DevOps 解决方案（2）
数据备份（2）
yarn（2）
html5（2）
面向对象编程（2）
决策树（2）
线性回归（2）
selenium（2）
rpc（2）
敏捷开发（2）
rabbitmq（2）
sas（2）
实时监控（2）
it（2）
server（2）
time（2）
云点播（1）
swift（1）
servlet（1）
jsp（1）
asp.net（1）
r 语言（1）
react（1）
opengl（1）
qt（1）
单片机（1）
arm（1）
makefile（1）
sqlite（1）
web.py（1）
ruby on rails（1）
eclipse（1）
windows server（1）
solaris（1）
tornado（1）
腾讯云可观测平台（1）
云数据库 MongoDB（1）
TDSQL MySQL 版（1）
NAT 网关（1）
VPN 连接（1）
消息队列 CMQ 版（1）
数据加密服务（1）
cci 持续集成（1）
日志数据（1）
渲染（1）
sass（1）
数据迁移（1）
无人驾驶（1）
hive（1）
opencv（1）
监督学习（1）
zookeeper（1）
seo（1）
二叉树（1）
ntp（1）
机器人（1）
processing（1）
jupyter notebook（1）
unicode（1）
ipv6（1）
测试策略（1）
性能测试（1）
etcd（1）
es（1）
flink（1）
学习方法（1）
流计算 Oceanus（1）
测试服务（1）
教育（1）
bug（1）
client（1）
epoll（1）
filter（1）
iptables（1）
mutex（1）
pmp（1）
process（1）
project（1）
rpm（1）
search（1）
select（1）
semaphore（1）
send（1）
share（1）
sign（1）
signature（1）
summary（1）
tcp（1）
thread（1）
vim（1）
wireshark（1）
测试（1）
程序员（1）
创业（1）
客户端（1）
内核（1）
排序（1）
思维导图（1）
效率（1）
异步（1）
搜索文章
搜索
搜索
关闭
Hadoop 2.0中作业日志收集原理以及配置方法
hadoop
yarn
mapreduce
Hadoop 2.0提供了跟1.0类似的作业日志收集组件，从一定程度上可认为直接重用了1.0的代码模块，考虑到YARN已经变为通用资源管理平台，因此，提供一个通用的日志收集模块势在必行，由于目前通用日志收集模块正在开发中（可参考“YARN-321”），本文仅介绍MRv2（MapReduce On YARN）自带的日志收集模块，包括工作原理以及配置方法。 在Hadoop 2.0中，每个作业日志包含两部分，作业运行日志和任务运行日志，作业运行由MRAppMaster（MapReduce作业的Applicat
小小科
2018-05-04
1.8K
0
Hadoop2.2.0 的安装和基本配置
hadoop
yarn
ubuntu
linux
Hadoop2.0的架构和1.0完全不一样，在安装配置上和1.0也有很大的不同，譬如配置文件的目录不一样了，还有要对yarn进行配置，这个在1.0是没有的。很多人第一次接触hadoop2.0的时候，会很不适应，而且官方的文档也有些写得不太清楚的地方，也有些错误。笔者在初次安装hadoop2.0的时候，看着官方的文档，中间也出现过很多问题。为了帮助大家很快的部署上hadoop2.0，笔者写了这篇文章。这篇文章主要就是介绍一个hadoop2.0的一个最基本最简单的配置，目的就是尽快的让hadoop2.0在机器上
小小科
2018-05-02
839
0
没有更多了
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战，赢鹅厂证书、公仔好礼！
立即学习
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档