腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
LanceToBigData
本人从事爬虫、java后端以及大数据相关的工作!
专栏成员
举报
173
文章
304631
阅读量
60
订阅数
订阅专栏
申请加入专栏
全部文章(173)
java(66)
数据库(25)
数据处理(25)
云数据库 SQL Server(24)
其他(19)
hadoop(18)
linux(16)
servlet(8)
jsp(8)
tcp/ip(8)
struts(7)
编程算法(7)
xml(6)
面向对象编程(5)
spring boot(5)
mvc(4)
maven(4)
jdbc(4)
mapreduce(3)
存储(3)
分布式(3)
大数据(3)
python(2)
html(2)
云数据库 Redis(2)
git(2)
http(2)
shell(2)
jvm(2)
负载均衡(1)
bash(1)
node.js(1)
sql(1)
ide(1)
eclipse(1)
github(1)
jar(1)
负载均衡缓存(1)
spring(1)
mongodb(1)
express(1)
serverless(1)
开源(1)
缓存(1)
网络安全(1)
ssh(1)
hashmap(1)
zookeeper(1)
kvm(1)
windows(1)
云计算(1)
搜索文章
搜索
搜索
关闭
Hadoop(十三)分析MapReduce程序
数据处理
大数据
hadoop
前言 刚才发生了悲伤的一幕,本来这篇博客马上就要写好的,花了我一晚上的时间。但是刚才电脑没有插电源就没有了。很难受!想哭,但是没有办法继续站起来。 前面的一篇博文中介绍了什么是MapReduce,这一篇给大家详细的分享一下MapReduce的运行原理。 一、写一个MapReduce程序例子 1.1、数据准备 准备要处理的数据(假定数据已经存放在hdfs的/data目录下) $> hdfs dfs -ls /data 看到测试数据目录。天气数据目录/data/weather,专利数据目
用户1195962
2018-01-18
1.2K
0
Hadoop(十四)MapReduce原理分析
数据处理
大数据
hadoop
前言 上一篇我们分析了一个MapReduce在执行中的一些细节问题,这一篇分享的是MapReduce并行处理的基本过程和原理。 Mapreduce是一个分布式运算程序的编程框架,是用户开发“基于hadoop的数据分析应用”的核心框架。 Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个hadoop集群上。 一、MapReduce并行处理的基本过程 首先要说明的是Hadoop2.0之前和Hadoop2.0之后的区别: 2.
用户1195962
2018-01-18
4.7K
0
Hadoop(一)之初识大数据与Hadoop
数据处理
hadoop
大数据
前言 从今天起,我将一步一步的分享大数据相关的知识,其实很多程序员感觉大数据很难学,其实并不是你想象的这样,只要自己想学,还有什么难得呢? 学习Hadoop有一个8020原则,80%都是在不断
用户1195962
2018-01-18
1.3K
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档