腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
Java工程师成长之路
专栏作者
举报
210
文章
245166
阅读量
43
订阅数
订阅专栏
申请加入专栏
全部文章
spring
编程算法
sql
java
数据库
网络安全
云数据库 Redis
http
https
javascript
容器
网站
node.js
缓存
容器镜像服务
tcp/ip
Elasticsearch Service
云数据库 SQL Server
maven
分布式
mybatis
scala
html
github
rabbitmq
vue.js
xml
ide
腾讯云测试服务
微信
小程序
json
打包
git
api
nginx
负载均衡
bash
bootstrap
android
tomcat
负载均衡缓存
bash 指令
开源
zookeeper
dubbo
app
properties
配置
官方文档
css
apache
存储
html5
hadoop
面向对象编程
hashmap
spring cloud
大数据
微服务
云服务器
ios
python
mvc
jar
linux
访问管理
运维
压力测试
jvm
spring boot
jdbc
aop
ps
工具
注解
其他
tensorflow
mac os
c 语言
php
ruby
lua
jquery
access
eclipse
unix
文件存储
数据库一体机 TData
消息队列 CMQ 版
eslint
webpack
kubernetes
自动化
spark
jdk
ssh
hive
unity
npm
rpc
udp
数据分析
windows
架构设计
element ui
kafka
boot
build
cas
cat
cmd
com
constraints
controller
datepicker
distance
el
email
error
feign
filter
final
fixed
flex
fluent
geo
handle
hystrix
input
interface
itext
java8
jdk8
jetty
jpa
jwt
keyboard
lambda
list
load
localhost
lock
logback
mac
match
menu
multicast
null
path
pdf
redis
route
security
session
set
sh
sidebar
simpledateformat
state
storage
store
sys
tabbar
tabs
text
thread
token
validation
报表
编码
博客
测试工具
登录
动画
二进制
分页
工具类
继承
前端
日志
设计模式
线程安全
异常处理
源码
主机
搜索文章
搜索
搜索
关闭
hadoop中HDFS的NameNode原理
大数据
云数据库 Redis
hadoop
压力测试
分布式
1. hadoop中HDFS的NameNode原理 1.1. 组成 包括HDFS(分布式文件系统),YARN(分布式资源调度系统),MapReduce(分布式计算系统),等等。 1.2. HDFS架构原理 比如现在要上传一个1T的大文件,提交给HDFS的Active NameNode(用以存放文件目录树,权限设置,副本数设置等),它会在指定目录下创建一个新的文件对象,比如access_20180101.log 至于具体数据,它会将它拆分后进行分布式存储,分散在各个DataNode节点,且默认都会有3个副本
老梁
2019-09-10
627
0
Mycat入门
xml
大数据
容器镜像服务
容器
数据库
1.下载jdk,地址 https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
老梁
2019-09-10
807
0
大数据基础Hadoop 2.x入门
hadoop
大数据
node.js
bash
bash 指令
hadoop概述 存储和分析网络数据 三大组件 MapReduce 对海量数据的处理 思想: 分而治之 每个数据集进行逻辑业务处理map 合并统计数据结果reduce HDFS 储存海量数据 分布式存储 安全性高 副本数据 YARN 分布式资源管理框架 管理整个集群的资源(内存、CPU核数) 分配调度集群资源 Common 工具 hadoop生态圈 Hive(蜜蜂)通过使用sql语句来执行hadoop任务 HBase 存储结构化数据的分布式数据库 HBase放弃了事务特性,追求更高的扩展
老梁
2019-09-10
306
0
没有更多了
社区活动
Python精品学习库
代码在线跑,知识轻松学
点击查看
【玩转EdgeOne】征文进行中
限时免费体验,发文即有奖~
立即参加
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·干货材料·成员作品·最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档