腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
大数据学习笔记
专栏成员
举报
533
文章
780909
阅读量
73
订阅数
订阅专栏
申请加入专栏
全部文章（533）
http（63）
node.js（59）
java（54）
hadoop（54）
数据库（47）
网络安全（46）
编程算法（44）
大数据（42）
https（42）
sql（34）
Elasticsearch Service（32）
linux（31）
xml（29）
spark（25）
maven（24）
云数据库 SQL Server（23）
apache（23）
html（22）
spring（21）
协议（20）
api（18）
mapreduce（16）
tcp/ip（16）
机器学习（15）
jar（15）
网站（15）
python（14）
javascript（14）
其他（13）
bash（12）
centos（12）
yum（12）
zookeeper（12）
bash 指令（11）
分布式（11）
ide（10）
hbase（10）
yarn（9）
存储（9）
shell（9）
windows（9）
数据（9）
oracle（8）
容器镜像服务（8）
腾讯云测试服务（8）
json（7）
打包（7）
eclipse（7）
tomcat（7）
TDSQL MySQL 版（7）
tensorflow（6）
jquery（6）
容器（6）
jdk（6）
ssh（6）
spring cloud（6）
c++（5）
android（5）
命令行工具（5）
hive（5）
kafka（5）
elasticsearch（5）
mysql（5）
排序（5）
索引（5）
php（4）
云数据库 Redis（4）
git（4）
github（4）
ubuntu（4）
面向对象编程（4）
npm（4）
es（4）
flink（4）
partition（4）
root（4）
登录（4）
配置（4）
ruby on rails（3）
nginx（3）
文件存储（3）
es 2（3）
云推荐引擎（3）
人工智能（3）
gcc（3）
anaconda（3）
安全（3）
虚拟化（3）
data（3）
range（3）
service（3）
system（3）
测试（3）
服务（3）
集群（3）
权限（3）
算法（3）
官方文档（2）
区块链（2）
jsp（2）
css（2）
ajax（2）
postgresql（2）
lucene/solr（2）
unix（2）
数据加密服务（2）
DevOps 解决方案（2）
云数据库 MySQL（2）
开源（2）
缓存（2）
正则表达式（2）
jdbc（2）
grep（2）
rabbitmq（2）
数据分析（2）
数据处理（2）
微服务（2）
nat（2）
utf8（2）
add（2）
db（2）
default（2）
dynamic（2）
error（2）
jieba（2）
kibana（2）
lag（2）
less（2）
neo4j（2）
null（2）
schema（2）
select（2）
server（2）
分页（2）
后台（2）
解决方案（2）
搜索（2）
同步（2）
系统（2）
异常（2）
对象存储（1）
负载均衡（1）
比特币（1）
数字货币（1）
自动驾驶（1）
mac os（1）
c 语言（1）
c#（1）
go（1）
erlang（1）
bootstrap（1）
vue.js（1）
typescript（1）
sqlite（1）
搜索引擎（1）
全文检索（1）
windows server（1）
专用宿主机（1）
访问管理（1）
NAT 网关（1）
mongodb（1）
vr 视频解决方案（1）
express（1）
sass（1）
rollup.js（1）
serverless（1）
grunt（1）
运维（1）
爬虫（1）
jvm（1）
gui（1）
mybatis（1）
sql server（1）
dns（1）
hashmap（1）
ftp（1）
二叉树（1）
scrapy（1）
rpc（1）
udp（1）
zabbix（1）
uml（1）
ntp（1）
数据可视化（1）
云数据库 postgresql（1）
防火墙（1）
迁移（1）
admin（1）
agent（1）
aggregate（1）
auto（1）
bug（1）
cat（1）
centos7（1）
checkbox（1）
cli（1）
client（1）
cmd（1）
code（1）
command（1）
components（1）
controller（1）
dao（1）
dataset（1）
date（1）
deployment（1）
directory（1）
dom（1）
dos（1）
edit（1）
editor（1）
el（1）
event（1）
exception（1）
exe（1）
exit（1）
file（1）
form（1）
format（1）
fs（1）
graph（1）
hash（1）
hdfs（1）
host（1）
instance（1）
int（1）
io（1）
ip（1）
key（1）
kill（1）
label（1）
limit（1）
list（1）
localhost（1）
lock（1）
mariadb（1）
methods（1）
min（1）
ode（1）
pagination（1）
port（1）
preferences（1）
private（1）
process（1）
protected（1）
redis（1）
rows（1）
rpm（1）
set（1）
sha256（1）
sharepoint（1）
show（1）
src（1）
storage（1）
sudo（1）
sum（1）
tablet（1）
time（1）
tools（1）
unique（1）
upgrade（1）
upsert（1）
usb（1）
version（1）
vnc（1）
百度（1）
报表（1）
遍历（1）
编码（1）
编译（1）
部署（1）
插件（1）
程序（1）
程序设计（1）
定时任务（1）
队列（1）
多线程（1）
工具类（1）
函数（1）
基础（1）
加密（1）
脚本（1）
镜像（1）
连接（1）
面试（1）
内核（1）
排序算法（1）
日志（1）
入门（1）
设计（1）
事件（1）
事务（1）
数组（1）
文件上传（1）
文件系统（1）
性能（1）
虚拟机（1）
语法（1）
源码分析（1）
终端（1）
搜索文章
搜索
搜索
关闭
Java API访问HA方式的HDFS
xml
node.js
大数据
对于namenode是HA高可用集群时，客户端远程访问hdfs有两种实现方法： （1）将所有关于namenode的参数写入Configuration对象中 （2）将配置文件core-site.xml和hdfs-site.xml文件复制到项目的src目录下
程裕强
2022-05-06
999
0
两个NameNode都处在StandBy模式
大数据
node.js
今天发现两个NameNode都处在StandBy模式 📷 📷 尝试重启hdfs，两个NameNode依然处在StandBy模式 后来发现停止HDFS时，NameNode1不能停止 [root@bigdata01-test hadoop]# stop-dfs.sh Stopping namenodes on [bigdata01-test bigdata02-test] bigdata01-test: no namenode to stop bigdata02-test: stopping namenode
程裕强
2022-05-06
649
0
logstash 6.x 收集syslog日志
node.js
1、logstash端 关闭logstash所在机器的rsyslog，释放514端口号 [root@node1 config]# systemctl stop rsyslog [root@node1 config]# systemctl status rsyslog ● rsyslog.service - System Logging Service Loaded: loaded (/usr/lib/systemd/system/rsyslog.service; enabled; vendor pre
程裕强
2022-05-06
752
0
BindException: Cannot assign requested address (Bind failed)解决办法
node.js
百度了BindException: Cannot assign requested address (Bind failed)，网友们提供的方法不能解决我的遇到的问题。 最后意外发现时我的配置文件zoo.cfg配置错误：
程裕强
2022-05-06
1.5K
0
HDFS块丢失
node.js
grep
大数据
（2）hdfs fsck / | egrep -v ‘^.+$’ | grep -v eplica
程裕强
2022-05-06
639
0
Linux防火墙端口开发与关闭（CentOS 7）
网络安全
node.js
比如node1节点已经启动了Tomcat，需要开发8080,8009,8005等端口
程裕强
2022-05-06
1.3K
0
ZooKeeper典型应用
zookeeper
node.js
分布式
hbase
TDSQL MySQL 版
参考了：https://www.jianshu.com/p/84ad63127cd1
程裕强
2022-05-06
399
0
ElasticSearch 6.x 学习笔记：24.Java API连接Elasticsearch
java
node.js
网络安全
http
Elasticsearch Service
https://www.elastic.co/guide/en/elasticsearch/client/java-api/current/transport-client.html
程裕强
2022-05-06
271
0
ElasticSearch 6.x 学习笔记：19.搜索高亮
lucene/solr
node.js
参照官方文档 https://www.elastic.co/guide/en/elasticsearch/reference/6.1/search-request-highlighting.html
程裕强
2022-05-06
427
0
ElasticSearch 6.x 学习笔记：3.Kibana插件
http
node.js
apache
Elasticsearch Service
注意，ElasticSearch版本是6.1.1，kibana的版本必须对应，所以，此处下载kibana-6.1.1-linux-x86_64.tar.gz
程裕强
2022-05-06
464
0
ElasticSearch 6.x 学习笔记：2.head插件
npm
Elasticsearch Service
grunt
node.js
ElasticSearch-head是一个H5编写的ElasticSearch集群操作和管理工具，可以对集群进行傻瓜式操作。
程裕强
2022-05-06
352
0
Hadoop基础教程-第9章 HA高可用（9.2 HDFS 高可用配置）
xml
node.js
大数据
面向对象编程
hadoop
因为前面我们已经配置启动了普通的Hadoop相关服务，需要先停止相关服务并清除数据。 （1）停止Hadoop服务 首先停止YARN
程裕强
2022-05-06
265
0
Hadoop基础教程-第9章 HA高可用（9.1 HDFS 高可用介绍）
hadoop
node.js
大数据
zookeeper
HDFS HA(High Availability)高可用配置官方参考网址 http://hadoop.apache.org/docs/r2.7.3/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html
程裕强
2022-05-06
826
0
Hadoop基础教程-第8章 Zookeeper（8.5 Zookeeper内存数据库）
sql
数据库
node.js
zookeeper
编程算法
ZooKeeper的数据模型是一棵树，而从使用角度看， Zookeeper就像一个内存数据库一样。在这个内存数据库中，存储了整棵树的内容，包括所有的节点路径、节点数据及其ACL信息等，Zookeeper会定时将这个数据存储到磁盘上。 Zookeeper内存数据库是通过ZKDatabase类实现， 内部属性包括dataTree,sessionsWithTimeouts,snapLog,commitedLog。
程裕强
2022-05-06
344
0
Hadoop基础教程-第8章 Zookeeper（8.4 Zookeeper集群模式）
zookeeper
node.js
bash
bash 指令
Running ZooKeeper in standalone mode is convenient for evaluation, some development, and testing. But in production, you should run ZooKeeper in replicated mode. 单机模式的ZooKeeper便于评估，开发和测试。但在生产中，我们应该以集群模式运行ZooKeeper。
程裕强
2022-05-06
210
0
Hadoop基础教程-第7章 MapReduce进阶（7.7 MapReduce 全排序）
node.js
mapreduce
大数据
MapReduce默认只是保证同一个分区内的Key是有序的，但是不保证全局有序。如果我们将所有的数据全部发送到一个Reduce，那么不就可以实现结果全局有序。所以前文7.6节二次排序已经实现了最终结果有序，也就是全排序。 MapReduce全排序的方法1: 每个map任务对自己的输入数据进行排序，但是无法做到全局排序，需要将数据传递到reduce，然后通过reduce进行一次总的排序，但是这样做的要求是只能有一个reduce任务来完成。
程裕强
2022-05-06
205
0
Hadoop基础教程-第7章 MapReduce进阶（7.6 MapReduce 二次排序）
node.js
mapreduce
linux
大数据
oracle
MapReduce框架对处理结果的输出会根据key值进行默认的排序，这个默认排序可以满足一部分需求，但是也是十分有限的。在我们实际的需求当中，往往有要对reduce输出结果进行二次排序的需求。所谓二次排序，先按第1个字段进行排序，然后对第1个字段相同的数据，再按第2个字段进行排序。
程裕强
2022-05-06
190
0
Hadoop基础教程-第7章 MapReduce进阶（7.5 MapReduce 连接）
node.js
mapreduce
大数据
连接操作，也就是常说的join操作，是数据分析时经常用到的操作。 比如有两份数据data1和data2，进行关键词连接是一个很通用的问题，如果数据量比较小，可以在内存中完成连接。如果数据量比较大，在内存进行连接操会发生内存溢出。MapReduce join就是用来解决大数据的连接问题。
程裕强
2022-05-06
169
0
Hadoop基础教程-第7章 MapReduce进阶（7.4 自定义Key类型）
node.js
大数据
mapreduce
原文地址：http://blog.csdn.net/chengyuqiang/article/details/73441493
程裕强
2022-05-06
211
0
Hadoop基础教程-第7章 MapReduce进阶（7.2 MapReduce工作机制）
mapreduce
yarn
大数据
node.js
jar
原文地址：http://blog.csdn.net/chengyuqiang/article/details/73382034
程裕强
2022-05-06
211
0
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪，探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档
