首页
学习
活动
专区
工具
TVP
发布

Jed的技术阶梯

专栏作者
220
文章
368970
阅读量
48
订阅数
007.基于CentOS7.8安装Ambari2.7+HDP3.1大数据平台
我这里创建了一个普通用户名为admin,并且具有sudo权限,4个节点都需要有这个用户。
CoderJed
2020-10-30
2.1K1
021.Elasticsearch索引管理高级篇
在开发中,随着业务需求的迭代,较老的业务逻辑就要面临更新甚至是重构,而对于ES来说,为了适应新的业务逻辑,可能就要对原有的索引做一些修改,比如对某些字段做调整,甚至是重建索引,而做这些操作的时候,可能会对业务造成影响,甚至需要停机调整,由此,ES引入了索引别名来解决这些问题,索引别名就像一个快捷方式或是软链接,可以指向一个或多个索引,也可以给任意一个需要索引别名的API来使用,别名的应用为程序提供了极大的灵活性。
CoderJed
2020-07-16
7830
017.Elasticsearch搜索操作入门篇
1. 多种搜索方式 1.1 Query String Search:在请求URL中包括search的参数 # 语法 curl -X GET "ip:port/index_name/type_name/
CoderJed
2020-07-06
1.2K0
015.Elasticsearch Mapping介绍
1. mapping解析 1.1 mapping是什么 mapping,就是index的type的元数据,每个type都有一个自己的mapping,决定了这个type的数据类型,建立倒排索引的行为,还有进行搜索的行为,可以类比关系型数据库,ES给某个index的type设置mapping,就相当于给一张表定义各个字段的名称和数据类型 往一个不存在的index里面插入数据,es会自动建立该index,同时建立type以及对应的mapping mapping中就自动定义了每个field的数据类型 es可以进行d
CoderJed
2020-07-02
9940
012.Elasticsearch基础API入门以及term与match综合测试
当向一个不存在的index中添加document时,可以自动创建索引,也可以根据传入的数据自动创建mapping,ES也会自动对这些文档进行倒排索引
CoderJed
2020-06-19
6930
010.Debian系统基本操作
debian默认不允许使用root用户远程登录,需要修改/etc/ssh/sshd_config文件:
CoderJed
2020-05-04
1.7K0
009.ELK使用Redis做缓存收集Nginx日志
1. 流程说明 2. 配置过程 2.1 nginx配置 log_format json '{"time_local": "$time_local", '
CoderJed
2020-05-04
4890
005.ELK收集Nginx日志
ab工具用于批量发送HTTP请求到指定的URL,是一个压力测试工具,这里使用它来生成Nginx的日志
CoderJed
2020-04-24
5700
004.ELK-6.6.0安装部署
1. kibana安装 RPM rpm -ivh logstash-6.6.0.rpm # 配置文件/etc/kibana/kibana.yml,其余的保持默认即可 server.port: 5601 server.host: "10.0.0.100" # 本机IP server.name: "node01" # 主机名 elasticsearch.hosts: ["http://10.0.0.100:9200","http://10.0.0.101:9200","http://10.0.0.102:92
CoderJed
2020-04-24
3270
001.Nginx安装
nginx下载地址:http://nginx.org/en/download.html 本文使用:nginx-1.16.1 安装依赖软件 yum -y install gcc gcc-c++ pcre pcre-devel openssl openssl-devel zlib zlib-devel 安装nginx 解压进入nginx目录 tar -zxvf nginx-1.16.1.tar.gz 安装nginx [root@magic nginx-1.16.1]# ./configur
CoderJed
2020-03-25
4030
zookeeper-3.4.10的安装配置
leader:能接收所有的读写请求,也可以处理所有的读写请求,而且整个集群中的所有写数据请求都是由leader进行处理 follower:能接收所有的读写请求,但是读数据请求自己处理,写数据请求转发给leader observer:跟follower的唯一的区别就是没有选举权和被选举权 因为hadoop01、hadoop02和hadoop03具有选举权,所以它们的角色是变化的,当leader宕机,会重新选举leader,而hadoop04的角色是observer,所以它没有选举和被选举权,只负责处理请求 要求:整个zookeeper集群中可以参与选举的节点的个数为奇数个,因为zookeeper的选举机制为半数机制,即超过一半的节点投票给某个节点,该节点就是新的leader
CoderJed
2018-09-13
1.6K0
在Linux中安装JDK
JDK安装包 下载地址:http://www.oracle.com/technetwork/java/javase/archive-139210.html
CoderJed
2018-09-13
5K0
Hbase伪分布式集群搭建
---- 环境准备 一台Linux虚拟机 我用的CentOS-6.6的一个虚拟机,主机名为repo 参考在Windows中安装一台Linux虚拟机 hbase安装包 下载地址:https://mirrors.aliyun.com/apache/hbase/ 我用的hbase-1.2.6 ---- 1. 把hbase安装包上传到服务器并解压 [root@repo ~]# tar -zxvf hbase-1.2.6-bin.tar.gz -C /opt/ 2. 配置HBASE_HOME环境变量 [r
CoderJed
2018-09-13
7910
Spark伪分布式集群搭建
---- 软件准备 一台Linux虚拟机 我用的CentOS-6.6的一个虚拟机,主机名为repo 参考在Windows中安装一台Linux虚拟机 spark安装包 下载地址:https://mirrors.aliyun.com/apache/spark/ 我用的spark-2.2.0-bin-hadoop2.7.tgz 要根据自己机器中的hadoop版本选择对应的spark版本 ---- (1) 把安装包上传到服务器并解压 [root@repo soft]# tar -zxvf spark-2
CoderJed
2018-09-13
1.5K0
Kafka集群搭建
---- 环境准备 服务器集群 我用的CentOS-6.7版本的3个虚拟机,主机名为hadoop01、hadoop02、hadoop03,这3台虚拟机既是zookeeper集群,又是kafka集群(但在生产环境中,这两个集群一般搭建在不同的机架中),另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的) 关于虚拟机的安装可以参考以下两篇文章: 在Windows中安装一台Linux虚拟机 通过已有的虚拟机克隆四台虚拟机 Zookeeper集群 参考zookeeper-3.
CoderJed
2018-09-13
1.4K0
Confluent 入门
Confluent平台是一个可靠的,高性能的流处理平台,你可以通过这个平台组织和管理各式各样的数据源中的数据。
CoderJed
2018-09-13
6.3K0
Kafka 源码编译
进入 kafka 源码根目录下,执行gradle wrapper命令,下载 wrapper 包:
CoderJed
2018-09-13
3.2K0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档