Jed的技术阶梯-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Jed的技术阶梯

专栏成员

220

文章

384121

阅读量

48

订阅数

012.DolphinScheduler案例实战

yarn node.js linux 大数据

需求是，使用spark程序读用户表，统计用户个数，保存到结果表user_count：

2021-02-04

2K0

003.Docker镜像制作之基于Dockerfile制作镜像

1. 制作带有sshd服务的CentOS6.9镜像 # 1.编写dockerfile，文件名必须是Dockerfile或者dockerfile # FROM: 指定基础镜像，两种语法 # FROM centos:6.9 # FROM imageId FROM 2199b8eb8390 # RUN: 进入容器后执行的命令，尽量少的使用新的RUN命令行，因为每次执行一次RUN，都会生成一个新的临时容器 # RUN有两种语法 # RUN command && command # RUN ["command","

2020-11-12

3.9K0

002.Docker镜像制作之基于容器制作镜像

centos linux lamp ssh

1. 制作带有sshd服务的CentOS6.9镜像 # 进入容器 [root@bdc01 ~]# docker container run -it centos:6.9 /bin/bash # 优化yum源 [root@caefeb6086c6 /]# yum install wget -y [root@caefeb6086c6 /]# mv /etc/yum.repos.d/* /tmp/ [root@caefeb6086c6 /]# wget -O /etc/yum.repos.d/CentOS-Ba

2020-11-12

3K0

007.基于CentOS7.8安装Ambari2.7+HDP3.1大数据平台

http yum centos linux 数据库

我这里创建了一个普通用户名为admin，并且具有sudo权限，4个节点都需要有这个用户。

2020-10-30

2.2K1

006.CM大数据平台实践之集群扩容

zookeeper 大数据 centos linux

将m162p133这台机器添加到大数据集群中，并重新规划大数据集群中各组件的角色。

2020-06-16

5160

011.Linux目录结构以及重要系统文件

作用：DNS(Domain Name System)配置文件，DNS主要负责将网站域名解析为对应的IP地址，从域名到IP的解析过程，称作A记录，即Address Record

2020-05-09

9940

009.使用netinst.iso方式安装Debian-10.3.0系统

ubuntu linux https 网络安全

Debian是精简的Linux发行版，有着干净的作业环境，安装步骤很简单，大部分情况下只要按<Enter>就可以。

2020-05-04

2.8K0

008.使用Kibana画图展示Nginx日志报表

nginx javascript node.js linux apache

1. 准备工作将${FILEBEAT_HOME}/kibana目录复制到其他目录，使用RPM安装的filebeat在/usr/share目录下 [root@node01 ~]# cp -a /usr/share/kibana /root/filebeat-kibana /root/filebeat-kibana目录下只留个3文件 filebeat-kibana/6/dashboard/Filebeat-nginx-logs.json filebeat-kibana/6/dashboard/Fi

2020-04-23

1.9K0

008.Linux文件目录管理命令基础

1. pwd：显示当前所在的位置 # 显示当前工作目录的绝对路径 [15:31:44 root@node00 tmp]# pwd /tmp # 如果当前目录是软链接目录，则显示软链接目录的物理路径 [15:35:54 root@node00 a]# pwd -P /tmp/a # 如果当前目录是软链接目录，还是显示逻辑路径(默认) [15:35:58 root@node00 a]# pwd -L /tmp/b/a # 使用PWD环境变量输出当前目录的绝对路径 [15:47:10 root@node00

2020-04-10

8450

007.Linux系统命令行入门

shutdown命令可以安全的关闭或者重启系统，并广播关机或者重启的消息给全部的终端

2020-04-10

1.4K0

001.企业级CentOS7.6操作系统的安装

linux centos windows tcp/ip 存储

在选择好系统镜像之后，如果选择安装程序光盘映像文件，会自动安装系统，虽然方便，但是会安装太多的服务和程序，并且会自动分区，所有我们选择稍后安装系统来手动的安装系统。

2020-03-25

1.3K0

Azkaban-3.x two-server 模式搭建

网站云数据库 SQL Server linux html 数据库

web-server和executor-server是两个单独的进程，但都运行在同一个机器上，调度任务只能分配到该机器上执行，元数据存储在MySQL中，MySQL可以在其他机器上。

2019-08-24

1.4K0

CentOS-7(64位minimal版)安装MySQL-5.7(64位glibc版)

云数据库 SQL Server 网络安全数据库 linux sql

下载地址 https://dev.mysql.com/downloads/mysql/5.7.html#downloads

2019-01-22

1.8K4

zookeeper-3.4.10的安装配置

zookeeper hadoop windows linux http

leader：能接收所有的读写请求，也可以处理所有的读写请求，而且整个集群中的所有写数据请求都是由leader进行处理 follower：能接收所有的读写请求，但是读数据请求自己处理，写数据请求转发给leader observer：跟follower的唯一的区别就是没有选举权和被选举权因为hadoop01、hadoop02和hadoop03具有选举权，所以它们的角色是变化的，当leader宕机，会重新选举leader，而hadoop04的角色是observer，所以它没有选举和被选举权，只负责处理请求要求：整个zookeeper集群中可以参与选举的节点的个数为奇数个，因为zookeeper的选举机制为半数机制，即超过一半的节点投票给某个节点，该节点就是新的leader

2018-09-13

1.7K0

Hadoop高可用(HA)集群搭建

hadoop windows linux jdk zookeeper

HA：High Available，高可用在Hadoop 2.0之前，在HDFS集群中NameNode存在单点故障 (SPOF：A Single Point of Failure) 对于只有一个NameNode的集群，如果NameNode机器出现故障(比如宕机或是软件、硬件升级)，那么整个集群将无法使用，直到NameNode重新启动

2018-09-13

4.3K0

Hadoop伪分布式集群搭建

hadoop 分布式 linux windows jdk

---- 软件准备一台Linux虚拟机我用的CentOS-6.6的一个虚拟机，主机名为repo 参考在Windows中安装一台Linux虚拟机该虚拟机中安装了JDK 参考在Linux中安装JDK 该虚拟机可以免秘钥登录自身参考配置各台虚拟机之间免秘钥登录 hadoop安装包下载地址：https://mirrors.aliyun.com/apache/hadoop/common/ 我用的hadoop2.6.5 ---- 1. 把hadoop安装包上传到服务器并解压 [root@r

2018-09-13

1K0

Hadoop完全分布式集群搭建

hadoop 分布式 windows linux jdk

集群中只有mapred-site.xml.template，可以从这个文件进行复制

2018-09-13

8950

配置各台虚拟机之间免秘钥登录

windows linux ssh 安全 shell

/root/.ssh目录原先不存在，使用ssh命令登录自身后就可以自动创建.ssh目录

2018-09-13

2K0

在Linux中安装JDK

linux jdk http oracle java

JDK安装包下载地址：http://www.oracle.com/technetwork/java/javase/archive-139210.html

2018-09-13

5K0

Hive多用户模式安装

hive hadoop 分布式云数据库 SQL Server linux

hadoop01-hadoop04：hadoop集群 hadoop01：MySQL服务器 hadoop02：Hive服务端 hadoop03-hadoop04：Hive客户端

2018-09-13

1.6K0

点击加载更多

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态