最近写了一个微服务项目,本地调试很麻烦,每次修改一部分都得把代码提交到仓库,再用Jenkins编译。整个流程感觉有点慢,想着改完代码执行一个脚本,直接编译并且将jar包发布到测试环境上。幸运的是win10已经支持ssh和scp命令了,所以我可以用scp命令来实现我的想法了,无图无真相
在linux系统中密码的保存是非常重要的,在企业中的WEB集群环境中,进行统一的版本更新和配置文件的同步免密登录是非常重要的。在自动化运维,统一管理都是离不开Linux的免密登录。
1.在新服务器上安装并搭建好gitlab2.手动+自动将旧服务器上的gitlab备份3.手动+自动将gitlab备份包scp到新服务器上4.手动+自动恢复新服务器上的gitlab备份包5.在新旧服务器上自动删除过期备份包
Ssh,scp自动登陆方法 ########################### A为本地主机(即用于控制其他主机的机器) ; B为远程主机(即被控制的机器Server), 假如ip为192.168.60.110; A和B的系统都是Linux 在A上运行命令: # ssh-keygen -t rsa (连续三次回车,即在本地生成了公钥和私钥,不设置密码) # ssh root@192.168.60.110 "mkdir .ssh; chmod 0700 .ssh" (需要输入密码) # scp ~/.ssh/id_rsa.pub root@192.168.60.110:.ssh/id_rsa.pub (需要输入密码) 在B上的命令: # touch /root/.ssh/authorized_keys2 (如果已经存在这个文件, 跳过这条) # cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys2 (将id_rsa.pub的内容追加到 authorized_keys2 中) 回到A机器: # ssh root@192.168.60.110 (不需要密码, 登录成功) 如果能保护好自己的私钥, 这种方法相对在shell上输入密码, 要安全一些 ############################################## 深入一点点: 从表面上简单的理解一下登录的过程, 首先 ssh-keygen -t rsa 命令生成了一个密钥和一个公钥, 而且密钥可以设置自己的密码,可以把密钥理解成一把钥匙, 公钥理解成这把钥匙对应的锁头,把锁头(公钥)放到想要控制的server上, 锁住server, 只有拥有钥匙(密钥)的人, 才能打开锁头, 进入server并控制,而对于拥有这把钥匙的人, 必需得知道钥匙本身的密码,才能使用这把钥匙 (除非这把钥匙没设置密码), 这样就可以防止钥匙被人配了(私钥被人复制) 当然, 这种例子只是方便理解罢了, 拥有root密码的人当然是不会被锁住的, 而且不一定只有一把锁(公钥), 但如果任何一把锁, 被人用其对应的钥匙(私钥)打开了, server就可以被那个人控制了 所以说, 只要你曾经知道server的root密码, 并将有root身份的公钥放到上面, 就可以用这个公钥对应的私钥"打开" server, 再以root的身分登录, 即使现在root密码已经更改! 如果想控制n个机器, 那就需要n对钥匙(密钥和公钥), ssh-keygen 命令可以随意更改钥匙对的名字, 比如: [root@wwy .ssh]# ssh-keygen -t rsa Generating public/private rsa key pair. Enter file in which to save the key (/root/.ssh/id_rsa): /root/.ssh/id_rsa_192.168.102.12 ...... 这样私钥和公钥的名字分别就是: id_rsa_192.168.102.12 和 id_rsa_192.168.102.12.pub 然后将 id_rsa_192.168.102.12.pub 文件的内容, 追加到sever的 ~/.ssh/authorized_keys2 文件中, 最后, 在本地用ssh命令的 -i 参数指定本地密钥, 并登录: # ssh -i /root/.ssh/id_rsa_192.168.102.12 192.168.102.12 如果密钥设置了密码, 就用密钥的密码登录, 没设密码, 就直接登录进去了 scp也是一样的 如: scp -i /root/.ssh/id_rsa./xxx 192.168.102.158:/home/wwy/bak
解决linux服务器间的数据、文件搬运和免密登录等问题; 从多种业务环境入手,以不同方式实现服务器间的文件传输;
由于公司的生产环境有很多台Linux的CentOS服务器, 为了方便机子(假设两台机子A,B)互相之间免密ssh, scp命令操作,配置如下
直接回车,会在~/.ssh/目录下生成私钥id_rsa和公钥 id_rsa.pub
tar 是 Linux 中最常用的 备份工具,此命令可以 把一系列文件 打包到 一个大文件中,也可以把一个 打包的大文件恢复成一系列文件 tar 的命令格式如下:
在 normal 模式下按下 / 进入查找模式,输入要查找的字符串并按下回车。Vim 会跳转到第一个匹配,按下 n 查找下一个,按下 N 查找上一个,vim 支持正则表达式查找。 全局替换语法如下:
上篇我们讲述了如何使用VMware安装CentOS系统,接下来就看如何安装我们最为熟悉的jdk吧!安装前先看看系统上有没有安装过jdk,输入java -version,如果查询出了其他版本的jdk版本,就先删除了,笔者这里使用jdk1.6。说开始就开始,下面开始说明安装步骤吧。
如果将来想采用ssh 主机名的方式来访问其余节点,请确保各个节点上的hosts文件下有对各个ip以及主机名的映射,可通过如下命令进行查看
find|grep|ssh|文件传输scp|sz|清屏|创建链接|查看端口占用情况|\ 管道|重定向|sed|统计代码行|md5sum|解压乱码问题|
3.性能最大化,redis开始持久化时,分叉出进程,由子进程完成持久化的工作 ,避免服务器进程执行I/O操作,启动效率高
传输时对数据进行加密,同时防止DNS欺骗和IP欺骗,安全可靠性高;另外,传输的数据是经过压缩的,这样可以加快传输速度;
@ 作者:达内 Python 教学部,吕泽 @ 编辑:博主,Discover304
Linux 是一种自由和开放源代码的类UNIX操作系统。该操作系统的内核由林纳斯·托瓦兹在1991年10月5日首次发布。在加上用户空间的应用程序之后,成为Linux操作系统。Linux也是自由软件和开放源代码软件发展中最著名的例子。 作为一个前端或许很少用到linux,但是作为一个有理想、有道德、有激情的前端,linux是必须要了解的一项技能。尤其是立志成为全端(什么都会一点,什么都不精通)的前端工程师,更是需要知道了。
语法:ssh-copy-id -i ~/.ssh/id_rsa.pub root@remote(远程ip)
由于Linux在服务器领域应用非常广泛,有很多开源和成熟的软件,目前大多数的应用后台都是部署在linux上的,熟悉Linux操作系统和相关命令,可以加深我们对软件的架构和运行机制的了解,也可以增加自己核心竞争力、拓宽自己的技能栈,从而获得更高的薪水。
检查不是由你运行的程序 难度:高级 应用程序:bash(译注:UNIX或者LINUX的shell) 想象下这个场景-你已经准备好了要和同事在办公室里对战一局快速的Crack Attack(译注:一款免费的OpenGL游戏,类似俄罗斯方块),不料却发现,当你正准备要击败你这个傲慢的下属时,方块却停止了-是什么让你的机器 变得这么慢?这肯定是因为其他的用户运用他们娴熟的经验来盗取你宝贵的CPU时间、服务器或者其他的诡异方式,真烦人! 好,让我们列举出系统中所有不是由你运行的程序! ps aux | grep
大家好呀!这里是码农后端。上一篇介绍了SSH服务搭建之YUM源配置与静态IP配置,本篇将介绍SSH服务搭建的软件安装、相关服务补充以及SSH免密登录的实现。
抄来的。。找不到原文链接了。。 A为本地主机(即用于控制其他主机的机器) ; B为远程主机(即被控制的机器Server), 假如ip为172.24.253.2 ; A和B的系统都是Linux
以前我的不喜欢用 Linux 系统,什么目录啊,文件啊,权限啊,都得命令操作,入门难度较大。但是一旦熟练起来,真不想再去用 windows 了。再加上 shell 脚本,那才叫如虎添翼啊,真的是见识到了什么才是性能,什么才是自动化。
本文配置可实现:集群服务器之间相互可以ssh免密登录。若只想从单一机器(如master)ssh免密登录其他机器(slave1、slave2),则只跟着操作到第二步即可。
例3:ls -ltr 查看当前目录详细列表,按时间顺序逆序排序,最近修改的文件在后面
/root/.ssh目录原先不存在,使用ssh命令登录自身后就可以自动创建.ssh目录
准备了四个服务器,IP为192.168.0.236、192.168.0.237、192.168.0.238、192.168.0.239,其中192.168.0.236作为主节点,其他3个作为从节点。具体版本信息如下:
1、查询端口占用情况:netstat -aon |findstr "8080"; 查看端口进程号;
ssh是记录你密码信息的, 没有登录过root (或是没有执行过ssh-keygen命令),是没有.ssh 文件夹的
我们知道如果要向远程服务器传输数据和操作必须输入用户名和密码远程登录服务器 ,或用FTP等协议,都需要权限控制。 然而如果是两台服务器间的软件需要通讯和数据传输,如hadoop集群中机器互访,是不是每次也要输入用户名和密码?那是不是很麻烦?下面介绍SSH来解决这个问题(不是JAVA中的SSH概念) SSH是一种网络协议,用于计算机之间的加密登录。 如果一个用户从本地计算机,使用SSH协议登录另一台远程计算机,我们就可以认为,这种登录是安全的,即使被中途截获,密码也不会泄露。 最早的时候,互联网
1、sagane@sagane-ThinkPad-Edge:~$ mii-tool,网络不通时可用此命令查看物理链接是否正常。 2、ssagane@sagane-ThinkPad-Edge:~$ ssh root@192.168.1.43 ,以root用户登录ip地址为192.168.1.43的机器,输入root用户的密码后,可远程控制此机器,甚至可以在windows环境下安装xshell等软件,模拟linux下终端远程控制服务器。 3、sagane@sagane-ThinkPad-Edge:~$ scp -r root@192.168.1.2:/home/sagane ./,以root用户登录ip地址为192.168.1.2的机器,将sagane文件夹下的内容拷贝到当前目录下。 4、root@sagane-ThinkPad-Edge:/home/sagane/advio# tailf /var/log/boot.log,实时显示boot.log中内容的变化。 5、用updatedb命令和locate命令查找文件,是最快的查找方式,此两个命令要结合使用。 6、find . -type d,在当前目录下查找目录文件 -user sagane ,查找用户名为sagane的文件 -name “ ” -mmin -10,搜索10分钟内更改过的文件,+10搜索10分钟前更改过的文件 -mtime -10,搜索10天前更改过的文件 通配符*:代表多个字符 通配符?:代表1个字符 7、用鼠标中间滑轮巧妙实现粘帖,这也是喜欢用桌面终端的其中一个原因。 8、sagane@sagane-ThinkPad-Edge:~$ less examples.desktop ,用less命令实现在终端下显示文件内容。 9、sagane@sagane-ThinkPad-Edge:~$ df -h 查看硬盘使用情况。 10、root@sagane-ThinkPad-Edge:/home# du -sh sagane/,查看sagane文件夹的大小。 11、vim命令: shift+n:向上查找,n:向下查找; :1,$s/a/b/gc 将文件中的a替换为b,加g后将对文件中出现的地方全部替换,不加g只替换第一行出现的地方,加c说明是交互式替换; d:剪切选中部分,dd剪切某行,y复制选中部分,yy复制某一行 p:在光标处的上面粘帖,P:在光标处的下面粘帖 多窗口显示 12、root@sagane-ThinkPad-Edge:/home/sagane# find . -name "test.c" -exec ls -lh {} ; 以上命令输入时不要漏下最后的分号,将find命令找到的test.c文件放入后面大括号,再次运行。 13、root@sagane-ThinkPad-Edge:/home/sagane# grep -r ai test.c ,在test.c文件中查找字符ai。 grep -E "^root" /etc/passwd 在passwd文件中,每行的行首搜索root字符 grep -E "bash$" /etc/passwd 行尾搜索bash字符 grep -E "r..t" /etc/passwd .代表1个字符 grep -E "r.*t" /etc/passwd .*代表任意个字符,同* grep -E "root|sagane" /etc/passwd 搜索root或sagane字符串 grep -E "roo[a-z,A-Z,0-9]" /etc/passwd 锁定一个字符的范围 grep -E "roo[^a-z,A-Z,0-9]" /etc/passwd ^是除了某些字符串 grep -E -v root /etc/passwd 除了root外的内容 14、> 重定向 >> 追加重定向 2> 错误重定向 2>> 错误追加重定向 15、root@sagane-ThinkPad-Edge:/home/sagane/advio# grep -v main race.c | grep ai 从race.c文件中搜索除main以外的内容,并将输出结果输出到后面指令再次查找有没有ai字符。 16、tty命令查看当前终端 17、压缩文件命令: gzip file gunzip file bzip2 file bunzip2 file 对目录的操作: tar cvf *.tar test 将test目录打包 xvf 解压包 tar tvf *.tar 显示压缩文件的内容 tar rvf *.tar test 将目录test追加到*.tar包里 tar xvf *.tar -C test 将*.tar 解压缩到test目录 tar zcvf *.tar.gz test 将test文件压缩成*.tar.gz文件 tar jcvf *.tar.gz
这个其实比上面的要简单,之前上大学时老师也讲过。一定要明白客户端和服务端时通过公钥和私钥实现认证登录的。一定要牢牢记住就是只靠这两个东西,没有其他的了。
虽然PHP是“世界上最好的语言。” 但是我还是喜欢JS。 凡是可以用Javascript来写的应用,最终都会用Javascript来写。 近些年Nodejs异常的火爆,因此有一些服务端也开始使用js来写了。作为前端开发工程师,nodejs也是必须要掌握的一项技能了。 最近在网上买了个云服务器,于是想搭个Node服务出来。
问题导读 1.hadoop3.x检测虚拟内存的情况下,可能会产生什么问题? 2.hadoop3.x中,下面各个配置的作用是什么? 3.dfs.blocksize可以使用哪些单位? hadoop
Flink可以运行在所有类unix环境中,例如:Linux,Mac OS 和Windows,一般企业中使用Flink基于的都是Linux环境,后期我们进行Flink搭建和其他框架整合也是基于linux环境,使用的是Centos7.6版本,JDK使用JDK8版本(Hive版本不支持JDK11,所以这里选择JDK8),本小节主要针对Flink集群使用到的基础环境进行配置,不再从零搭建Centos系统,另外对后续整合使用到的技术框架也一并进行搭建,如果你目前已经有对应的基础环境,可以忽略本小节,Linux及各个搭建组件使用版本如下表所示。
如上图 准备好该准备的食材(ps:其中的hadoop-3.1.2-src更改为hadoop-3.1.2
修改/etc/hostname文件,将几台电脑的主机名分别修改为前面设定的master、slave0等;
从Linux服务器上传或者下载文件到本地除了使用FTP外,还可以通过Linux命令来实现,Linux服务器与本地电脑之间传输文件的命令及使用方法:
cat ~/.ssh/id_dsa.pub >>~/.ssh/authorized_keys
①环境说明:两台Linux主机,host1:192.168.5.1,host2:192.168.5.10。
该命令一直按回车(Enter)即可,默认生成位置一般是:~/.ssh/ 如果用户是非root一般位置是:/home/你的当前用户名/.ssh/
scp [-1246BCpqrv] [-c cipher] [-F ssh_config] [-i identity_file] [-l limit] [-o ssh_option] [-P port] [-S program] [[user@]host1:]file1 [
第一章 linux之帮助命令 第二章 linux命令行快捷键 第三章 linux之防火墙 第四章 linux之服务开机自启 第五章 linux之关机与重启 第六章 linux之环境变量 第七章 linux之目录操作命令 第八章 linux之目录结构 第九章 linux之使用ssh连接被拒 第十章 linux之搜索命令 第十一章 linux之统计命令 第十二章 linux之网络命令 第十三章 linux之文件操作命令 第十四章 linux之文件系统命令 第十五章 linux之压缩解压缩 第十六章 linux之用户管理 第十七章 linux之权限管理命令 第十八章 linux之scp命令文件传输
Linux为我们提供了两个用于文件copy的命令,一个是cp,一个是scp,但是他们略有不同。 cp --- 主要是用于在同一台电脑上,在不同的目录之间来回copy文件 scp --- 主要是在不同的Linux系统之间来回copy文件 关于cp的具体用法: 命令基本格式: cp [OPTIONS] SOURCE DEST --- 从源路径copy文件到目的路径 cp [OPTIONS] SOURCE... DIRECTORY --- 将多个源文件copy到指定的目录(多个源文件用空格分隔) OPTI
linux的scp命令 linux 的 scp 命令 可以 在 linux 之间复制 文件 和 目录; ================== scp 命令 ================== scp 可以在 2个 linux 主机间复制文件; 命令基本格式:
linux之cp/scp命令+scp命令详解 名称:cp 使用权限:所有使用者 使用方式: cp [options] source dest cp [options] source... directory 说明:将一个档案拷贝至另一档案,或将数个档案拷贝至另一目录。 把计 -a 尽可能将档案状态、权限等资料都照原状予以复制。 -r 若 source 中含有目录名,则将目录下之档案亦皆依序拷贝至目的地。 -f 若目的地已经有相同档名的档案存在,则在复制前先予以删除再行复制。 范例: 将档案 aaa 复制(已
今天需要在两个服务器之间进行数据copy,但是居然忘了linux命令,于是这里记录下,加深记忆!
转载前:建议在使用scp前,使用key验证,来减少密码输入的麻烦~ Linux scp命令用于Linux之间复制文件和目录,具体如何使用这里好好介绍一下,从本地复制到远程、从远程复制到本地是两种使用方式。这里有具体举例:
领取专属 10元无门槛券
手把手带您无忧上云