集群同步脚本编写和免密登陆配置

编写集群分发脚本xsync

1.scp（secure copy）安全拷贝

（1）scp定义：

scp可以实现服务器与服务器之间的数据拷贝。（from server1 to server2）

（2）基本语法

scp  -r $pdir/$fname   $user@hadoop$host:$pdir/$fname

命令  递归      要拷贝的文件路径/名称    目的用户@主机:目的路径/名称    注意：拷贝过来的配置文件别忘了source一下/etc/profile，。

2. rsync 远程同步工具

rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。

rsync和scp区别：用rsync做文件的复制要比scp的速度快，rsync只对差异文件做更新。scp是把所有文件都复制过去。

（1）基本语法

rsync -av $pdir/$fname  $user@hadoop$host:$pdir/$fname

命令  选项参数  要拷贝的文件路径/名称    目的用户@主机:目的路径/名称

选项参数说明

表2-2

3.集群分发脚本编写

说明：在/home/root/bin这个目录下存放的脚本，root用户可以在系统任何地方直接执行。

脚本实现

（a）在/home/root目录下创建bin目录，并在bin目录下ync创建文件，文件内容如下：

[root@hadoop102 ~]$ vi ync

在该文件中编写如下代码

#!/bin/bash

#1获取输入参数个数，如果没有参数，直接退出

pcount=$#

if ((pcount==0)); then

echo no args;

exit;

fi

#2获取文件名称

p1=$1

fname=`basename $p1`

echo fname=$fname

#3获取上级目录到绝对路径

pdir=`cd -P $(dirname $p1); pwd`

echo pdir=$pdir

#4获取当前用户名称

user=`whoami`

#5循环

for((host=103; host

echo ------------------- hadoop$host --------------

rsync -av $pdir/$fname $user@hadoop$host:$pdir

done

（b）修改脚本xsync具有执行权限

[root@hadoop102 bin]$ chmod 777ync

（c）调用脚本形式：ync文件名称

[root@hadoop102 bin]$ync/home/root/bin

注意：如果将ync放到/home/root/bin目录下仍然不能实现全局使用，可以将ync移动到/usr/local/bin目录下。

3.无密钥配置

（1）免密登录原理，

（2）生成公钥和私钥：

[root@hadoop102 .ssh]$ ssh-keygen -t rsa

然后敲（三个回车），就会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）

（3）将公钥拷贝到要免密登录的目标机器上

[root@hadoop102 .ssh]$ ssh-copy-id hadoop102

[root@hadoop102 .ssh]$ ssh-copy-id hadoop103

[root@hadoop102 .ssh]$ ssh-copy-id hadoop104

注意：

还需要在hadoop102上采用root账号，配置一下无密登录到hadoop102、hadoop103、hadoop104；

还需要在hadoop103上采用root账号配置一下无密登录到hadoop102、hadoop103、hadoop104服务器上。

3..ssh文件夹下（~/.ssh）的文件功能解释

表2-4