前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >实用Shell脚本

实用Shell脚本

原创
作者头像
花落花相惜
发布2021-11-26 13:14:16
1.2K0
发布2021-11-26 13:14:16
举报
文章被收录于专栏:花落的技术专栏
1. 内存监控脚本
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
#memory use
代码语言:txt
复制
mem_war_file=/tmp/mem_war.txt
代码语言:txt
复制
mem_use=`free -m | grep Mem | awk '{print $3}'`
代码语言:txt
复制
mem_total=`free -m | grep Mem | awk '{print $2}'`
代码语言:txt
复制
mem_percent=$((mem_use*100/mem_total))
代码语言:txt
复制
# echo "$mem_percent"%
代码语言:txt
复制
if (($mem_percent > 80));then
代码语言:txt
复制
   echo "`date +%F-%H-%M` mem: ${mem_percent}%" >$mem_war_file
代码语言:txt
复制
   echo "`date +%F-%H-%M` mem: ${mem_percent}%" | mail -s "mem warning" root 
代码语言:txt
复制
fi
2. 检测网卡流量,并按规定格式记录在日志中
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
#######################################################
代码语言:txt
复制
#检测网卡流量,并按规定格式记录在日志中
代码语言:txt
复制
#规定一分钟记录一次
代码语言:txt
复制
#日志格式如下所示:
代码语言:txt
复制
#2021-07-08 18:55
代码语言:txt
复制
#eth0 input: 1234bps
代码语言:txt
复制
#eth0 output: 1235bps
代码语言:txt
复制
######################################################3
代码语言:txt
复制
while :
代码语言:txt
复制
do
代码语言:txt
复制
#设置语言为英文,保障输出结果是英文,否则会出现bug
代码语言:txt
复制
LANG=en
代码语言:txt
复制
logfile=/tmp/`date +%d`.log
代码语言:txt
复制
#将下面执行的命令结果输出重定向到logfile日志中
代码语言:txt
复制
exec >> $logfile
代码语言:txt
复制
date +"%F %H:%M"
代码语言:txt
复制
#sar命令统计的流量单位为kb/s,日志格式为bps,因此要*1000*8
代码语言:txt
复制
sar -n DEV 1 59|grep Average|grep eth0|awk '{print $2,"\t","input:","\t",$5*1000*8,"bps","\n",$2,"\t","output:","\t",$6*1000*8,"bps"}'
代码语言:txt
复制
echo "####################"
代码语言:txt
复制
#因为执行sar命令需要59秒,因此不需要sleep
代码语言:txt
复制
done
3. 监测Nginx访问日志502情况,并做相应动作

假设服务器为lnmp环境,近期访问经常出现502现象,且502错误在重启php-fpm服务后消失,因此编写监控脚本,一旦出现502,则自动重启php-

fpm服务。

代码语言:txt
复制
#场景:
代码语言:txt
复制
#1.访问日志文件的路径:/data/log/access.log
代码语言:txt
复制
#2.脚本死循环,每10秒检测一次,10秒的日志条数为300条,出现502的比例不低于10%(30条)则需要重启php-fpm服务
代码语言:txt
复制
#3.重启命令为:/etc/init.d/php-fpm restart
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
###########################################################
代码语言:txt
复制
#监测Nginx访问日志502情况,并做相应操作
代码语言:txt
复制
###########################################################
代码语言:txt
复制
log=/data/log/access.log
代码语言:txt
复制
N=30 #设定阈值
代码语言:txt
复制
while :
代码语言:txt
复制
do
代码语言:txt
复制
 #查看访问日志的最新300条,并统计502的次数
代码语言:txt
复制
    err=`tail -n 300 $log |grep -c '502" '`
代码语言:txt
复制
 if [ $err -ge $N ]
代码语言:txt
复制
 then
代码语言:txt
复制
 /etc/init.d/php-fpm restart 2> /dev/null
代码语言:txt
复制
 #设定60s延迟防止脚本bug导致无限重启php-fpm服务
代码语言:txt
复制
     sleep 60
代码语言:txt
复制
 fi
代码语言:txt
复制
 sleep 10
代码语言:txt
复制
done
4. 扫描主机端口状态
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
HOST=$1
代码语言:txt
复制
PORT="22 80 8080 3306"
代码语言:txt
复制
for PORT in $PORT; do
代码语言:txt
复制
    if echo &>/dev/null > /dev/tcp/$HOST/$PORT; then
代码语言:txt
复制
        echo "$PORT open"
代码语言:txt
复制
    else
代码语言:txt
复制
        echo "$PORT close"
代码语言:txt
复制
    fi
代码语言:txt
复制
done
5. 检测两台服务器某个目录下的文件一致性
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
#####################################
代码语言:txt
复制
#检测两台服务器指定目录下的文件一致性
代码语言:txt
复制
#####################################
代码语言:txt
复制
#通过对比两台服务器上文件的md5值,达到检测一致性的目的
代码语言:txt
复制
dir=/data/web
代码语言:txt
复制
b_ip=192.168.88.10
代码语言:txt
复制
#将指定目录下的文件全部遍历出来并作为md5sum命令的参数,进而得到所有文件的md5值,并写入到指定文件中
代码语言:txt
复制
find $dir -type f|xargs md5sum > /tmp/md5_a.txt
代码语言:txt
复制
ssh $b_ip "find $dir -type f|xargs md5sum > /tmp/md5_b.txt"
代码语言:txt
复制
scp $b_ip:/tmp/md5_b.txt /tmp
代码语言:txt
复制
#将文件名作为遍历对象进行一一比对
代码语言:txt
复制
for f in `awk '{print 2} /tmp/md5_a.txt'`
代码语言:txt
复制
do
代码语言:txt
复制
#以a机器为标准,当b机器不存在遍历对象中的文件时直接输出不存在的结果
代码语言:txt
复制
if grep -qw "$f" /tmp/md5_b.txt
代码语言:txt
复制
then
代码语言:txt
复制
md5_a=`grep -w "$f" /tmp/md5_a.txt|awk '{print 1}'`
代码语言:txt
复制
md5_b=`grep -w "$f" /tmp/md5_b.txt|awk '{print 1}'`
代码语言:txt
复制
#当文件存在时,如果md5值不一致则输出文件改变的结果
代码语言:txt
复制
if [ $md5_a != $md5_b ]
代码语言:txt
复制
then
代码语言:txt
复制
echo "$f changed."
代码语言:txt
复制
fi
代码语言:txt
复制
else
代码语言:txt
复制
echo "$f deleted."
代码语言:txt
复制
fi
代码语言:txt
复制
done
6. 定时清空文件内容,定时记录文件大小
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
################################################################
代码语言:txt
复制
#每小时执行一次脚本(任务计划),当时间为0点或12点时,将目标目录下的所有文件内容清空,但不删除文件,其他时间则只统计各个文件的大小,一个文件一行,输出到以时间和日期命名的文件中,需要考虑目标目录下二级、三级等子目录的文件
代码语言:txt
复制
################################################################
代码语言:txt
复制
logfile=/tmp/`date +%H-%F`.log
代码语言:txt
复制
n=`date +%H`
代码语言:txt
复制
if [ $n -eq 00 ] || [ $n -eq 12 ]
代码语言:txt
复制
then
代码语言:txt
复制
#通过for循环,以find命令作为遍历条件,将目标目录下的所有文件进行遍历并做相应操作
代码语言:txt
复制
for i in `find /data/log/ -type f`
代码语言:txt
复制
do
代码语言:txt
复制
true > $i
代码语言:txt
复制
done
代码语言:txt
复制
else
代码语言:txt
复制
for i in `find /data/log/ -type f`
代码语言:txt
复制
do
代码语言:txt
复制
du -sh $i >> $logfile
代码语言:txt
复制
done
代码语言:txt
复制
fi
7. 查看局域网内主机是否存活
代码语言:txt
复制
#!/usr/bin/bash
代码语言:txt
复制
# check host status
代码语言:txt
复制
for i in {1..254}
代码语言:txt
复制
do
代码语言:txt
复制
        {
代码语言:txt
复制
    ip=192.168.8.$i
代码语言:txt
复制
    ping -c 2 -W 1 $ip &>/dev/null
代码语言:txt
复制
    if [ $? -eq 0 ];then
代码语言:txt
复制
        echo "$ip is online" | tee -a /tmp/host_online.txt
代码语言:txt
复制
    else
代码语言:txt
复制
       # echo "$ip is offline" | tee -a /tmp/host_offline.txt
代码语言:txt
复制
       echo "$ip is offline" &>/dev/null
代码语言:txt
复制
    fi
代码语言:txt
复制
        }&
代码语言:txt
复制
done
代码语言:txt
复制
wait
8. 自动应答分发免密登录
代码语言:txt
复制
#!/usr/bin/bash
代码语言:txt
复制
# ssh keygen
代码语言:txt
复制
>ip_ok.txt
代码语言:txt
复制
>ip_false.txt
代码语言:txt
复制
user=root
代码语言:txt
复制
passwd=123456
代码语言:txt
复制
rpm -qa | grep expect &>/dev/null
代码语言:txt
复制
if [ $? -ne 0 ];then
代码语言:txt
复制
  echo "expect is not install"
代码语言:txt
复制
  yum -y install expect
代码语言:txt
复制
fi
代码语言:txt
复制
if [ ! -f ~/.ssh/id_rsa ];then
代码语言:txt
复制
  ssh-keygen -P "" -f ~/.ssh/id_rsa
代码语言:txt
复制
fi
代码语言:txt
复制
for i in {15..30}
代码语言:txt
复制
do
代码语言:txt
复制
  {
代码语言:txt
复制
  ip=192.168.1."$i"
代码语言:txt
复制
  ping -c 1 -W1 "$ip"
代码语言:txt
复制
  if [ $? -eq 0 ];then
代码语言:txt
复制
     echo "$ip" >> ip_ok.txt
代码语言:txt
复制
     /usr/bin/expect <<-EOF
代码语言:txt
复制
     spawn ssh-copy-id $user@$ip
代码语言:txt
复制
     expect {
代码语言:txt
复制
        "yes/no" { send "yes\r"; exp_continue }
代码语言:txt
复制
        "password:" { send "$passwd\r" };
代码语言:txt
复制
     }
代码语言:txt
复制
     expect eof
代码语言:txt
复制
        EOF
代码语言:txt
复制
  else
代码语言:txt
复制
    echo "$ip" >>ip_false.txt
代码语言:txt
复制
  fi
代码语言:txt
复制
  }&
代码语言:txt
复制
done
代码语言:txt
复制
wait
代码语言:txt
复制
echo "finish"
9. 代码上线脚本
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
# code online
代码语言:txt
复制
# author: ren
代码语言:txt
复制
PROJT_DIR=/usr/local/nginx/html
代码语言:txt
复制
OLD_DIR=/usr/local/nginx/html/web1
代码语言:txt
复制
PROJT=web1
代码语言:txt
复制
BACKUP_DIR=/data/backup
代码语言:txt
复制
DATA_CHMOD=www
代码语言:txt
复制
DATE=`date +%F`
代码语言:txt
复制
NEW_DIR=/data/web1
代码语言:txt
复制
# 关闭nginx
代码语言:txt
复制
function stop_nginx() {
代码语言:txt
复制
  /usr/bin/systemctl stop nginx
代码语言:txt
复制
  if [ $? -eq 0 ];then
代码语言:txt
复制
     echo "nginx is stopd"
代码语言:txt
复制
  else
代码语言:txt
复制
     echo "nginx is not stop please check..."
代码语言:txt
复制
     exit 1
代码语言:txt
复制
  fi
代码语言:txt
复制
}
代码语言:txt
复制
#2 备份原有数据
代码语言:txt
复制
function backup_data() {
代码语言:txt
复制
  if [ -d $BACKUP_DIR/$DATE'-'$PROJT ];then
代码语言:txt
复制
    echo "DIR $BACKUP_DIR/$DATE'-'$PROJT is exist"
代码语言:txt
复制
    exit 2
代码语言:txt
复制
  else
代码语言:txt
复制
    mv $OLD_DIR $BACKUP_DIR/$DATE'-'$PROJT
代码语言:txt
复制
  fi
代码语言:txt
复制
}
代码语言:txt
复制
# 3移动新的代码 项目目录  注:此代码目录需手动上传解压 
代码语言:txt
复制
function new_code() {
代码语言:txt
复制
  if [ -d $NEW_DIR ];then
代码语言:txt
复制
     mv $NEW_DIR $PROJT_DIR
代码语言:txt
复制
  else
代码语言:txt
复制
     echo "NEW_DIR is not exist"
代码语言:txt
复制
     exit 3
代码语言:txt
复制
  fi
代码语言:txt
复制
}
代码语言:txt
复制
# 4 修改权限
代码语言:txt
复制
function chmod_news() {
代码语言:txt
复制
  chown -R $DATA_CHMOD.$DATA_CHMOD $OLD_DIR
代码语言:txt
复制
}
代码语言:txt
复制
# 5 启动服务
代码语言:txt
复制
function start_nginx() {
代码语言:txt
复制
  /usr/bin/systemctl start nginx
代码语言:txt
复制
  if [ $? -eq 0 ];then
代码语言:txt
复制
    echo "nginx start ok"
代码语言:txt
复制
  else
代码语言:txt
复制
    echo "ngin is not start,please check..."
代码语言:txt
复制
  fi
代码语言:txt
复制
}
代码语言:txt
复制
stop_nginx
代码语言:txt
复制
backup_data
代码语言:txt
复制
new_code
代码语言:txt
复制
chmod_news
代码语言:txt
复制
start_nginx
10. 检测MySQL主从复制是否异常
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
user="root"
代码语言:txt
复制
password="123456"
代码语言:txt
复制
mycmd="mysql -u$user -p$password -h 192.168.1.88"
代码语言:txt
复制
function chkdb() {
代码语言:txt
复制
list=($($mycmd -e "show slave status \G"|egrep "Running|Behind"|awk -F: '{print $2}'))
代码语言:txt
复制
if [ ${list[0]} = "Yes" -a ${list[1]} = "Yes" -a ${list[2]} -lt 120 ]
代码语言:txt
复制
then echo "Mysql slave is ok"
代码语言:txt
复制
else echo "Mysql slave replation is filed"
代码语言:txt
复制
fi
代码语言:txt
复制
}
代码语言:txt
复制
function main() {
代码语言:txt
复制
while true
代码语言:txt
复制
do chkdb
代码语言:txt
复制
   sleep 3
代码语言:txt
复制
done
代码语言:txt
复制
}
代码语言:txt
复制
main
11. MySQL数据库备份脚本(mysqldump)
代码语言:txt
复制
#!/bin/bash
代码语言:txt
复制
#删除15天以前备份
代码语言:txt
复制
source /etc/profile           #加载系统环境变量
代码语言:txt
复制
source ~/.bash_profile    #加载用户环境变量
代码语言:txt
复制
set -o nounset             #引用未初始化变量时退出
代码语言:txt
复制
#set -o errexit             #执行shell命令遇到错误时退出
代码语言:txt
复制
user="root"
代码语言:txt
复制
password="123456"
代码语言:txt
复制
host="localhost"
代码语言:txt
复制
port="3306"
代码语言:txt
复制
#需备份的数据库,数组
代码语言:txt
复制
db=("test")
代码语言:txt
复制
#备份时加锁方式,
代码语言:txt
复制
#MyISAM为锁表--lock-all-tables,
代码语言:txt
复制
#InnoDB为锁行--single-transaction
代码语言:txt
复制
lock="--single-transaction"
代码语言:txt
复制
mysql_path="/usr/local/mysql"
代码语言:txt
复制
backup_path="${mysql_path}/backup"
代码语言:txt
复制
date=$(date +%Y-%m-%d_%H-%M-%S)
代码语言:txt
复制
day=15
代码语言:txt
复制
backup_log="${mysql_path}/backup.log"
代码语言:txt
复制
#建立备份目录
代码语言:txt
复制
if [ ! -e $backup_path ];then
代码语言:txt
复制
    mkdir -p $backup_path
代码语言:txt
复制
fi
代码语言:txt
复制
#删除以前备份
代码语言:txt
复制
find $backup_path -type f -mtime +$day -exec rm -rf {} \; > /dev/null 2>&1
代码语言:txt
复制
echo "开始备份数据库:${db[*]}"
代码语言:txt
复制
#备份并压缩
代码语言:txt
复制
backup_sql(){
代码语言:txt
复制
    dbname=$1
代码语言:txt
复制
    backup_name="${dbname}_${date}.sql"
代码语言:txt
复制
    #-R备份存储过程,函数,触发器
代码语言:txt
复制
    mysqldump -h $host -P $port -u $user -p$password $lock --default-character-set=utf8 --flush-logs -R $dbname > $backup_path/$backup_name    
代码语言:txt
复制
    if [[ $? == 0 ]];then
代码语言:txt
复制
        cd $backup_path
代码语言:txt
复制
        tar zcpvf $backup_name.tar.gz $backup_name
代码语言:txt
复制
        size=$(du $backup_name.tar.gz -sh | awk '{print $1}')
代码语言:txt
复制
        rm -rf $backup_name
代码语言:txt
复制
        echo "$date 备份 $dbname($size) 成功 "
代码语言:txt
复制
    else
代码语言:txt
复制
        cd $backup_path
代码语言:txt
复制
        rm -rf $backup_name
代码语言:txt
复制
        echo "$date 备份 $dbname 失败 "
代码语言:txt
复制
    fi
代码语言:txt
复制
}
代码语言:txt
复制
#循环备份
代码语言:txt
复制
length=${#db[@]}
代码语言:txt
复制
for (( i = 0; i < $length; i++ )); do
代码语言:txt
复制
        backup_sql ${db[$i]} >> $backup_log 2>&1
代码语言:txt
复制
done
代码语言:txt
复制
echo "备份结束,结果查看 $backup_log"
代码语言:txt
复制
du $backup_path/*$date* -sh | awk '{print "文件:" $2 ",大小:" $1}'

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
作者已关闭评论
0 条评论
热度
最新
推荐阅读
目录
  • 1. 内存监控脚本
  • 2. 检测网卡流量,并按规定格式记录在日志中
  • 3. 监测Nginx访问日志502情况,并做相应动作
  • 4. 扫描主机端口状态
  • 5. 检测两台服务器某个目录下的文件一致性
  • 6. 定时清空文件内容,定时记录文件大小
  • 7. 查看局域网内主机是否存活
  • 8. 自动应答分发免密登录
  • 9. 代码上线脚本
  • 10. 检测MySQL主从复制是否异常
  • 11. MySQL数据库备份脚本(mysqldump)
相关产品与服务
云数据库 SQL Server
腾讯云数据库 SQL Server (TencentDB for SQL Server)是业界最常用的商用数据库之一,对基于 Windows 架构的应用程序具有完美的支持。TencentDB for SQL Server 拥有微软正版授权,可持续为用户提供最新的功能,避免未授权使用软件的风险。具有即开即用、稳定可靠、安全运行、弹性扩缩等特点。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档