linux中Shell有哪些使用示例

79次阅读
没有评论

共计 14182 个字符,预计需要花费 36 分钟才能阅读完成。

丸趣 TV 小编给大家分享一下 linux 中 Shell 有哪些使用示例,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

Shell 脚本是帮助程序员和系统管理员完成费时费力的枯燥工作的利器,是与计算机交互并管理文件和系统操作的有效方式。区区几行代码,就可以让计算机接近按照你的意图行事。

检测两台服务器指定目录下的文件一致性  

#!/bin/bash ##################################### #检测两台服务器指定目录下的文件一致性  ##################################### #通过对比两台服务器上文件的 md5 值,达到检测一致性的目的  dir=/data/web b_ip=192.168.88.10 # 将指定目录下的文件全部遍历出来并作为 md5sum 命令的参数,进而得到所有文件的 md5 值,并写入到指定文件中  find $dir -type f|xargs md5sum   /tmp/md5_a.txt ssh $b_ip  find $dir -type f|xargs md5sum   /tmp/md5_b.txt  scp $b_ip:/tmp/md5_b.txt /tmp # 将文件名作为遍历对象进行一一比对  for f in `awk  {print 2} /tmp/md5_a.txt ` do # 以 a 机器为标准,当 b 机器不存在遍历对象中的文件时直接输出不存在的结果  if grep -qw  $f  /tmp/md5_b.txt then md5_a=`grep -w  $f  /tmp/md5_a.txt|awk  {print 1} ` md5_b=`grep -w  $f  /tmp/md5_b.txt|awk  {print 1} ` # 当文件存在时,如果 md5 值不一致则输出文件改变的结果  if [ $md5_a != $md5_b ] then echo  $f changed.  fi else echo  $f deleted.  fi done

定时清空文件内容,定时记录文件大小  

#!/bin/bash ################################################################ #每小时执行一次脚本(任务计划),当时间为 0 点或 12 点时,将目标目录下的所有文件内  # 容清空,但不删除文件,其他时间则只统计各个文件的大小,一个文件一行,输出到以时 #间和日期命名的文件中,需要考虑目标目录下二级、三级等子目录的文件  ################################################################ logfile=/tmp/`date +%H-%F`.log n=`date +%H` if [ $n -eq 00 ] || [ $n -eq 12 ] then # 通过 for 循环,以 find 命令作为遍历条件,将目标目录下的所有文件进行遍历并做相应操作  for i in `find /data/log/ -type f` do true   $i done else for i in `find /data/log/ -type f` do du -sh $i   $logfile done fi

检测网卡流量,并按规定格式记录在日志中  

#!/bin/bash ####################################################### #检测网卡流量,并按规定格式记录在日志中  #规定一分钟记录一次  #日志格式如下所示: #2019-08-12 20:40 #ens33 input: 1234bps #ens33 output: 1235bps ######################################################3 while : do #设置语言为英文,保障输出结果是英文,否则会出现 bug LANG=en logfile=/tmp/`date +%d`.log # 将下面执行的命令结果输出重定向到 logfile 日志中  exec   $logfile date + %F %H:%M  #sar 命令统计的流量单位为 kb/s,日志格式为 bps,因此要 *1000*8 sar -n DEV 1 59|grep Average|grep ens33|awk  {print $2, \t , input: , \t ,$5*1000*8, bps , \n ,$2, \t , output: , \t ,$6*1000*8, bps}  echo  ####################  # 因为执行 sar 命令需要 59 秒,因此不需要 sleep done

计算文档每行出现的数字个数,并计算整个文档的数字总数  

#!/bin/bash ######################################################### #计算文档每行出现的数字个数,并计算整个文档的数字总数  ######################################################## # 使用 awk 只输出文档行数(截取第一段) n=`wc -l a.txt|awk  {print $1} ` sum=0 #文档中每一行可能存在空格,因此不能直接用文档内容进行遍历  for i in `seq 1 $n` do # 输出的行用变量表示时,需要用双引号  line=`sed -n  $i p a.txt` #wc - L 选项,统计最长行的长度  n_n=`echo $line|sed s /[^0-9]// g|wc -L` echo $n_n sum=$[$sum+$n_n] done echo  sum:$sum

杀死所有脚本  

#!/bin/bash ################################################################ #有一些脚本加入到了 cron 之中,存在脚本尚未运行完毕又有新任务需要执行的情况, # 导致系统负载升高,因此可通过编写脚本,筛选出影响负载的进程一次性全部杀死。 ################################################################ ps aux|grep  指定进程名 |grep -v grep|awk  {print $2} |xargs kill -9

从 FTP 服务器下载文件  

#!/bin/bash if [ $# -ne 1 ]; then echo  Usage: $0 filename  fi dir=$(dirname $1) file=$(basename $1) ftp -n -v   EOF # -n  自动登录  open 192.168.1.10 # ftp 服务器  user admin password binary #  设置 ftp 传输模式为二进制,避免 MD5 值不同或.tar.gz 压缩包格式错误  cd $dir get  $file  EOF

连续输入 5 个 100 以内的数字,统计和、最小和最大  

#!/bin/bash COUNT=1 SUM=0 MIN=0 MAX=100 while [ $COUNT -le 5 ]; do read -p  请输入 1 -10 个整数: INT if [[ ! $INT =~ ^[0-9]+$ ]]; then echo  输入必须是整数! exit 1 elif [[ $INT -gt 100 ]]; then echo  输入必须是 100 以内! exit 1 fi SUM=$(($SUM+$INT)) [ $MIN -lt $INT ]   MIN=$INT [ $MAX -gt $INT ]   MAX=$INT let COUNT++ done echo  SUM: $SUM  echo  MIN: $MIN  echo  MAX: $MAX

用户猜数字  

#!/bin/bash #  脚本生成一个  100  以内的随机数, 提示用户猜数字, 根据用户的输入, 提示用户猜对了,#  猜小了或猜大了, 直至用户猜对脚本结束。# RANDOM  为系统自带的系统变量, 值为  0‐32767 的随机数 #  使用取余算法将随机数变为  1‐100  的随机数 num=$[RANDOM%100+1]echo  $num  #  使用  read  提示用户猜数字 #  使用  if  判断用户猜数字的大小关系:‐eq(等于),‐ne(不等于),‐gt(大于),‐ge(大于等于),# ‐lt(小于),‐le(小于等于)while :do read -p  计算机生成了一个  1‐100  的随机数, 你猜:   cai if [ $cai -eq $num ] then echo  恭喜, 猜对了  exit elif [ $cai -gt $num ] then echo  Oops, 猜大了  else echo  Oops, 猜小了  fidone

监测 Nginx 访问日志 502 情况,并做相应动作

假设服务器环境为 lnmp,近期访问经常出现 502 现象,且 502 错误在重启 php-fpm 服务后消失,因此需要编写监控脚本,一旦出现 502,则自动重启 php-fpm 服务。

#场景: #1. 访问日志文件的路径:/data/log/access.log #2. 脚本死循环,每 10 秒检测一次,10 秒的日志条数为 300 条,出现 502 的比例不低于 10%(30 条)则需要重启 php-fpm 服务  #3. 重启命令为:/etc/init.d/php-fpm restart #!/bin/bash ########################################################### #监测 Nginx 访问日志 502 情况,并做相应动作  ########################################################### log=/data/log/access.log N=30 #设定阈值  while : do # 查看访问日志的最新 300 条,并统计 502 的次数  err=`tail -n 300 $log |grep -c  502   ` if [ $err -ge $N ] then /etc/init.d/php-fpm restart 2  /dev/null # 设定 60s 延迟防止脚本 bug 导致无限重启 php-fpm 服务  sleep 60 fi sleep 10 done

将结果分别赋值给变量

应用场景:希望将执行结果或者位置参数赋值给变量,以便后续使用。

方法 1:

for i in $(echo  4 5 6  do eval a$i=$i done echo $a4 $a5 $a6

方法 2:将位置参数 192.168.1.1{1,2}拆分为到每个变量

num=0 for i in $(eval echo $*);do #eval 将 {1,2} 分解为 1  2 let num+=1 eval node${num}= $i  done echo $node1 $node2 $node3 # bash a.sh 192.168.1.1{1,2} 192.168.1.11 192.168.1.12

方法 3:

arr=(4 5 6) INDEX1=$(echo ${arr[0]}) INDEX2=$(echo ${arr[1]}) INDEX3=$(echo ${arr[2]})

批量修改文件名

示例:

# touch article_{1..3}.html # ls article_1.html article_2.html article_3.html

目的:把 article 改为 bbs

方法 1:

for file in $(ls *html); do mv $file bbs_${file#*_} # mv $file $(echo $file |sed -r  s/.*(_.*)/bbs\1/ ) # mv $file $(echo $file |echo bbs_$(cut -d_ -f2) done

方法 2:

for file in $(find . -maxdepth 1 -name  *html  do mv $file bbs_${file#*_} done

方法 3:

# rename article bbs *.html

把一个文档前五行中包含字母的行删掉,同时删除 6 到 10 行包含的所有字母

1)准备测试文件,文件名为 2.txt

第 1 行 1234567 不包含字母   第 2 行 56789BBBBBB  第 3 行 67890CCCCCCCC  第 4 行 78asdfDDDDDDDDD  第 5 行 123456EEEEEEEE  第 6 行 1234567ASDF  第 7 行 56789ASDF  第 8 行 67890ASDF  第 9 行 78asdfADSF  第 10 行 123456AAAA  第 11 行 67890ASDF  第 12 行 78asdfADSF  第 13 行 123456AAAA

2)脚本如下:

#!/bin/bash ############################################################## # 把一个文档前五行中包含字母的行删掉,同时删除 6 到 10 行包含的所有字母  ############################################################## sed -n  1,5 p 2.txt |sed  /[a-zA-Z]/ d sed -n  6,10 p 2.txt |sed s /[a-zA-Z]// g sed -n  11,$ p 2.txt # 最终结果只是在屏幕上打印结果,如果想直接更改文件,可将输出结果写入临时文件中,再替换 2.txt 或者使用 - i 选项

统计当前目录中以.html 结尾的文件总大

方法 1:

# find . -name  *.html  -exec du -k {} \; |awk  {sum+=$1}END{print sum}

方法 2:

for size in $(ls -l *.html |awk  {print $5}  do sum=$(($sum+$size)) done echo $sum

扫描主机端口状态  

#!/bin/bash HOST=$1 PORT= 22 25 80 8080  for PORT in $PORT; do if echo  /dev/null   /dev/tcp/$HOST/$PORT; then echo  $PORT open  else echo  $PORT close  fi done

用 shell 打印示例语句中字母数小于 6 的单词  

# 示例语句: #Bash also interprets a number of multi-character options. #!/bin/bash ############################################################## #shell 打印示例语句中字母数小于 6 的单词  ############################################################## for s in Bash also interprets a number of multi-character options. do n=`echo $s|wc -c` if [ $n -lt 6 ] then echo $s fi done

输入数字运行相应命令  

#!/bin/bash ############################################################## # 输入数字运行相应命令  ############################################################## echo  *cmd menu* 1-date 2-ls 3-who 4-pwd 0-exit   while : do # 捕获用户键入值  read -p  please input number :  n n1=`echo $n|sed s /[0-9]// g` # 空输入检测  if [ -z  $n  ] then continue fi # 非数字输入检测  if [ -n  $n1  ] then exit 0 fi break done case $n in 1) date ;; 2) ls ;; 3) who ;; 4) pwd ;; 0) break ;; # 输入数字非 1 - 4 的提示  *) echo  please input number is [1-4]  esac

Expect 实现 SSH 免交互执行命令

Expect 是一个自动交互式应用程序的工具,如 telnet,ftp,passwd 等。

需先安装 expect 软件包。

方法 1:EOF 标准输出作为 expect 标准输入

#!/bin/bash USER=root PASS=123.com IP=192.168.1.120 expect   EOF set timeout 30 spawn ssh $USER@$IP expect {  (yes/no)  {send  yes\r  exp_continue}  password:  {send  $PASS\r} } expect  $USER@*  {send  $1\r} expect  $USER@*  {send  exit\r} expect eof EOF

方法 2:

#!/bin/bash USER=root PASS=123.com IP=192.168.1.120 expect -c   spawn ssh $USER@$IP expect { \ (yes/no)\  {send \ yes\r\  exp_continue} \ password:\  {send \ $PASS\r\  exp_continue} \ $USER@*\  {send \ df -h\r exit\r\  exp_continue} }

方法 3:将 expect 脚本独立出来

登录脚本:

# cat login.exp #!/usr/bin/expect set ip [lindex $argv 0] set user [lindex $argv 1] set passwd [lindex $argv 2] set cmd [lindex $argv 3] if { $argc != 4 } { puts  Usage: expect login.exp ip user passwd  exit 1 } set timeout 30 spawn ssh $user@$ip expect {  (yes/no)  {send  yes\r  exp_continue}  password:  {send  $passwd\r} } expect  $user@*  {send  $cmd\r} expect  $user@*  {send  exit\r} expect eof

执行命令脚本:写个循环可以批量操作多台服务器

#!/bin/bash HOST_INFO=user_info.txt for ip in $(awk  {print $1}  $HOST_INFO) do user=$(awk -v I= $ip   I==$1{print $2}  $HOST_INFO) pass=$(awk -v I= $ip   I==$1{print $3}  $HOST_INFO) expect login.exp $ip $user $pass $1 done

Linux 主机 SSH 链接信息:

# cat user_info.txt 192.168.1.120 root 123456

创建 10 个用户,并分别设置密码,密码要求 10 位且包含大小写字母以及数字,最后需要把每个用户的密码存在指定文件中  

#!/bin/bash ############################################################## #创建 10 个用户,并分别设置密码,密码要求 10 位且包含大小写字母以及数字  #最后需要把每个用户的密码存在指定文件中  #前提条件:安装 mkpasswd 命令  ############################################################## #生成 10 个用户的序列(00-09) for u in `seq -w 0 09` do #创建用户  useradd user_$u #生成密码  p=`mkpasswd -s 0 -l 10` #从标准输入中读取密码进行修改(不安全) echo $p|passwd --stdin user_$u # 常规修改密码  echo -e  $p\n$p |passwd user_$u # 将创建的用户及对应的密码记录到日志文件中  echo  user_$u $p    /tmp/userpassword done

监控 httpd 的进程数,根据监控情况做相应处理  

#!/bin/bash ############################################################################################################################### #需求: #1. 每隔 10s 监控 httpd 的进程数,若进程数大于等于 500,则自动重启 Apache 服务,并检测服务是否重启成功  #2. 若未成功则需要再次启动,若重启 5 次依旧没有成功,则向管理员发送告警邮件,并退出检测  #3. 如果启动成功,则等待 1 分钟后再次检测 httpd 进程数,若进程数正常,则恢复正常检测(10s 一次),否则放弃重启并向管理员发送告警邮件,并退出检测  ############################################################################################################################### #计数器函数  check_service() { j=0 for i in `seq 1 5` do # 重启 Apache 的命令  /usr/local/apache2/bin/apachectl restart 2  /var/log/httpderr.log #判断服务是否重启成功  if [ $? -eq 0 ] then break else j=$[$j+1] fi #判断服务是否已尝试重启 5 次  if [ $j -eq 5 ] then mail.py exit fi done } while : do n=`pgrep -l httpd|wc -l` #判断 httpd 服务进程数是否超过 500 if [ $n -gt 500 ] then /usr/local/apache2/bin/apachectl restart if [ $? -ne 0 ] then check_service else sleep 60 n2=`pgrep -l httpd|wc -l` #判断重启后是否依旧超过 500 if [ $n2 -gt 500 ] then mail.py exit fi fi fi # 每隔 10s 检测一次  sleep 10 done

批量修改服务器用户密码

Linux 主机 SSH 连接信息:旧密码

# cat old_pass.txt 192.168.18.217 root 123456 22 192.168.18.218 root 123456 22

内容格式:IP User Password  PortSSH

远程修改密码脚本:新密码随机生成

https://www.linuxprobe.com/books

#!/bin/bash OLD_INFO=old_pass.txt NEW_INFO=new_pass.txt for IP in $(awk  /^[^#]/{print $1}  $OLD_INFO); do USER=$(awk -v I=$IP  I==$1{print $2}  $OLD_INFO) PASS=$(awk -v I=$IP  I==$1{print $3}  $OLD_INFO) PORT=$(awk -v I=$IP  I==$1{print $4}  $OLD_INFO) NEW_PASS=$(mkpasswd -l 8) #  随机密码  echo  $IP $USER $NEW_PASS $PORT    $NEW_INFO expect -c   spawn ssh -p$PORT $USER@$IP set timeout 2 expect { \ (yes/no)\  {send \ yes\r\ exp_continue} \ password:\  {send \ $PASS\r\ exp_continue} \ $USER@*\  {send \ echo \ $NEW_PASS\  |passwd --stdin $USER\r exit\r\ exp_continue} }  done

生成新密码文件:

192.168.18.217 root n8wX3mU% 22 192.168.18.218 root c87;ZnnL 22

iptables 自动屏蔽访问网站频繁的 IP

场景:恶意访问, 安全防范

1)屏蔽每分钟访问超过 200 的 IP

方法 1:根据访问日志(Nginx 为例)

#!/bin/bash DATE=$(date +%d/%b/%Y:%H:%M) ABNORMAL_IP=$(tail -n5000 access.log |grep $DATE |awk  {a[$1]++}END{for(i in a)if(a[i] 100)print i} ) # 先 tail 防止文件过大,读取慢,数字可调整每分钟最大的访问量。awk 不能直接过滤日志,因为包含特殊字符。 for IP in $ABNORMAL_IP; do if [ $(iptables -vnL |grep -c  $IP) -eq 0 ]; then iptables -I INPUT -s $IP -j DROP fi done

方法 2:通过 TCP 建立的连接

#!/bin/bash ABNORMAL_IP=$(netstat -an |awk  $4~/:80$/   $6~/ESTABLISHED/{gsub(/:[0-9]+/, ,$5);{a[$5]++}}END{for(i in a)if(a[i] 100)print i} ) #gsub 是将第五列(客户端 IP)的冒号和端口去掉  for IP in $ABNORMAL_IP; do if [ $(iptables -vnL |grep -c  $IP) -eq 0 ]; then iptables -I INPUT -s $IP -j DROP fi done

2)屏蔽每分钟 SSH 尝试登录超过 10 次的 IP

方法 1:通过 lastb 获取登录状态:

#!/bin/bash DATE=$(date + %a %b %e %H:%M) # 星期月天时分  %e 单数字时显示 7,而 %d 显示 07 ABNORMAL_IP=$(lastb |grep  $DATE  |awk  {a[$3]++}END{for(i in a)if(a[i] 10)print i} ) for IP in $ABNORMAL_IP; do if [ $(iptables -vnL |grep -c  $IP) -eq 0 ]; then iptables -I INPUT -s $IP -j DROP fi done

方法 2:通过日志获取登录状态

#!/bin/bash DATE=$(date + %b %d %H) ABNORMAL_IP= $(tail -n10000 /var/log/auth.log |grep  $DATE  |awk  /Failed/{a[$(NF-3)]++}END{for(i in a)if(a[i] 5)print i} )  for IP in $ABNORMAL_IP; do if [ $(iptables -vnL |grep -c  $IP) -eq 0 ]; then iptables -A INPUT -s $IP -j DROP echo  $(date + %F %T) - iptables -A INPUT -s $IP -j DROP   ~/ssh-login-limit.log fi done

根据 web 访问日志,封禁请求量异常的 IP,如 IP 在半小时后恢复正常,则解除封禁  

#!/bin/bash #################################################################################### #根据 web 访问日志,封禁请求量异常的 IP,如 IP 在半小时后恢复正常,则解除封禁  #################################################################################### logfile=/data/log/access.log # 显示一分钟前的小时和分钟  d1=`date -d  -1 minute  +%H%M` d2=`date +%M` ipt=/sbin/iptables ips=/tmp/ips.txt block() { # 将一分钟前的日志全部过滤出来并提取 IP 以及统计访问次数  grep  $d1:  $logfile|awk  {print $1} |sort -n|uniq -c|sort -n   $ips # 利用 for 循环将次数超过 100 的 IP 依次遍历出来并予以封禁  for i in `awk  $1 100 {print $2}  $ips` do $ipt -I INPUT -p tcp --dport 80 -s $i -j REJECT echo  `date +%F-%T` $i    /tmp/badip.log done } unblock() { # 将封禁后所产生的 pkts 数量小于 10 的 IP 依次遍历予以解封  for a in `$ipt -nvL INPUT --line-numbers |grep  0.0.0.0/0 |awk  $2 10 {print $1} |sort -nr` do $ipt -D INPUT $a done $ipt -Z } # 当时间在 00 分以及 30 分时执行解封函数  if [ $d2 -eq  00  ] || [ $d2 -eq  30  ] then # 要先解再封,因为刚刚封禁时产生的 pkts 数量很少  unblock block else block fi

判断用户输入的是否为 IP 地址

方法 1:

#!/bin/bash function check_ip(){ IP=$1 VALID_CHECK=$(echo $IP|awk -F.  $1  =255 $2 =255 $3 =255 $4 =255{print  yes} ) if echo $IP|grep -E  ^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$ /dev/null; then if [ $VALID_CHECK ==  yes  ]; then echo  $IP available.  else echo  $IP not available!  fi else echo  Format error!  fi } check_ip 192.168.1.1 check_ip 256.1.1.1

方法 2:

#!/bin/bash function check_ip(){ IP=$1 if [[ $IP =~ ^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$ ]]; then FIELD1=$(echo $IP|cut -d. -f1) FIELD2=$(echo $IP|cut -d. -f2) FIELD3=$(echo $IP|cut -d. -f3) FIELD4=$(echo $IP|cut -d. -f4) if [ $FIELD1 -le 255 -a $FIELD2 -le 255 -a $FIELD3 -le 255 -a $FIELD4 -le 255 ]; then echo  $IP available.  else echo  $IP not available!  fi else echo  Format error!  fi } check_ip 192.168.1.1 check_ip 256.1.1.1

增加版:

加个死循环,如果 IP 可用就退出,不可用提示继续输入,并使用 awk 判断。

#!/bin/bash function check_ip(){ local IP=$1 VALID_CHECK=$(echo $IP|awk -F.  $1  =255 $2 =255 $3 =255 $4 =255{print  yes} ) if echo $IP|grep -E  ^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$   /dev/null; then if [ $VALID_CHECK ==  yes  ]; then return 0 else echo  $IP not available!  return 1 fi else echo  Format error! Please input again.  return 1 fi } while true; do read -p  Please enter IP:   IP check_ip $IP [ $? -eq 0 ]   break || continue done

以上是“linux 中 Shell 有哪些使用示例”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注丸趣 TV 行业资讯频道!

正文完
 
丸趣
版权声明:本站原创文章,由 丸趣 2023-08-25发表,共计14182字。
转载说明:除特殊说明外本站除技术相关以外文章皆由网络搜集发布,转载请注明出处。
评论(没有评论)