shell实例100例《七》

6一、题目要求  :  找文件差别

有两个文件a.txt中和b.txt，需求是，把A.TXT中有的但b.txt中没有的行找出来，并写入到c.txt，而后计算c.txt文件的行数。

【核心要点】

可使用while循环遍历a.txt，逐行进行匹配，若是这一行在b.txt中没有，就直接重定向到c.txt便可

参考答案

#!/bin/bash #这个脚本用来比较文件差别 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-07 cat a.txt|while read line do if ! grep -q "$line" b.txt then echo $line fi done >c.txt wc -l c.txt

实例 ：

编写a.txt 和b.txt文档，用于测试

比较b.txt文档，使用 -f命令，把匹配到的关键词root用红色显示出来。 

找出a.txt 和b.txt文档共同存在的关键词

找出a.txt 有，b.txt中文档不存在的关键词

把a.txt 和b.txt文档不一样的关键词，显示出来。

执行脚本，查看运行的结果。3表示有3行不一样的。

注意  ： 

if ! grep -q "$line" b.txt                   #b.txt文档中的没有的，

done >c.txt #把a.txt 和b.txt文档不一样的关键词写入到c.txt文档中 wc -l c.txt #统计一下，c.txt 中的行数

 

6二、题目要求     :   杀进程

把当前用户下全部进程名字中含有 “阿明” 的进程关闭。

【核心要点】

ps -u $USER

参考答案

#!/bin/bash #这个脚本用来杀进程 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-07 ps -u $USER|awk '$NF ~ /aming/ {print $1}' |xargs kill

实例 ：

查看当前的用户

查看指定的用户

查看当前用户下的进程数

查看当前用户下的进程数，最后一行匹配“aming”的用户

查看出kworke用户的行；并打印出第一行；查找aming用户，并打印出第一行，杀死aming用户。

执行脚本，查看运行的结果。

注意  ： 

ps -u $USER|awk '$NF ~ /aming/ {print $1}' |xargs kill

 

6三、题目要求   :  并发备份数据库

用外壳实现，以并发进程的形式将MySQL的数据库全部的表备份到当前目录，并把全部的表压缩到一个压缩包文件里。

假设数据库名字为MYDB，用户名为阿明，密码为passwd文件。

【核心要点】

一、在shell中加上&能够将命令丢到后台，从而能够同时执行多条命令达到并发的效果

二、若是表数量很大，所有都丢到后台去，服务资源恐怕支持不了，因此须要控制并发数。

三、备份表的命令是mysqldump -uaming -ppasswd mydb tbname > tbname.sql

参考答案

#!/bin/bash #这个脚本用来并发备份数据库 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-07 N=5 mysql -uaming -ppasswd mydb -e "show tables"|sed '1d' > /tmp/table.txt n=`wc -l /tmp/table.txt|awk '{print $1}' div() { n=`echo "scale=1;$1/$2"|bc` n1=`echo "scale=1;$n+0.5"|bc` echo $n1|cut -d. -f1 } n1=`div $n $N` split -l $n1 /tmp/table.txt myd() { for t in `cat $1` do mysqldump -uaming -ppasswd mydb $t > $t.sql done } for f in xaa xab xac xad xae do myd $f & done wait tar czf mydb.tar.gz *.sql rm -f *.sql

实例 ：

把test.txt文档分为4份，使用split命令，分割，ls查看分割结果；为什么只有三个结果，由于是四舍五入的，x开头的文件指的是并发数。

split命令能够指定分割以后，生成的文件名test

 

 

注意  ： 

$1                        #是文件名

N=5                                 #N=5表示并发分为5份

mysql -uaming -ppasswd mydb -e "show tables"|sed '1d' > /tmp/table.txt n=`wc -l /tmp/table.txt|awk '{print $1}'                            #mydb数据库显示全部的列表，删除第一行，表的列表写入/tmp/table.txt 文件中

`wc -l /tmp/table.txt|awk '{print $1}'                #计算文件的行数，并打印出来第一行

for f in xaa xab xac xad xae                         #表示并发产生的5个表

myd $f &                              #&表示把进程丢到后台去

 

mysqldump -uaming -ppasswd mydb $t > $t.sql                     #备份数据库，$t是表名，写入到当前目录的数据库$t.sql 

n1=`div $n $N`                             #$n除以$N ; $n是除数 $N是被除数

 

求一个平均值

n=`echo "scale=1;$1/$2"|bc`                         #

n1=`echo "scale=1;$n+0.5"|bc`                   #

echo $n1|cut -d. -f1                        #

 

tar czf mydb.tar.gz *.sql                                  #把全部的数据库打包成压缩包

split -l $n1 /tmp/table.txt                                         #把/tmp/table.txt 文件分为$n1份；-l意思是指要切割的行数

 

 

6四、题目要求     : 监控CDN节点

一个网站，使用了cdn，全国各地有几十个节点。须要你写一个shell脚原本监控各个节点是否正常。假如

1. 监控的网址为www.aming.com/index.php
2. 源站IP为88.88.88.88。

【核心要点】

一、某个节点正常，那访问到的内容应该和源

二、比较两个文件内容是否有差别的命令为diff,如，diff 1.txt 2.txt若是结果为空，说明两个文件不存在差别

三、几十个节点，须要把全部节点的IP所有拿到，而后对全部IP进行遍历

参考答案

#!/bin/bash #这个脚本用来监控CDN节点 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-08 s_ip=88.88.88.88 url=www.aminglinux.com/index.php ipf=/data/ip.list curl -x$s_ip:80 $url 2>/dev/null >/tmp/source.txt for ip in `cat $ipf` do curl -x$ip:80 $url 2>/dev/null >/tmp/$ip.txt diff /tmp/source.txt /tmp/$ip.txt > /tmp/$ip.diff n=`wc -l /tmp/$ip.diff|awk '{print $1}'` if [ $n -gt 0 ] then echo "节点$ip有异常." fi done

实例 ：

把index.php页面，重定向到/tmp/tmp.txt文件中去

直接写入到/tmp/tmp.txt文件中去，不显示过程结果。

 

注意  ： 

curl -x$s_ip:80 $url 2>/dev/null >/tmp/source.txt                  #访问节点IP，并把访问的结果写入到/tmp/source.txt ，不显示重定向过程; -x指定IP

for ip in `cat $ipf`                          #将IP写入到$ipf

 

diff /tmp/source.txt /tmp/$ip.txt > /tmp/$ip.diff                    #/tmp/source.txt比对/tmp/$ip.txt 这两个文件的差别，若是有，说明出问题了，并将结果写入到/tmp/$ip.diff

wc -l /tmp/$ip.diff|awk '{print $1}'                        #将比对出来的结果，统计一下行数，只显示一行。

 

if [ $n -gt 0 ]                         #若是gt的结果是0，说明出问题了

 

6五、题目要求  :    破解字符串

已知下面的字符串是经过RANDOM随机数变量md5sum | cut -c 1-8截取后的结果，请破解这些字符串对应的md5sum前的RANDOM对应数字？21029299

00205d1c

a3da1677

1f6d12dd

890684ba

【核心要点】

$RAMDOM的范围为0-32767，要想借此题，须要遍历0-32767全部数字，逐一和题目中给出的字符串匹配

参考答案

#!/bin/bash #这个脚本用来破解字符串 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-08 for i in `seq 0 32767` do m=`echo $i|md5sum |cut -c 1-8 ` echo $i $m done > /tmp/md5.txt cat > c.txt <<EOF 21029299 00205d1c a3da1677 1f6d12dd 890684ba EOF grep -f c.txt /tmp/md5.txt

实例 ：

求12345的md5sum的值，并截取前1-8的数字

 

执行脚本，查看结果，由于要计算3万多数字，因此须要很长时间等待脚本的执行结果。

注意  ：

for i in `seq 0 32767`                            #求出0-32767之间的md5sum的值 

m=`echo $i|md5sum |cut -c 1-8 `                 #  求$i的md5sum的值，并截取前1-8的数字  

grep -f c.txt /tmp/md5.txt                    # 

cat > c.txt <<EOF                                    #将全部的数字写入到c.txt文档中

 

6六、题目要求   :    判断cpu厂商

写一个脚本：

1. 判断当前主机的CPU生产商，其信息在/ proc / cpuinfo文件中供应商id一行中。
2. 若是其生产商为AuthenticAMD，就显示其为AMD公司;
3. 若是其生产商为GenuineIntel，就显示其为英特尔公司;
4. 不然，就说其为非主流公司。

【核心要点】

一、截取/proc/cpuinfo文档包含“vendor_id”那行的文本

参考答案

#!/bin/bash #这个脚本用来判断CPU厂商 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-10 cpu=`grep '^vendor_id' /proc/cpuinfo |head -1|awk -F ': ' '{print $2}'` #if [ $cpu == "AuthenticAMD" ] #then # echo "CPU厂商是AMD." #elif [ $cpu == "GenuineIntel" ] #then # echo "CPU厂商是Intel." #else # echo "CPU厂商是非主流厂商。" #fi case $cpu in AuthenticAMD) echo "CPU厂商是AMD." ;; GenuineIntel) echo "CPU厂商是Intel." ;; *) echo "CPU厂商是非主流厂商。" ;; esac

实例 ：

查看cpu厂商的命令 ： cat /proc/cpuinfo , 显示其为英特尔公司;

截取含有“vendor_id”的行，在/proc/cpuinfo中，head -1只显示第一行

由于厂商名字在第二行，因此用{print $2}，只截取厂商的名字，

注意         ： ntpdate命令联网同步时间，缘由 ： linux长期不登陆，时间可能和windows系统不一样步。

执行脚本，查看结果

注意  ： 

cpu=`grep '^vendor_id' /proc/cpuinfo |head -1|awk -F ': ' '{print $2}'`               #查找含有vendor_id ,在/proc/cpuinfo中查看，只显示第一行，把含有厂商的第二行打印处理,

elif [ $cpu == "GenuineIntel" ]                         #若是是CPU是GenuineIntel

 

6七、题目要求   :   监控CPU使用率

用壳写一个监控服务器CPU使用率的监控脚本。

【核心要点】

思路 ： 用top -bn1 命令，取当前空闲cpu百分比值（只取整数部分），而后用100去减这个数值

参考答案

#!/bin/bash #这个脚本用来计算CPU使用率 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-10 mail_user=xxx@xxx.com m_mail() { log=$1 t_s=`date +%s` t_s2=`date -d "1 hours ago" +%s` if [ ! -f /tmp/$log ] then #建立$log文件 touch /tmp/$log #增长a权限，只容许追加内容，不容许更改或删除 chattr +a /tmp/$log #第一次告警，能够直接写入1小时之前的时间戳 echo $t_s2 >> /tmp/$log fi #不管$log文件是不是刚刚建立，都须要查看最后一行的时间戳 t_s2=`tail -1 /tmp/$log|awk '{print $1}'` #取出最后一行即上次告警的时间戳后，当即写入当前的时间戳 echo $t_s>>/tmp/$log #取两次时间戳差值 v=$[$t_s-$t_s2] #若是差值超过1800，当即发邮件 if [ $v -gt 1800 ] then #发邮件，其中$2为mail函数的第二个参数，这里为一个文件 python mail.py $mail_user "CPU使用率超过90%" "`top -bn1`" 2>/dev/null #定义计数器临时文件，并写入0 echo "0" > /tmp/$log.count else #若是计数器临时文件不存在，须要建立并写入0 if [ ! -f /tmp/$log.count ] then echo "0" > /tmp/$log.count fi nu=`cat /tmp/$log.count` #30分钟内每发生1次告警，计数器加1 nu2=$[$nu+1] echo $nu2>/tmp/$log.count #当告警次数超过30次，须要再次发邮件 if [ $nu2 -gt 30 ] then python mail.py $mail_user "CPU使用率超过90%持续30分钟了" "`top -bn1`" 2>/dev/null #第二次告警后，将计数器再次从0开始 echo "0" > /tmp/$log.count fi fi } while : do cpu_i=`top -bn1 |grep 'Cpu(s):'|sed 's/^%//'|awk -F ' +|%' '{print $8}'` cpu_u=`echo 100-$cpu_i|bc` if [ $cpu_u -gt 90 ] then m_mail cpu fi sleep 60 done

实例 ：

使用top命令查看你，第三行就是cpu使用率；us是用户态的服务CPU使用率,sy是系统态的CPU使用率。日常的使用率是指us和sy的使用率。使用率等于100-id（99.3）

centos 7静态显示CPU使用率，显示使用率是100-99.2。centOS 6的id后面有百分号%

只显示出来，含有CPU的行。按空格作分隔符，含有CPU的在第五行

用百分号%作分隔符，含有CPU的在第八行用空格加，表示一个或者多个空格

sed清空第一个%，而后在centos 7 执行这个命令。

执行脚本，查看结果。

 

只查看CPU的使用率的脚本

注意  ：

t_s=`date +%s`                       #

t_s2=`date -d "1 hours ago" +%s`                      #

if [ $cpu_u -gt 90 ]                                #当使用率大于90时，每隔1分钟发一封邮件

 

 

6八、题目要求   :    打印子进程

给出一个进程PID，打印出该进程下面的子进程以及子进程下面的全部子进程。（只须要考虑子进程的子进程，再往深层次则不考虑）

【核心要点】

ps -elf结果中PPID那一列为父进程PID

参考答案

#!/bin/bash #这个脚本用来打印子进程 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-10 ps -elf > /tmp/pid.txt read -p "Please input a pid: " p if [ -z "$p" ] then echo "你没有输入任何pid，请输入一个pid." exit fi if ! grep -qw "$p" /tmp/pid.txt then echo "你输入的pid不存在." exit fi get_cpid() { p1=$1 ps -elf |awk -v p2=$p1 '$5==p2 {print $4}' > /tmp/$p1.txt n=`wc -l /tmp/$p1.txt|awk '{print $1}'` if [ $n -eq 0 ] then echo "进程$1下没有子进程." else echo "进程$1下的子进程是:" cat /tmp/$p1.txt fi } get_cpid $p for c_p in `cat /tmp/$p.txt` do get_cpid $c_p done

实例 ：

查看进程的pid,ppid是父进程

一用进程树的方式显示进程

只显示ppid的进程数字

查看进程ppid对应的pid子进程数字

执行脚本，查看结果

注意  ： 

ps -elf > /tmp/pid.txt                               # 把进程的pid写入到/tmp/pid.txt 

if [ -z "$p" ]                             #输入的变量为空

if ! grep -qw "$p" /tmp/pid.txt                             #若是/tmp/pid.txt 中不包含输入的pid,就提醒“你输入的pid不存在.”

wc -l /tmp/$p1.txt|awk '{print $1}'                              #统计行数，并只打印出显示出来的第一行。

 

6九、题目要求   :  给lamp环境增长项目

需求背景：服务器上，跑的灯环境，上面有不少客户的项目，每一个项目就是一个网站。因为客户在不断增长，每次增长一个客户，就须要配置相应的mysql，ftp以及httpd。这种工做重复性很是强的，因此用脚本实现很是合适.mysql增长的是对应客户项目的数据库，用户，密码，FTP增长的是对应项目的用户，密码（使用vsftpd的，虚拟用户模式），httpd的就是要增长虚拟主机配置段。

【核心要点】

要想解此题，首先要搞清楚MySQL库和用户，增长httpd虚拟主机、增长FTP用户的命令，只要能在命令行搞定，那么在脚本中就没问题。

参考答案

#!/bin/bash #本脚本的功能是在LAMP环境中增长站点，包括apache配置、FTP增长用户、MySQL增长库和用户 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-10 #网站目录 webdir=/data/wwwroot #ftp的虚拟用户配置文件目录 ftpudir=/etc/vsftpd/vuuser #ftp虚拟用户密码文件 ftpuserfile=/root/login #mysql命令行登陆root mysqlc="/usr/local/mysql/bin/mysql -uroot -pjk1hYUcnt6" #apache虚拟主机配置文件 httpd_config_f="/usr/local/apache2/conf/extra/httpd-vhosts.conf" #定义增长MySQL库和用户的函数 add_mysql_user() { #生成随机密码 mysql_p=`mkpasswd -s 0 -l 12` #将密码保存到临时文件里，这里的$pro为用户自定义的项目名字 echo "$pro $mysql_p" >/tmp/$pro.txt #这里使用嵌入文档的形式(需顶格），将建立用户并受权的命令传递给mysql $mysqlc <<EOF create database $pro; grant all on $pro.* to "$pro"@'127.0.0.1' identified by "$mysql_p"; #下面这个EOF必需要顶格 EOF } #定义增长FTP用户的函数 add_ftp_user() { ftp_p=`mkpasswd -s 0 -l 12` echo "$pro" >> $ftpuserfile echo "$ftp_p" >> $ftpuserfile #将用户、密码文件转换为密码db文件 db_load -T -t hash -f $ftpuserfile /etc/vsftpd/vsftpd_login.db cd $ftpudir #这里的aaa是一个文件，是以前的一个项目，能够做为配置模板 cp aaa $pro #把里面的aaa改成新的项目名字 sed -i "s/aaa/$pro/" $pro #重启vsftpd服务 /etc/init.d/vsftpd restart } #定义增长apache虚拟主机的函数 config_httpd() { #增长网站根目录，和域名保持一致，这里的$dom为用户自定义的域名 mkdir $webdir/$dom #将网站根目录属主和属组设置为ftp用户 chown vsftpd:vsftpd $webdir/$dom #用嵌入文档（需顶格），把虚拟主机配置写入到配置文件里 cat >> $httpd_config_f <<EOF <VirtualHost *:80> DocumentRoot $webdir/$dom ServerName $dom <Directory $webdir/$dom> AllowOverride none Require all granted </Directory> </VirtualHost> EOF #重载apache服务 /usr/local/apache2/bin/apachectl graceful } read -p "input the project name: " pro read -p "input the domain: " dom add_mysql_user add_ftp_user config_httpd

实例 ：

执行脚本，查看结果

注意  ： 

$ftpuserfile                            #用户的密码文件

create database $pro;                        #建立数据库$pro

grant all on $pro.* to "$pro"@'127.0.0.1' identified by "$mysql_p";            #赋予数据库密码

 

70、题目要求 :    简易计算器

用shell写一个简易计算器，能够实现加，减，乘，除运算，假如脚本名字为1.sh，执行示例：./ 1.sh 1 + 2

【核心要点】

一、脚本有三个参数，因此第一要判断用户输入的参数个数是否符合要求。

二、第一个第三个参数是数字，能够是小数，但不能是负数，第二个参数只能是+、-、*、/、，若是是其余要报错。

参考答案

#!/bin/bash #这个脚本用来实现简易计算器 #做者：猿课-阿铭 www.apelearn.com #日期：2018-12-10 if [ $# -ne 3 ] then echo "你给的参数个数不对，应该给3个参数." exit fi if_number() { n1=`echo $1|sed 's/[0-9.]//g'` if [ -n "$n1" ] then echo "$1不是数字." exit fi if echo $1|grep -q '^\.' then echo "数字$1不合法." exit fi } if_number $1 if_number $3 case $2 in +) echo "$1+$3"|bc ;; -) echo "$1-$3"|bc ;; \*) echo "$1*$3"|bc ;; /) echo "scale=2;$1/$3"|bc ;; *) echo "你给出的格式不对，第二个参数只能是+,-,*,/" ;; esac

实例 ：

执行脚本，查看结果. 1除以3，保留两位数

注意  ： 

if [ $# -ne 3 ]                                #$#不等于3，提示 “你给的参数个数不对，应该给3个参数.”

n1=`echo $1|sed 's/[0-9.]//g'`                        # 若是输入的数字不是数字，是空的   

if [ -n "$n1" ]                  #若是不为空，提示“$1不是数字.” 退出

 

if echo $1|grep -q '^\.'                         #若是有以点开头的，提示"数字$1不合法."

echo "$1+$3"|bc                     #$1+$3的值，比较大小

echo "scale=2;$1/$3"|bc                         #保留两位小数，$1除以$3

 

来源 ：https://github.com/aminglinux/shell100/blob/master/13.md