shell经常使用脚本（转）

时间 2019-12-10

标签 shell 经常使用脚本栏目 Unix 繁體版

原文原文链接

Menu
一、用shell脚本批量创建Linux用户
二、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：
三、经过apache访问日志access.log 统计IP和每一个地址访问的次数，按访问量列出前10名。
四、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。
五、监控主机的磁盘空间,当使用空间超过90％就经过发mail来发警告
六、自动ftp上传
七、编写shell脚本，获取本机的网络地址。
八、某系统管理员须要天天作必定的重复工做，编制一个解决方案：
(1)从下午4：50 删除/abc 目录下的所有子目录和所有文件；
(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的所有数
据加入到/backup 目录下的back01.txt 文件内；
(3)每逢周一下午5：50 将/data 目录下的全部目录和文件归档并压缩为文件
backup.tar.gz;
(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;
(5)在早上8：00 前开机后启动。
9．设计一个shell程序，添加一个新组为class1，而后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30
10．编写shell程序，实现自动删除50个帐号的功能。帐号名为stud1至stud50。node

Answer:mysql

一、用shell脚本批量创建Linux用户

实现要求：建立用户student1到student50,指定组为student组！并且每一个用户须要设定一个不一样的密码！
脚本实现以下：linux

not this is a testsql

#!/bin/bash
for i in `seq 1 50`
do
    useradd -G student student$i ;
    echo student$i | passwd student$i --stdin;
done

【说明：Linux下 Passwd有参数shell

　　--stdin数据库

　　This option is used to indicate that passwd should read the new password from standard input, which can be a pipe.apache

　　因此linux下自动改变用户密码的办法就是:vim

　　Echo 密码 |passwd –stdin 用户名
】数组

设置相同的密码

#!/bin/bash
password="123456"
for USER in user1 user2 user3
do
     useradd -m $USER
     echo -e "${password}\n${password}" | passwd $USER
done

【说明：
echo -n 不换行输出：
$echo -n "123"
$echo "456"bash

最终输出
123456
而不是
123
456
echo -e 处理特殊字符：
\n 换行且光标移至行首】

ok,就这么一个简单的脚本，就能够再系统里批量生成帐号了。并且密码跟帐号的名字同样。
这就是for do done语句用法。

二、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

!/bin/bash

for FILE in `ls /usr/local/test`
do
    if [ -f $FILE ] ; then
        if [ `ls -l  $FILE | awk `{print $5}` -gt 100000 ] ; then
            mv $FILE  /tmp/
        fi
    fi
done

================

#!/bin/bash
for FileName in `ls -l  /usr/local/test | awk '$5>102400' {print $9}`
do
        mv $FileName  /tmp/
done
ls -al  /tmp/
echo  "done!"

三、经过apache访问日志access.log 统计IP和每一个地址访问的次数，按访问量列出前10名。

日志格式样例以下：
192.168.1.247 ---【02/jul/2010:23:44:59 + 8080 】 "GET /HTTP/1/1" 200 19

答案：

cat access.log | awk '{print $1}' |sort| uniq -c |sort -rn |head -10

（uniq 参数说明：– c 显示输出中，在每行行首加上本行在文件中连续出现的次数。
  sort参数说明：sort默认的排序方式是升序，-r 参数就会改变成倒叙；你有没有遇到过10比2小的状况。我反正遇到过。
  出现这种状况是因为排序程序将这些数字按字符来排序了，排序程序会先比较1和2，显然1小，因此就将
  10放在2前面喽。这也是sort的一向做风。）

四、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

a、首先两台机器要创建服务器间的信任关系。
b、脚本：

#！/bin/bash

FSMAX="80"
remote_user='root'
remote_ip=(IP地址列表)
ip_num='0'

while [ "$ip_num" -le "$(expr ${#remote_ip[@]} -l)"]
do
read_num='1'
ssh "$remote_user"@"${remote_ip[$ip_num]}"  df -h > /tmp/diskcheck_tmp
grep '^/dev/*'  /tmp/diskcheck_tmp | awk '{print $5}'|sed 's/\%//g'  > /tmp/diskcheck_num_tmp


while [ "$read_num" -le $(wc -l < /tmp/diskcheck_num_tmp) ]
do
size=$(sed -n "$read_num" 'p'  /tmp/diskcheck_num_tmp)

if [ "size" -gt "$FSMAX" ]
then
$(grep '^/dev/*'  /tmp/diskcheck_tmp |sed -n $read_num'p'  > /tmp/disk_check_mail)

$(echo ${remote_ip[$ip_num]}) >> /tmp/disk_check_mail)
$(mail  -s "diskcheck_alert"  admin  <  /tmp/disk_check_mail)
fi

read_num=$(expr  $read_num + 1)

done

ip_num=$(expr  $ip_num + 1)
done

===================写入crontab=====================
0/10 * * * * /home/diskcheck.sh 2&>1

五、监控主机的磁盘空间,当使用空间超过90％就经过发mail来发警告

#!/bin/bash
#monitor available disk space

#提取本服务器的IP地址信息
IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "`
SPACE=` df -hP | awk '{print int($5)}'`
if [ $SPACE -ge 90 ]
then
  echo "$IP 服务器 磁盘空间 使用率已经超过90%，请及时处理。"|mail -s "$IP 服务器硬盘告警"   fty89@163.com
fi

六、自动ftp上传

#! /bin/bash
    ftp -n << END_FTP
    open 192.168.1.22
    user  test testing      //用户名test  密码：testing
    binary
    prompt  off    //关闭提示
    mput   files     //上传files文件
    close
    bye
    END_FTP

七、编写shell脚本，获取本机的网络地址。好比：本机的ip地址是：

192.168.100.5/255.255.255.0,
那么他的网络地址是：
192.168.100.1/255.255.255.0

方法一：

#！/bin/bash
IP=ifconfig eth0|grep 'inet addr'|sed 's/^.*addr://g'|awk  '{print $1}'
NETMASK=ifconfig eth0 |grep "inet addr"|sed 's/^.*Mask://g'

echo "$IP/&NETMASK"
exit

方法二：

#!/bin/bash
 #This script print ip and network
 file="/etc/sysconfig/network-scripts/ifcfg-eth0"
 if [ -f $file ] ;then
     IP=`grep "IPADDR" $file|awk -F"=" '{ print $2 }'`
     MASK=`grep "NETMASK" $file|awk -F"=" '{ print $2 }'`
 echo "$IP/$MASK"
 exit 1
 fi

IP地址也可这样获取：

IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "

子网掩码：

NETMASK= `ifconfig eth0 | grep "inet addr"|cut -f 4 -d ":"

八、某系统管理员须要天天作必定的重复工做，编制一个解决方案：

(1)从下午4：50 删除/abc 目录下的所有子目录和所有文件；

(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的所有数
据加入到/backup 目录下的back01.txt 文件内；

(3)每逢周一下午5：50 将/data 目录下的全部目录和文件归档并压缩为文件
backup.tar.gz;

(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;

(5)在早上8：00 前开机后启动。

答案：

（a）用vi建立编辑一个名为prgx的crontab文件；

（b）prgx文件的内容：

50 16 * * * rm -r /abc/*
0 8-18/1 * * * cut -f1 /xyz/x1 >>  /backup/bak01.txt
50 17 * * * tar zcvf backup.tar.gz /data
55 17 * * * umount /dev/hdc

（c）由超级用户登陆，用crontab执行 prgx文件中的内容：

root@xxx:#crontab prgx；
在每日早晨8:00以前开机后便可自动启动crontab

9．设计一个shell程序，添加一个新组为class1，而后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

参考答案：

#!/bin/sh
i=1
groupadd class1

while [ $i -le 30 ]
do
if [ $i -le 9 ] ;then
USERNAME=stu0${i}
else
USERNAME=stu${i}
fi

useradd $USERNAME

mkdir /home/$USERNAME

chown -R $USERNAME /home/$USERNAME

chgrp -R class1 /home/$USERNAME

i=$(($i+1))

done

10．编写shell程序，实现自动删除50个帐号的功能。帐号名为stud1至stud50。

参考程序：

#!/bin/sh

i=1

while [ $i -le 50 ]

do

userdel -r stud${i}

i=$(($i+1 ))

done

11．设计一个shell程序，在每个月第一天备份并压缩/etc目录的全部内容，存放在/root/bak目录里，且文件名为以下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

参考答案：

（1）编写shell程序fileback：

#!/bin/sh
DIRNAME=`ls /root | grep bak`
if [ -z "$DIRNAME" ] ; then
mkdir /root/bak
cd /root/bak
fi
BACKETC=$(date +%Y%m%d)_etc.tar.gz
tar zcvf  $BACKETC  /etc
echo "fileback finished!"

（2）编写任务定时器：

echo "0 0 1 * * /bin/sh /usr/bin/fileback" >; /root/etcbakcron

crontab /root/etcbakcron

或使用crontab -e 命令添加定时任务：

0 1 * * * /bin/sh /usr/bin/fileback

12．有一普通用户想在每周日凌晨零点零分按期备份/user/backup到/tmp目录下，该用户应如何作？

参考答案：

（1）第一种方法：

用户应使用crontab –e 命令建立crontab文件。
格式以下：

0 0 * * sun cp –r /user/backup /tmp

（2）第二种方法：

用户先在本身目录下新建文件file，文件内容以下：

0 * * sun cp –r /user/backup /tmp

而后执行 crontab file 使生效。

13．设计一个Shell程序，在/userdata目录下创建50个目录，即user1～user50，并设置每一个目录的权限，其中其余用户的权限为：读；文件全部者的权限为：读、写、执行；文件全部者所在组的权限为：读、执行。

参考答案:

创建程序 Pro16以下：

#!/bin/sh

i=1

while [ i -le 50 ]

do

if [ -d /userdata ];then

mkdir -p -m 754 /userdata/user$i   加上-m 754 就不用写下面那一句了  -p 是递归创建目录

#chmod 754 /userdata/user$i

echo "user$i"

let "i = i + 1" （或i=$(($i+1))

else

mkdir /userdata

mkdir -p -m /userdata/user$i

#chmod 754 /userdata/user$i

echo "user$i"

let "i = i + 1" （或i=$（（$i＋1））

fi

done

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件

#!/bin/sh

#auto backup mysql
#wugk  2012-07-14
#PATH DEFINE

BAKDIR=/data/backup/mysql/`date +%Y-%m-%d`
MYSQLDB=www
MYSQLPW=backup
MYSQLUSR=backup

if[ $UID -ne 0 ];then
echo This script must use administrator or root user ,please exit!
sleep 2
exit 0
fi

if[ ! -d $BAKDIR ];then
mkdir -p $BAKDIR
else
echo This is $BAKDIR exists ,please exit ….
sleep 2
exit
fi

###mysqldump backup mysql

/usr/bin/mysqldump -u$MYSQLUSR -p$MYSQLPW -d $MYSQLDB >/data/backup/mysql/`date +%Y-%m-%d`/www_db.sql

cd $BAKDIR ; tar -czf  www_mysql_db.tar.gz *.sql

cd $BAKDIR ;find  . -name “*.sql” |xargs rm -rf[ $? -eq 0 ]&&echo “This `date +%Y-%m-%d` RESIN BACKUP is SUCCESS”

cd /data/backup/mysql/ ;find . -mtime +30 |xargs rm -rf

13.2 批量解压tar脚本，批量解压zip而且创建当前目录

#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `ls ${PATH1}/*`
do
tar xvf  $i  -C $PATH2
done

这个脚本是针对全部tar文件在一个目录，可是实际状况中，有可能在下级或者更深的目录，咱们可使用find查找

#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `find  $PATH1  -name  “*.tar” `
do
tar xvf  $i  -C $PATH2
done

若是是zip文件，例如123189.zip 132342.zip 等等批量文件，默认unzip直接解压不带自身目录，意思是解压123189.zip完当前目录就是图片，不能建立123189目录下并解压，能够用shell脚本实现

#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
cd $PATH1

for i in `find  . -name  ”*.zip”|awk  -F.  {print $2} `
do

mkdir -p   PATH2$i

unzip -o  .$i.zip  -d   PATH2$i
done

13.3 14.从1叠加到100

echo $[$(echo +{1..100})]
    echo $[(100+1)*(100/2)]
    seq -s '+' 100 |bc

15.判断参数是否为空-空退出并打印null

#!/bin/sh
    echo $1
    name=${1:?"null"}
    echo $name

16.循环数组

for ((i=0;i<${#o[*]};i++))
    do
        echo ${o[$i]}
    done

17. 判断路径是否存在

if [ -d /root/desktop/text/123 ];then
        echo "找到了123"
        if [ -d /root/desktop/text ]
        then echo "找到了text"
        else echo "没找到text"
        fi
else echo "没找到123文件夹"

fi

18.找出出现次数最多

awk '{print $1}' file|sort |uniq -c|sort -k1r

19. 判断脚本参数是否正确

./test.sh -p 123 -p 3306 -h 127.0.0.1 -u root

#!/bin/sh
    if [ $# -ne 8 ];then
        echo "usage: $0 -u user -p passwd -p port -h host"
        exit 1
    fi

    while getopts :u:p:p:h: name
    do
        case $name in
        u)
            mysql_user=$optarg
        ;;
        p)
            mysql_passwd=$optarg
        ;;
        p)
            mysql_port=$optarg
        ;;
        h)
            mysql_host=$optarg
        ;;
        *)
            echo "usage: $0 -u user -p passwd -p port -h host"
            exit 1
        ;;
        esac
    done

    if [ -z $mysql_user ] || [ -z $mysql_passwd ] || [ -z $mysql_port ] || [ -z $mysql_host ]
    then
        echo "usage: $0 -u user -p passwd -p port -h host"
        exit 1
    fi

    echo $mysql_user $mysql_passwd $mysql_port  $mysql_host

20.打印表格

#!/bin/sh
    clear
    awk 'begin{
    print "+--------------------+--------------------+";
    printf "|%-20s|%-20s|\n","name","number";
    print "+--------------------+--------------------+";
    }'
    a=`grep "^[a-z]" a.txt |sort +1 -n |awk '{print $1":"$2}'`
    #cat a.txt |sort +1 -n |while read list
    for list in $a
    do
        name=`echo $list |awk -f: '{print $1}'`
        number=`echo $list |awk -f: '{print $2}'`
        awk 'begin{printf "|%-20s|%-20s|\n","'"$name"'","'"$number"'";
        print "+--------------------+--------------------+";
        }'
    done
    awk 'begin{
    print "              *** the end ***              "
    print "                                           "
    }'

21.判断日期是否合法

#!/bin/sh
    while read a
    do
      if echo $a | grep -q "-" && date -d $a +%y%m%d > /dev/null 2>&1
      then
        if echo $a | grep -e '^[0-9]\{4\}-[01][0-9]-[0-3][0-9]$'
        then
            break
        else
            echo "您输入的日期不合法，请重新输入！"
        fi
      else
        echo "您输入的日期不合法，请重新输入！"
      fi
    done
    echo "日期为$a"

22.打印日期段全部日期

#!/bin/bash
    qsrq=20010101
    js rq=20010227
    n=0
    >tmp
    while :;do
    current=$(date +%y%m%d -d"$n day $qsrq")
    if [[ $current == $js rq ]];then
        echo $current >>tmp;break
    else
        echo $current >>tmp
        ((n++))
    fi
    done
    rq=`awk 'nr==1{print}' tmp`

23.打印提示

cat <<eof
        #内容
eof

24. 取用户的根目录

#! /bin/bash
    while read name pass uid gid gecos home shell
    do
        echo $home
    done < /etc/passwd

25. 查找连续多行，在不连续的行前插入

#/bin/bash
    lastrow=null
    i=0
    cat incl|while read line
    do
    i=`expr $i + 1`
    if echo "$lastrow" | grep "#include <[a-z].h>"
    then
        if echo "$line" | grep -v  "#include <[a-z].h>"
        then
            sed -i ''$i'i\\/\/all header files are include' incl
            i=`expr $i + 1`
        fi
    fi
    lastrow="$line"
    done

26.查询其余数据库其它引擎

#/bin/bash
    path1=/data/mysql/data/
    dbpasswd=db123
    #myisam或innodb
    engine=innodb

    if [ -d $path1 ];then

    dir=`ls -p $path1 |awk '/\/$/'|awk -f'/' '{print $1}'`
        for db in $dir
        do
        number=`mysql -uroot -p$dbpasswd -a -s "$path1"mysql.sock -e "use ${db};show table status;" |grep -c $engine`
            if [ $number -ne 0 ];then
            echo "${db}"
            fi
        done
    fi

27.批量修改其余数据库引擎

#/bin/bash
    for db in test test1 test3
    do
        tables=`mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;show tables;" |awk 'nr != 1{print}'`

        for table in $tables
        do
            mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;alter table $table engine=myisam;"
        done
    done

28.将shell取到的数据插入mysql其余数据库

mysql -u$username -p$passwd -h$dbhost -p$dbport -a -e "
    use $dbname;
    insert into data values ('','$ip','$date','$time','$data')
    "

29.两日期间隔天数

d1=`date -d '20070409' +"%s"`
    d2=`date -d '20070304 ' +"%s"`
    d3=$(($d1 - $d2))
    echo $(($d3/60/60/24))

30. ssh批量执行命令

#版本1
    #!/bin/bash
    while read line
    do
    ip=`echo $line|awk '{print $1}'`
    passwd=`echo $line|awk '{print $2}'`
    ssh -n localhost "cat -"
    sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
    done<iplist.txt


#版本2
    #!/bin/bash
    iplist=`awk '{print $1}' iplist.txt`
    for ip in $iplist
    do
    passwd=`awk '/'$ip'/{print $2}' iplist.txt`
    sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
    done

31.多进程后台并发控制

#!/bin/bash
    test () {
        echo $a
        sleep 5
    }
    for a in `seq 1 30`
    do
        test &
        echo $!
        ((num++))
        if [ $num -eq 6 ];then
        echo "wait..."
        wait
        num=0
        fi
    done
    wait

32.恢复rm删除的文件

debugfs针对 ext2
ext3grep针对 ext3
extundelete针对 ext4

df -t   # 首先查看磁盘分区格式
    umount /data/     # 卸载挂载,数据丢失请首先卸载挂载,或从新挂载只读
    ext3grep /dev/sdb1 --ls --inode 2         # 记录信息继续查找目录下文件inode信息
    ext3grep /dev/sdb1 --ls --inode 131081    # 此处是inode
    ext3grep /dev/sdb1 --rest ore-inode 49153  # 记录下inode信息开始恢复目录

this is a failure to select atom!

don't open vim mode

don't open vim-mode

instant vim not installed

it is pity that the vim-instant function can't be

installed correctly!

good night boy!

ace in beijin

参考<http://guoyueheng148.blog.163.com/blog/static/6016709120140209413480/>

shell经常使用脚本（转）

一、用shell脚本批量创建Linux用户

设置相同的密码

二、 编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

三、经过apache访问日志access.log 统计IP和每一个地址访问的次数，按访问量列出前10名。

四、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

五、监控主机的磁盘空间,当使用空间超过90％就经过发mail来发警告

六、自动ftp上传

七、编写shell脚本，获取本机的网络地址。好比：本机的ip地址是：

八、某系统管理员须要天天作必定的重复工做，编制一个解决方案：

9．设计一个shell程序，添加一个新组为class1，而后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

10．编写shell程序，实现自动删除50个帐号的功能。帐号名为stud1至stud50。

11．设计一个shell程序，在每个月第一天备份并压缩/etc目录的全部内容，存放在/root/bak目录里，且文件名为以下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

12．有一普通用户想在每周日凌晨零点零分按期备份/user/backup到/tmp目录下，该用户应如何作？

13．设计一个Shell程序，在/userdata目录下创建50个目录，即user1～user50，并设置每一个目录的权限，其中其余用户的权限为：读；文件全部者的权限为：读、写、执行；文件全部者所在组的权限为：读、执行。

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件

13.2 批量解压tar脚本，批量解压zip而且创建当前目录

13.3

14.从1叠加到100

15.判断参数是否为空-空退出并打印null

16.循环数组

17. 判断路径是否存在

18.找出出现次数最多

19. 判断脚本参数是否正确

20.打印表格

21.判断日期是否合法

22.打印日期段全部日期

23.打印提示

24. 取用户的根目录

25. 查找连续多行，在不连续的行前插入

26.查询其余数据库 其它引擎

27.批量修改其余数据库引擎

28.将shell取到的数据插入mysql其余数据库

29.两日期间隔天数

30. ssh批量执行命令

31.多进程后台并发控制

32.恢复rm删除的文件

this is a failure to select atom!

don't open vim mode

don't open vim-mode

instant vim not installed

it is pity that the vim-instant function can't be

二、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

26.查询其余数据库其它引擎