你还不会shell脚本吗，我来教你

时间 2019-11-07

标签还不 shell 脚本栏目 Unix 繁體版

原文原文链接

这几天也是刚学习了shell脚本的编写，虽然他不像Python、Java那样可以编写很大型的项目(固然我是这么认为)，可是在操控Linux系统方面，仍是有独特的优点的，固然在学习过程当中咱们也能更好的了解Linux。接下来，就开始学习吧。后面会有几个小例子，固然都是别的地方挪过来的，我就是代码的搬运工，嘿嘿。喜欢学习的同志们能够点击Python聚焦专栏，查看更多知识。html

繁琐的括号总结

基本概念

解释器种类

Bourne Shell（/usr/bin/sh或/bin/sh）
Bourne Again Shell（/bin/bash）
C Shell（/usr/bin/csh）
K Shell（/usr/bin/ksh）
Shell for Root（/sbin/sh）

在通常状况下，人们并不区分 Bourne Shell 和 Bourne Again Shell，因此，像 #!/bin/sh，它一样也能够改成 #!/bin/bash。python

脚本编写

指定使用的解释器类型

#!/bin/bash

运行方式

做为可执行程序

chmod +x ./test.sh # 修改权限
./test.sh   # 执行

运行时必定要写成./test.sh，由于直接写test.sh，linux会去PATH里寻找，而通常只有/bin,/sbin,/usr/bin,/usr/sbin等在PATH中，因此使用./test.sh告诉系统，就在本目录下找mysql

做为解释器参数

这种方式能够不用在sh文件中写明解释器类型，写了也是没有用的

/bin/sh test.sh

基本语法

变量

定义方式和python相似，只不过定义过程当中不容许使用空格，默认都是字符串类型linux
- declare命令定义有类型的变量nginx
  - -i : 定义整型变量
  - -a : 定义一个数组
  - -f : 查看系统中全部定义的函数
  - -F : 查看系统中全部定义的函数名称
  - -x : 声明一个环境变量--在脚本文件中能够直接使用的变量
  - 取消定义的变量：把命令减号改为加号再执行
使用时只须要使用&dollar; / &dollar;{ }就能够了
只读变量：在变量定义后，再使用readonly 修饰，再次赋值会报错
删除变量：unset var_name,不能删除只读变量

变量数据修改

语法	说明
${var_name#规则}	从变量开头进行匹配，将符合最短的数据删除
${var_name##规则}	从变量开头进行匹配，将符合最长的数据删除
${var_name%规则}	从变量末尾进行匹配，将符合最短的数据删除
${var_name%%规则}	从变量末尾进行匹配，将符合最长的数据删除
${变量名/旧字符串/新字符串}	变量内容符合旧字符串，就将第一个替换
${变量名//旧字符串/新字符串}	变量内容符合旧字符串，就所有替换

字符串

Shell字符串正则表达式
- 单引号：不能使用变量
- 双引号：可使用变量，并转义\n等字符
- 反引号：用于保存要执行的命令，同：&dollar;() 【点击例子】
- 在进行拼接的时候是能够出现如下形式的：sql
  - "Hello, "$world""
  - 'Hello, '$world''
expr命令是从1开始索引，而普通的提取都是从零开始索引的
求长度shell
- 获取字符串长度：$#var_name
- ${#str}
- expr lenth $str
求字串索引数据库
- expr index $str substr_regsegmentfault
  - substr其实索引的是其每一个字符，返回最小索引的那个
匹配的字串的长度
- expr match $str substr_reg
截取
- ${str:start}
- ${str:start:lenth}
- ${str:(start)}/\${str: -start} start为负数，表示从尾部开始
- expr substr $str $start $length

数组

定义：
- array_name=(value0 value1 value2 value3) 使用空格分隔元素
- array_name[0]=value0 / array_name[1]=value1下标能够不连续
读取：
- 单个读取：${array_name[index]}
- 所有读取：${array_name[@]}
- 获取长度：
  - 数组长度：length=&dollar;{#array_name[@]}/length=${#array_name[*]}
  - 单个元素长度：lengthn=${#array_name[n]}

注释

单行：#
多行：
- ：<<EOF . . . EOF
- 使用其余符号替代EOF,如：'

函数

定义
- function func_name { }
- func_name ( ) { }
返回值
- return : 通常返回一个整数，用于作判断
- echo ：用于返回数据
- printf
局部变量
- local修饰，不进行修饰那么函数执行后，其余地方也可使用。
函数库
- 文件后缀是任意的，通常为lib
- 通常不会赋予可执行权限
- 第一行通常使用#!/bin/echo输出警告信息，避免用户执行

获取命令行参数

$num:num为要获取的参数位置，从0开始，分别表明文件名，参数1，参数2
$#:传递到脚本的参数个数
&dollar;&dollar;:脚本运行的当前进程ID号
$!:后台运行的最后一个进程的ID号
$?:显示最后命令的退出状态。0表示没有错误，其余任何值代表有错误。
$-:显示Shell使用的当前选项，与set命令功能相同。
$* / $@:以一个单字符串显示全部向脚本传递的参数。
- 相同点：都是引用全部参数。
- 不一样点：只有在双引号中体现出来。假设在脚本运行时写了三个参数一、二、3，，则 " * " 等价于 "1 2 3"（传递了一个参数），而 "@" 等价于 "1" "2" "3"（传递了三个参数）。

中括号的使用(通常可使用test命令替换)

一个变量是否为0, [ $var -eq 0 ]
- ne:不等于
- lt/gt：小于/大于
- le/ge：小于等于/大于等于
一个文件是否存在，[ -e $var ], 是不是目录，[ -d $var ]
两个字符串是否相同， [[ $var1 = $var2 ]]
-a/-o：and/or
-e : exist
-r : 是否可读
-w : 是否可写
-n ：判断字符串长度是否非0
-z ：判断字符串长度是否为0
$ :判断字符串是否非空

运算符：原生bash不支持简单的数学运算，须要使用awk和expr，expr最经常使用,而且只能进行整数运算

表达式和运算符之间要有空格
完整的表达式要被包含
带有转移的字符须要使用\修饰才能使用
使用$(())中间的运算符不须要转义而且不要求有空格，不能进行相等和不等的判断
```
echo `expr 2 + 2` # 输出4
```
成立返回1，不成立返回0
在 MAC 中 shell 的 expr 语法是：$((表达式))，此处表达式中的 "*" 不须要转义符号 ""
浮点数计算：bc
- echo "scale=2;1+1.2" | bc

几个经常使用命令

read命令
- 从标准输入中接收一行，并对修饰的变量赋值
- read -p "请输入一段文字:" -n 6 -t 5 -s password
  - -p 输入提示文字
  - -n 输入字符长度限制(达到6位，自动结束)
  - -t 输入限时
  - -s 隐藏输入内容
echo
- -e 开启转义，对字符串中的转义字符进行转义操做，不区分单双引号
printf
- ```
printf "%s" jim
```
test：通常用于替换中括号
- ```
test $num = $num2
```

流程控制

if . . . else

if condition
then
    command1 
elif condition1
then
    command2
else
    commandN
fi

for . . . in
- ```
for var in data
do
    command1
done
```
while
- ```
while condition
do
    command
done
```
until：与while相反操做，条件为true时退出循环

死循环

while ：
do
    command
done
# 使用true
while true
do
    command
done
# 使用for
for (( ; ; ))

case

case value in
value1)
    command1
;;
value2）
    command2
;;
*)
    command2
;;
esac

let执行一个或多个表达式

sed(Stream Editor)命令详解，对查找到的数据进行处理【点击例子】

# 语法格式：
sed [option] "pattern command" file_name
# 删除文件第一行
sed -i '1d' file_name

option选项
- n:只输出匹配的行
- e:须要匹配的条件，能够指定多个-e "pattern command"
- f:指定sed文件，用于封装替换"pattern command"
- r:用于支持正则表达式
- 修改输出内容：sed -n 's/love/like/g;p' sed.txt
- i:修改源文件
pattern
- 可使用正则表达式
- 可使用变量，只要按照脚本使用变量就能够：双引号，$var_name
- 匹配/须要进行转义
- 按行匹配的时候，行数在后面若是小于前一个匹配模式，那么久只显示知足前一个条件的行
- =：显示行号
command
- a : 在匹配到行的下一行添加字符串
- i ：在匹配到行的上一行添加字符串
- r ：在匹配到行的下一行添加file内容
- w ：将匹配到的行写入文件
- d ：删除数据
- p ：打印数据
- g ：修改数据时所有匹配，3g表示从第三个开始所有修改，ig忽略大小写
- = ：显示匹配到的行号

反向引用

在使用替换字符的时候，修改内容使用&表示使用被替换的条件

# 在匹配到^la..jim的后面加shuai
# &：全匹配，\1：其使用了正则的分组，因此前面须要使用小括号括起来
sed -i 's/^la..jim/&shuai/g' sed.txt

命令详解

awk工做模式【点击例子】

# 语法格式：
awk 'BEGIN{}pattern{commands}END{}' file_name

适合文本处理和报表生成
命令详解

小例子

查询全部用户

for user in `cat /etc/passwd | cut -d ":" -f 1`
do
    echo "$user"
done

启动nginx

nginx_num_process=$(ps -ef | grep nginx | grep -v grep | wc -l)
if [ nginx_num_process -eq 0 ];then
    systemctl start nginx
fi

用户输入num,求1-num之和

while true
do
    read -p "pls input a positive number: " num
    expr $num + 1 &> /dev/null
    if [ $? -eq 0 ];then
        if [ `expr $num \> 0` -eq 1 ];then
            for((i=1;i<=$num;i++))
            do
                sum=`expr $sum + $i`
            done    
            echo "1+2+3+....+$num = $sum"
            exit
        fi
    fi
    echo "error,input enlegal"
    continue
done

检查Nginx是否正常运行，宕机则启动它

this_pid=$$

while true
do
ps -ef | grep nginx | grep -v grep | grep -v $this_pid &> /dev/null

if [ $? -eq 0 ];then
    echo "Nginx is running well"
    sleep 3
else
    systemctl start nginx
    echo "Nginx is down,Start it...."
fi
done

查找mysql配置文件中有几段

FILE_NAME=/root/lesson/5.6/my.cnf
function get_all_segments
{
    echo "`sed -n '/\[.*\]/p' $FILE_NAME  | sed -e 's/\[//g' -e 's/\]//g'`"
}
function count_items_in_segment
{
    items=`sed -n '/\['$1'\]/,/\[.*\]/p' $FILE_NAME | grep -v "^#" | grep -v "^$" | grep -v "\[.*\]"`
    index=0
    for item in $items
    do
        index=`expr $index + 1`
    done
    echo $index
}
number=0
for segment in `get_all_segments`
do
    number=`expr $number + 1`
    items_count=`count_items_in_segment $segment`
    echo "$number: $segment  $items_count"
done

删除配置文件中全部的注释行和空行

sed -i '/[:blank:]*#/^$/d' config.cnf

在非#注释行前加*

sed -i 's/^[^#]/\*&/g' config.cnf

文本格式化数据插入mysql

user=""
password=""
host=""
mysql_conn="mysql -u"$user" -p"$password" -h"$host""
IFS="：" # 内置分隔符变量
cat data.txt | while read id name birth sex
do
  $mysql_conn -e "insert into school values('$id','$name','$birth','$sex')"
done

脚本使用ftp

ftp -inv << EOF
open ftp_ip_addr
user user_name password

put file_name
bye
EOF #必须顶格写

小东东

nohub + & 后台启动： nohub不间断的运行程序，关闭窗口也不会关闭进程，&用于后台运行
netstat -tnlp | grep port ：通常用于查看端口
&&当左侧的命令返回0(成功)才会执行右侧命令
cut -d ":"制定分隔符
free -m：内存使用状况
df -h:磁盘使用状况
n >& m：将输出文件 m 和 n 合并
n <& m：将输入文件 m 和 n 合并
<< tag：将开始标记 tag 和结束标记 tag 之间的内容做为输入
grep -E等同于egrep，用于扩展支持正则表达式
cat -n file显示行号输出
/sbin/nologin 不能够登录的用户
[:blank:]表示空格
^$表示空行
sh -x能够查看执行过程
根据其余表的结构建立新表
- create table new_table like other_table
mysql -B不显示边框 -E表示垂直显示 -H输出html -X输出xml -N不显示列名
mysqldumps备份mysql
- d :只导出表结构
- t ：只导出数据，不导出建表语句
- A ：导出全部数据库
- B ：导出一个或者多个数据库
crontab定时任务