大数据教程（2.7）：Linux脚本shell编程入门

    工做中，咱们玩过服务器的人都知道，在linux系统中程序的启动通常都是经过运行一个Shell脚原本实现的；Shell脚本不光在启动程序方面有所做为，在大数据、自动化脚本等方面都是咱们的必备知识之一。Shell脚本究竟是一种什么样的语言？能干啥呢？接下来博主将为你们详细讲述，并带领你们深刻到linux编程中一探究竟。

1、Shell概念

    Shell是用户与内核进行交互操做的一种接口，目前最流行的Shell称为bash Shell；Shell也是一门编程语言<解释型的编程语言>，即Shell脚本；一个系统能够存在多个Shell，能够经过cat /etc/shells命令查看系统中安装的shell，不一样的shell可能支持的命令语法是不相同的。

2、shell入门详解

（1）shell脚本的执行：

        第一种：输入脚本的绝对路径或相对路径（首先要赋予+x权限）执行    

                    /root/helloWorld.sh

                    . /helloWorld.sh

        

        第二种：bash或sh +脚本执行

                    sh /root/helloWorld.sh   

                    sh helloWorld.sh

        第三种：在脚本的路径前再加". "，表示在当前的shell进程中执行(pstree能够查看进程之间的派生关系)

                    . /root/helloWorld.sh     . ./helloWorld.sh

        区别：第一种和第二种会新开一个bash，不一样bash中的变量没法共享。

        扩展知识：pstree命令以树状图的方式展示进程之间的派生关系，显示效果比较直观。

        语法：pstree    (选项)

        选项：

                    -a：显示每一个程序的完整指令，包含路径，参数或是常驻服务的标示；
                    -c：不使用精简标示法；
                    -G：使用VT100终端机的列绘图字符；
                    -h：列出树状图时，特别标明如今执行的程序；
                    -H<程序识别码>：此参数的效果和指定"-h"参数相似，但特别标明指定的程序；
                    -l：采用长列格式显示树状图；
                    -n：用程序识别码排序。预设是以程序名称来排序；
                    -p：显示程序识别码；
                    -u：显示用户名称；
                    -U：使用UTF-8列绘图字符；
                    -V：显示版本信息。

        实例：显示当前全部进程的进程号和进程id

                     pstree -p

                     显示全部进程的全部详细信息，遇到相同的进程名能够压缩显示。

                     pstree  -a

          效果图  

（2）Shell中的变量

         Linux Shell中的变量分为“系统变量”和“用户自定义变量”，能够经过set命令查看全部系统变量

系统变量：$HOME、$PWD、$SHELL、$USER等等

显示当前shell中全部变量  :    set

（3）定义变量

        STR="hello world"

        A=9

        unset A 撤销变量

        A readonly B=2 声明静态的变量 B=2 ，不能 unset

        export 变量名 可把变量提高为全局环境变量，可供其余shell程序使用

（4）将命令的返回值赋给变量

        A=`ls -la` 反引号，运行里面的命令，并把结果返回给变量A

        A=$(ls -la) 等价于反引号

（5）Shell中的特殊变量

        $? 表示上一个命令退出的状态
        $$ 表示当前进程编号
        $0 表示当前脚本名称
        $n 表示n位置的输入参数（n表明数字，n>=1）
        $#     表示参数的个数，经常使用于循环
        $*和$@ 都表示参数列表 

（6）$*与$@区别

        $* 和 $@ 都表示传递给函数或脚本的全部参数，不被双引号" "包含时，都以$1  $2  … $n 的形式输出全部参数 

        当它们被双引号" "包含时，"$*" 会将全部的参数做为一个总体，以"$1 $2 … $n"的形式输出全部参数；"$@" 会将各个参数分开，以"$1" "$2" … "$n" 的形式输出全部参数

（7）运算符

         格式 :expr m + n 或$((m+n)) 注意expr运算符间要有空格

         例如计算（2 ＋3 ）×4 的值

         分步计算

             S=`expr 2 + 3`   

             expr $S \* 4

         一步完成计算

             expr `expr 2 + 3 ` \* 4     

             echo `expr \`expr 2 + 3\` \* 4`     

             或     $(((2+3)*4))

（8）for循环

            第一种： for N in 1 2 3

                          do   

                          echo $N

                          done

                  或 ：for N in 1 2 3;

                          do

                          echo $N;

                          done

                  或 ：for N in {1..3};

                         do

                         echo $N;

                         done

            第二种

                        for ((i = 0; i <= 5; i++))
                        do
                        echo "welcome $i times"
                        done
                    或
                        for ((i = 0; i <= 5; i++));   do  echo "welcome $i times";

                        done

（9）while循环

           第一种

                       while expression

                       do command

                        …

                       done

            第二种

                        i=1

                        while ((i<=3))

                        do  

                        echo $i  

                        let i++

                        done

（10）case语句

                  格式 case $1 in

                          start)     

                          echo "starting"     

                          ;;

                          stop)   

                          echo "stoping"     

                            ;;

                          *)   

                          echo "Usage: {start|stop} “

                          esac

（11）read命令

                read -p(提示语句)-n(字符个数) -t(等待时间)     

                read -p "please input your name: " NAME

                使用示例：   

（12）if判断

    语法 if condition

                then statements

            [elif condition

                then statements. ..]

            [else

                statements ]

             fi

        if例子

            #!/bin/bash
            read -p "please input your name:" NAME
            #printf '%s\n' $NAME
            if [ $NAME = root ]
            then
                echo "hello ${NAME},  welcome !"
            elif [ $NAME = itcast ]
                then
                        echo "hello ${NAME},  welcome !"
            else
                echo "SB, get out here !"
            fi

（13）判断语句

        [ condition ] (注意condition先后要有空格)

        #非空返回true，可以使用$?验证（0为true，>1为false）

        [ itcast ]

        #空返回false

         [  ]

         [ condition ] && echo OK || echo notok     条件知足，执行后面的语句           

（14）经常使用判断条件

    = 字符串比较
    -lt 小于
    -le 小于等于 
    -eq 等于
    -gt 大于
    -ge 大于等于
    -ne 不等于

    -r 有读的权限
    -w 有写的权限
    -x 有执行的权限
    -f 文件存在而且是一个常规的文件
    -s 文件存在且不为空
    -d 文件存在并是一个目录
    -b文件存在而且是一个块设备
    -L 文件存在而且是一个连接

（15）Shell自定义函数

注意
    1.必须在调用函数地方以前，先声明函数，shell脚本是逐行运行。不会像其它语言同样先预编译
    2.函数返回值，只能经过$? 系统变量得到，能够显示加：return 返回，若是不加，将以最后一条命令运行结果，做为返回值。 return后跟数值n(0-255)

脚本调试

    sh -vx helloWorld.sh
    或者在脚本中增长set -x
（16）sed命令

sed全称是：Stream EDitor即流编辑器，是一个很好的文本处理工具，自己是一个管道命令，处理时，把当前处理的行存储在临时缓冲区中，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行。它是以行为单位进行处理，能够将数据行进行替换、删除、新增、选取等特定工做。

sed选项

    -n ：使用安静(silent)模式。在通常 sed 的用法中，全部来自 STDIN 的数据通常都会被列出到终端上。但若是加 上 n 参数后，则只有通过sed 特殊处理的那一行(或者动做)才会被列出来。
    -e ：直接在命令列模式上进行 sed 的动做编辑；
    -i ：直接修改读取的文件内容，而不是输出到终端。

sed function

    a ：新增， a 的后面能够接字串，而这些字串会在新的一行出现(目前的下一行)
    d ：删除，由于是删除啊，因此 d 后面一般不接任何内容
    i ：插入， i 的后面能够接字串，而这些字串会在新的一行出现(目前的上一行)
    p ：列印，亦即将某个选择的数据印出。一般 p 会与参数 sed -n 一块儿运行
    s ：取代，能够直接进行取代的工做！一般这个 s 的动做能够搭配正规表示法！例如 1,20s/old/new/g

（17）awk命令

    AWK是一种优良的文本处理工具。其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母，AWK 提供了极其强大的功能：能够进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具有了一个完整的语言所应具备的几乎全部精美特性。实际上 AWK 的确拥有本身的语言：AWK 程序设计语言， 三位建立者已将它正式定义为“样式扫描和处理语言”。它容许您建立简短的程序，这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表，还有无数其余的功能。

    awk命令格式：awk 'pattern1 {action1} pattern2 {action2} ...' filename

 

    最后：以上是linux中shell编程入门的所有内容；若是你对这块知识感兴趣，请持续关注博主文章，同时欢迎同博主交流。