sort是在Linux里很是经常使用的一个命令,管排序跨域
sort将文件的每一行做为一个单位,相互比较,比较原则是从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。app
使用方法:sort [选项]... [文件]...ide
长选项必须用的參数在使用短选项时也是必须的。顺序选项:学习
-b, --ignore-leading-blanks ignore leading blanks -d, --dictionary-order consider only blanks and alphanumeric characters -f, --ignore-case fold lower case to upper case characters -g, --general-numeric-sort compare according to general numerical value -i, --ignore-nonprinting consider only printable characters -M, --month-sort compare (unknown) < `JAN' < ... < `DEC' -n, --numeric-sort compare according to string numerical value -r, --reverse reverse the result of comparisons Other options: -c, --check check whether input is sorted; do not sort -k, --key=POS1[,POS2] start a key at POS1, end it at POS2 (origin 1) -m, --merge merge already sorted files; do not sort -o, --output=FILE write result to FILE instead of standard output -s, --stable stabilize sort by disabling last-resort comparison -S, --buffer-size=SIZE use SIZE for main memory buffer -t, --field-separator=SEP use SEP instead of non-blank to blank transition -T, --temporary-directory=DIR use DIR for temporaries, not $TMPDIR or/tmp; multiple options specify multiple directories -u, --unique with -c, check for strict ordering; without -c, output only the first of an equal run -z, --zero-terminated end lines with 0 byte, not newline --help 显示此帮助信息并退出 --version 输出版本号信息并退出
sort的-u选项google
在输出行中去除重复行.net
[ericshenMacPro@root duweixin]$ cat duweixin.net.txt banana apple pear orange pear [ericshenMacPro@root duweixin]$ sort duweixin.net.txt apple banana orange pear pear [ericshenMacPro@root duweixin]$ sort -u duweixin.net.txt apple banana orange pear
pear因为重复被-u选项无情的删除了。code
sort的-r选项排序
sort默认的排序方式是升序,若是想改为降序,就加个-r。ip
[ericshenMacPro@root duweixin]$ cat duweixin.net.txt 1 3 5 2 4 [ericshenMacPro@root duweixin]$ sort duweixin.net.txt 1 2 3 4 5 #倒序加-r [ericshenMacPro@root duweixin]$ sort -r duweixin.net.txt 5 4 3 2 1
sort的-o选项ci
因为sort默认是把结果输出到标准输出,因此须要用重定向才能将结果写入文件,形如sort oldfile > newfile
可是,若是你想把排序结果输出到原文件中,用重定向可就不行了。
[ericshenMacPro@root duweixin]$ sort -r duweixin.txt > duweixin.txt
[ericshenMacPro@root duweixin]$ cat duweixin.txt
[ericshenMacPro@root duweixin]$
看,居然将duweixin清空了。
加上-o选项,解决了这个问题,让你放心的将结果写入原文件。
[ericshenMacPro@root duweixin]$ cat number.txt 1 3 5 2 4 [ericshenMacPro@root duweixin]$ sort -r number.txt -o number.txt [ericshenMacPro@root duweixin]$ cat number.txt 5 4 3 2 1
sort的-n选项
你有没有遇到过10比2小的状况。我反正遇到过。出现这种状况是因为排序程序将这些数字按字符来排序了,排序程序会先比较1和2,显然1小,因此就将10放在2前面喽。这也是sort的一向做风。
咱们若是想改变这种现状,就要使用-n选项,来告诉sort,“要以数值来排序”!
[ericshenMacPro@root duweixin]$ cat duweixin.net.txt 1 10 19 11 2 5 [ericshenMacPro@root duweixin]$ sort duweixin.net.txt 1 10 11 19 2 5 [ericshenMacPro@root duweixin]$ sort -n duweixin.net.txt 1 2 5 10 11 19
sort的-t选项和-k选项
若是有一个文件的内容是这样:
[ericshenMacPro@root duweixin]$ cat facebook.txt banana:30:5.5 apple:10:2.5 pear:90:2.3 orange:20:3.4
这个文件有三列,列与列之间用冒号隔开了,第一列表示水果类型,第二列表示水果数量,第三列表示水果价格。
那么我想以水果数量来排序,也就是以第二列来排序,如何利用sort实现?
幸亏,sort提供了-t选项,后面能够设定间隔符。(是否是想起了cut和paste的-d选项,共鸣~~)
指定了间隔符以后,就能够用-k来指定列数了。
[ericshenMacPro@root duweixin]$ sort -n -k 2 -t : facebook.txt apple:10:2.5 orange:20:3.4 banana:30:5.5 pear:90:2.3
咱们使用冒号做为间隔符,并针对第二列来进行数值升序排序,结果很使人满意。
其余的sort经常使用选项
-f会将小写字母都转换为大写字母来进行比较,亦即忽略大小写
-c会检查文件是否已排好序,若是乱序,则输出第一个乱序的行的相关信息,最后返回1
-C会检查文件是否已排好序,若是乱序,不输出内容,仅返回1
-M会以月份来排序,好比JAN小于FEB等等
-b会忽略每一行前面的全部空白部分,从第一个可见字符开始比较。
有时候学习脚本,你会发现sort命令后面跟了一堆相似-k1,2,或者-k1.2
-k3.4的东东,有些匪夷所思。今天,咱们就来搞定它—-k选项!
多列排序
1、准备素材
第一个域是公司名称,第二个域是公司人数,第三个域是员工平均工资。
$ cat duweixin.net.txt google 110 5000 baidu 100 5000 guge 50 3000 sohu 100 4500
2、 我想让这个文件按公司的字母顺序排序,也就是按第一个域进行排序:(这个duweixin.net.txt文件有三个域)
$ sort -t ‘ ‘ -k 1 duweixin.net.txt baidu 100 5000 google 110 5000 guge 50 3000 sohu 100 4500
就直接用-k 1设定就能够了。(其实此处并不严格,稍后你就会知道)
3、我想让duweixin.net.txt按照公司人数排序
$ sort -n -t ‘ ‘ -k 2 duweixin.net.txt guge 50 3000 baidu 100 5000 sohu 100 4500 google 110 5000
可是,此处出现了问题,那就是baidu和sohu的公司人数相同,都是100人,这个时候怎么办呢?按照默认规矩,是从第一个域开始进行升序排序,所以baidu排在了sohu前面。
4、我想让facebook.txt按照公司人数排序 ,人数相同的按照员工平均工资升序排序:
$ sort -n -t ‘ ‘ -k 2 -k 3 duweixin.net.txt guge 50 3000 sohu 100 4500 baidu 100 5000 google 110 5000
加了一个-k2 -k3就解决了问题。对滴,sort支持这种设定,就是说设定域排序的优先级,先以第2个域进行排序,若是相同,再以第3个域进行排序。
5、我想让facebook.txt按照员工工资降序排序,若是员工人数相同的,则按照公司人数升序排序
$ sort -n -t ‘ ‘ -k 3r -k 2 duweixin.net.txt baidu 100 5000 google 110 5000 sohu 100 4500 guge 50 3000
此处有使用了一些小技巧,你仔细看看,在-k 3后面偷偷加上了一个小写字母r。你想一想,再结合咱们上一篇文章,能获得答案么?揭晓:r和-r选项的做用是同样的,就是表示逆序。由于sort默认是按照升序排序的,因此此处须要加上r表示第三个域(员工平均工资)是按照降序排序。此处你还能够加上n,就表示对这个域进行排序时,要按照数值大小进行排序,举个例子吧:
$ sort -t ‘ ‘ -k 3nr -k 2n duweixin.net.txt baidu 100 5000 google 110 5000 sohu 100 4500 guge 50 3000
去掉了最前面的-n选项,而是将它加入到了每个-k选项中了。
6、-k选项的具体语法格式
要继续往下深刻的话,就不得不来点理论知识。你须要了解-k选项的语法格式,以下:
[ FStart [ .CStart ] ] [ Modifier ] [ , [ FEnd [ .CEnd ] ][ Modifier ] ]
这个语法格式能够被其中的逗号(“,”)分为两大部分,Start部分和End部分。
先给你灌输一个思想,那就是“若是不设定End部分,那么就认为End被设定为行尾”。这个概念很重要的,但每每你不会重视它。
Start部分也由三部分组成,其中的Modifier部分就是咱们以前说过的相似n和r的选项部分。咱们重点说说Start部分的FStart和C.Start。
C.Start也是能够省略的,省略的话就表示从本域的开头部分开始。以前例子中的-k 2和-k 3就是省略了C.Start的例子喽。
FStart.CStart,其中FStart就是表示使用的域,而CStart则表示在FStart域中从第几个字符开始算“排序首字符”。
同理,在End部分中,你能够设定FEnd.CEnd,若是你省略.CEnd,则表示结尾到“域尾”,即本域的最后一个字符。或者,若是你将CEnd设定为0(零),也是表示结尾到“域尾”。
7、从公司英文名称的第二个字母开始进行排序:
$ sort -t ‘ ‘ -k 1.2 duweixin.net.txt baidu 100 5000 sohu 100 4500 google 110 5000 guge 50 3000
使用了-k 1.2,这就表示对第一个域的第二个字符开始到本域的最后一个字符为止的字符串进行排序。你会发现baidu由于第二个字母是a而名列榜首。sohu和 google第二个字符都是o,但sohu的h在google的o前面,因此二者分别排在第二和第三。guge只能屈居第四了。
8、只针对公司英文名称的第二个字母进行排序,若是相同的按照员工工资进行降序排序:
$ sort -t ‘ ‘ -k 1.2,1.2 -k 3,3nr duweixin.net.txt baidu 100 5000 google 110 5000 sohu 100 4500 guge 50 3000
因为只对第二个字母进行排序,因此咱们使用了-k 1.2,1.2的表示方式,表示咱们“只”对第二个字母进行排序。(若是你问“我使用-k 1.2怎么不行?”,固然不行,由于你省略了End部分,这就意味着你将对从第二个字母起到本域最后一个字符为止的字符串进行排序)。对于员工工资进行排 序,咱们也使用了-k 3,3,这是最准确的表述,表示咱们“只”对本域进行排序,由于若是你省略了后面的3,就变成了咱们“对第3个域开始到最后一个域位置的内容进行排序” 了。
9、在modifier部分还能够用到哪些选项?
能够用到b、d、f、i、n 或 r。
其中n和r你确定已经很熟悉了。
b表示忽略本域的签到空白符号。
d表示对本域按照字典顺序排序(即,只考虑空白和字母)。
f表示对本域忽略大小写进行排序。
i表示忽略“不可打印字符”,只针对可打印字符进行排序。(有些ASCII就是不可打印字符,好比a是报警,b是退格,n是换行,r是回车等等)
10、思考思考关于-k和-u联合使用的例子:
$ cat duweixin.net.txt google 110 5000 baidu 100 5000 guge 50 3000 sohu 100 4500
这是最原始的duweixin.net.txt文件。
$ sort -n -k 2 duweixin.net.txt guge 50 3000 baidu 100 5000 sohu 100 4500 google 110 5000 $ sort -n -k 2 -u duweixin.net.txt guge 50 3000 baidu 100 5000 google 110 5000
当设定以公司员工域进行数值排序,而后加-u后,sohu一行就被删除了!原来-u只识别用-k设定的域,发现相同,就将后续相同的行都删除。
$ sort -k 1 -u duweixin.net.txt baidu 100 5000 google 110 5000 guge 50 3000 sohu 100 4500 $ sort -k 1.1,1.1 -u duweixin.net.txt baidu 100 5000 google 110 5000 sohu 100 4500
这个例子也同理,开头字符是g的guge就没有幸免于难。
$ sort -n -k 2 -k 3 -u duweixin.net.txt guge 50 3000 sohu 100 4500 baidu 100 5000 google 110 5000
咦!这里设置了两层排序优先级的状况下,使用-u就没有删除任何行。原来-u是会权衡全部-k选项,将都相同的才会删除,只要其中有一级不一样都不会轻易删除的:)(不信,你能够本身加一行sina 100 4500试试看)
11、最诡异的排序:
$ sort -n -k 2.2,3.1 duweixin.net.txt guge 50 3000 baidu 100 5000 sohu 100 4500 google 110 5000
以第二个域的第二个字符开始到第三个域的第一个字符结束的部分进行排序。
第一行,会提取0 3,第二行提取00 5,第三行提取00 4,第四行提取10 5。
又由于sort认为0小于00小于000小于0000….
所以0 3确定是在第一个。10 5确定是在最后一个。但为何00 5却在00 4前面呢?(你能够本身作实验思考一下。)
答案揭晓:原来“跨域的设定是个假象”,sort只会比较第二个域的第二个字符到第二个域的最后一个字符的部分,而不会把第三个域的开头字符归入比较范围。当发现00和00相同时,sort就会自动比较第一个域去了。固然baidu在sohu前面了。用一个范例便可证明:
$ sort -n -k 2.2,3.1 -k 1,1r duweixin.net.txt guge 50 3000 sohu 100 4500 baidu 100 5000 google 110 5000