sort命令,只是对文件排行排序
选项意义
-c 测试文件是否已经被排序
-k 指定排序的区域(常用)
-m 合并两个已排序的文件
-n 根据数字大小进行排序(常用)
-o 将输出写到指定文件,相当于重定向输出文件
-r 将排序结果逆向显示
-t 改变区域分隔符(常用)
-u 去除结果中的重复行
格式:sort 选项输入文件
下面详细解说:
-t选项——原理从第一区域开始排序,若第一区域内容相同,则以第二区域排序
-k
12345678910
[root@localhost ~]aa:ff:kkbb:qq:ggdd:ee:wwxx cc[root@localhost ~]xx ccbb:qq:ggaa:ff:kkdd:ee:ww可以留意到,从第三区域才开始排序,前2个区域是没有排序,而-t就以:为分隔符
也可以用sort -t: -k3 /etc/passwd
12345678910
[root@localhost ~]root:x:0:0:root:/root:/bin/bashuucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologinoperator:x:11:0:operator:/root:/sbin/nologinbin:x:1:1:bin:/bin:/sbin/nologingames:x:12:100:games:/usr/games:/sbin/nologingopher:x:13:30:gopher:/var/gopher:/sbin/nologinftp:x:14:50:FTP User:/var/ftp:/sbin/nologindaemon:x:2:2:daemon:/sbin:/sbin/nologinsquid:x:23:23::/var/spool/squid:/sbin/nologin这样第3区域刚好是UID就会排序,但会发现这里只以第一个字符大小进行排序,而不会以整体大小排序
如:这样只达到第1个字符进行排序,而不是对整个数进行排序
1 1
400 400
67 501
89 602
501 67
602 89
-n选项,为指定列的数字大小,属于整体性质来排序
如:
900 3
60 60
3 100
100 900
123456789101112131415
[root@localhost ~]900:aa60:bb3:rr100:pp[root@localhost ~]100:pp3:rr60:bb900:aa[root@localhost ~]3:rr60:bb100:pp900:aa可以看出,加了-n是对整体排序,而不加-n则只以单个字符排序
所以用 sort -t: -k3n /etc/passwd 这样就可以对UID进行从小到大排序了
-r是反向,从大到小排序
12345678910
[root@localhost ~]900:aa60:bb3:rr100:pp[root@localhost ~]900:aa100:pp60:bb3:rr-u选项,去除重复出现的区域
12345678
[root@localhost ~]900:aa900:aa900:aa60:bb[root@localhost ~]60:bb900:aa其中重复了2行的900:aa就不会显示出来
-o为定向输出,但直接用>来代替就行了,这个选项很少用
-m为排序后2个文件合并,前提2个文件内容没有重复
12345678910111213
[root@localhost ~]555:rr900:aa60:bb[root@localhost ~]xxxxxxxx[root@localhost ~]555:rr900:aa60:bbxxxxxxxx这样就把abc的内容全部到aaa里了
其实还可以简写为sort -t: abc aaa 就行了
也可以按2个文件的区域进行排序
12345678910111213
[root@localhost ~]555:rr900:aa60:bb[root@localhost ~]777:xxx444444:xxxxx[root@localhost ~]60:bb555:rr777:xxx900:aa444444:xxxxx这样就达到2个文件内容合并后再进行区域排序
sort命令就介绍到这里
uniq命令——用于去除重复行,其实跟sort -u差不多
选项意义
-c 打印每行在文本中重复出现的次数
-d 只显示有重复的记录,每个重复记录只出现一次
-u 只显示没有重复的记录
12345678
[root@localhost ~]555:rr555:rr555:rr60:bb[root@localhost ~]555:rr60:bb去除2行重内容
与sort -u的区别,sort -u只会把重复行删除剩下1个
1234567891011121314151617181920
[root@localhost ~]555:rr555:rr555:rr60:bb60:bbshow me555:rrhello[root@localhost ~]555:rr60:bbhelloshow me[root@localhost ~]555:rr60:bbshow me555:rrhello可以留意到,uniq只是把连续重复的行删除,第4行的555:rr是没有删除,但sort -u则认为都是重复,所以一并删除
-C为打印文本中出现重复的次数
123456
[root@localhost ~]3 555:rr2 60:bb1 show me1 555:rr1 hello可以显示出重复的次数
-d只打印连续重复的记录
123456789101112
[root@localhost ~]555:rr555:rr555:rr60:bb60:bbshow me555:rrhello[root@localhost ~]555:rr60:bb只显示出连续重复的行记录
-u只打印没有连续重复的记录
12345678910111213
[root@localhost ~]555:rr555:rr555:rr60:bb60:bbshow me555:rrhello[root@localhost ~]show me555:rrhello其实-d和-u是正反向的对比效果
cut命令——用于从标准输入或文本文件中按区域或行提取文本
格式:cut 选项文件
选项意义
-c 指定提取的字符数或字符范围
-f 指定提取的区域数或范围
-d 改变区域分隔符
12345678910111213141516
[root@localhost ~]555:rr60:bbhello:333[root@localhost ~]56h[root@localhost ~]555:r60:bbhello[root@localhost ~]5:0bel-c1只提取abc文件中第一个字符的列,而-c1-5即代表1-5个字符的列,-c2,4即代表第2和第4个字符的列
-d指定分隔符,-f为指定区域,这2个参数通常要一起使用
12345678
[root@localhost ~]555:rr60:bbhello:333[root@localhost ~]rrbb333感觉跟awk的截取差不多
空格也可以用cut -d “ ” 来表示
123456
[root@localhost ~]777 xxx444444 xxxxx[root@localhost ~]xxxxxxxx使用cut来截取IP也行
12
[root@localhost ~]192.168.1.1这方法的原理跟awk一样,就是先过滤IP字段,再以:为分区过滤,再过滤出第1区域
也可以结合sort来使用对UID进行排序
123456789101112
[root@localhost ~]squid:x:23:23::/var/spool/squid:/sbin/nologinxfs:x:43:43:X Font Server:/etc/X11/fs:/sbin/nologinsabayon:x:86:86:Sabayon user:/home/sabayon:/sbin/nologinleon:x:500:500::/home/leon:/bin/bashtom:x:501:501::/home/tom:/bin/bash[root@localhost ~]234386500501这样就把UID部分单独截取出来进行排序,当然用awk也能实现的
paste命令——把两个文件内容粘贴一起
选项意义
-d 指定分隔符,默认是以tab键为分隔符
-s 将每个文件粘贴成一行
123456789101112
[root@localhost ~]aaabbbccc[root@localhost ~]111222333[root@localhost ~]aaa 111bbb 222ccc 333可以留意到粘贴后,是以空格为分隔符
12345
[root@localhost ~][root@localhost ~]aaa 111bbb 222ccc 333当然也可以排粘贴后的结果输出到另一个文件也行
1234567
[root@localhost ~]777 xxx444444 xxxxx[root@localhost ~]555:rr?777 xxx60:bb?444444 xxxxxhello:333?-d为指定分隔,因为默认是以tab键为分隔符,现在改变了分隔符?,注意,分隔符只能指定1个字符,不能指定多个字符,如-d***,这样的效果只能是-d*
1234567891011
[root@localhost ~]aaabbbccc[root@localhost ~]111222333[root@localhost ~]aaa bbb ccc111 222 333-s可以排两个文件以的内容分别以一行方式排列再合并,但效果不好看
tr命令——实现字符转换功能,其功能类似于sed命令,但tr命令比较简单
格式:tr 选项字符串1 字符串2 <标准输入文件,也可以使用管道
选项意义
-c 选定字符串1中字符集的补集,即反选字符串1中的字符集
-d 删除字符串1中出现的所有字符(常用)
-s 删除所有重复出现的字符序列,只保留一个
tr命令要么在管道后面使用,要么在标准输入”<”使用
12345678
[root@localhost ~]555:rr60:bbhello:333[root@localhost ~]:rr60:bbhello:333从abc中标准输入,然后匹配到555字符串就删除,-d是删除字符串
[root@localhost~]# cat abc
555:rRAd
60:bB
heLLo:333
[root@localhost~]# tr -d A-Z < abc
555:rd
60:b
heo:333
从abc文本中删除大写A-Z范围的字符串
同理,也可以删除数字0-9的范围
12345678
[root@localhost ~]555:rRAd60:bBheLLo:333[root@localhost ~]:rRAd:bBheLLo:这样0-9范围的数字就被删除
-s为删除重复的字符,只保留1个
12345678
[root@localhost ~]aaabbbccc[root@localhost ~]abccc指定的条件是a,b这两个重复的字符,然后删除重复只保留1个
删除文本中有多个空白行
12345678
[root@localhost ~]aaabbbccc[root@localhost ~]aaabbbccc把空白行都删除,这里\n是代表换行的意思
也可以指定范围进行删除
123456
[root@localhost ~]WinnnneNrrrrTteeemmm222223333441234[root@localhost ~]WineNrTtem2341234可以看到,只删除剩1个的重复字符
若上面的命令改成 tr “[a-z][0-9]” < abc
123456
[root@localhost ~]WinnnneNrrrrTteeemmm222223333441234[root@localhost ~]9innnne9rrrr9teeemmm222223333441234这也可以匹配凡是大写的字符都更改为9,注意更改的字符只能是单个,不能是多个,如:
tr“[A-Z]” “999” < abc 这样的效果也只能替换1个9的字符而不能是多个
使用管道方式用tr命令
1234
[root@localhost ~]inet addr:192.168.1.1 Bcast:192.168.1.255 Mask:255.255.255.0[root@localhost ~]inet addr:2.68.. Bcast:2.68..255 Mask:255.255.255.0这样匹配19的字符都全部删除
文件的排序、合并就介绍到这里