linux基础命令介绍五：文本过滤 grep

xman

　　在linux中经常需要对文本或输出内容进行过滤，最常用的过滤命令是grep

1. grep [OPTIONS] PATTERN [FILE...]
   
2. grep按行检索输入的每一行，如果输入行包含模式PATTERN，则输出这一行。这里的PATTERN是正则表达式(参考前一篇，本文将结合grep一同举例)。
   
3. 输出文件/etc/passwd中包含root的行：
   
4. [root@centos7 temp]# grep root /etc/passwd
   
5. root:x:0:0:root:/root:/bin/bash
   
6. operator:x:11:0:operator:/root:/sbin/nologin  
   
7. 或者从标准输入获得：
   
8. [root@centos7 temp]# cat /etc/passwd | grep root
   
9. root:x:0:0:root:/root:/bin/bash
   
10. operator:x:11:0:operator:/root:/sbin/nologin  
    
11. 需要注意的地方是：当grep的输入既来自文件也来自标准输入时，grep将忽略标准输入的内容不做处理，除非使用符号-来代表标准输入：
    
12. [root@centos7 temp]# cat /etc/passwd | grep root /etc/passwd -
    
13. /etc/passwd:root:x:0:0:root:/root:/bin/bash
    
14. /etc/passwd:operator:x:11:0:operator:/root:/sbin/nologin
    
15. (标准输入):root:x:0:0:root:/root:/bin/bash
    
16. (标准输入):operator:x:11:0:operator:/root:/sbin/nologin
    
17. 此时，grep会标明哪些结果来自于文件哪些来自于标准输入。
    
18. 输出文件/etc/passwd和文件/etc/group中以root开头的行：
    
19. [root@centos7 temp]# grep "^root" /etc/passwd /etc/group
    
20. /etc/passwd:root:x:0:0:root:/root:/bin/bash
    
21. /etc/group:root:x:0:  
    
22. 输出文件/etc/passwd中以/bin/bash结尾的行：
    
23. [root@centos7 temp]# grep "/bin/bash$" /etc/passwd
    
24. root:x:0:0:root:/root:/bin/bash
    
25. learner:x:1000:1000::/home/learner:/bin/bash  
    
26. 注意以上两个例子中PATTERN被双引号引用起来以防止被shell解析。
    
27. 输出文件/etc/passwd中不以a-s中任何一个字母开头的行：
    
28. [root@centos7 temp]# grep "^[^a-s]" /etc/passwd  
    
29. tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologin
    
30. tcpdump:x:72:72::/:/sbin/nologin  
    
31. 这里需要理解两个^间不同的含义，第一个^表示行首，第二个在[]内部的首个字符^表示取反。
    
32. 输出文件/etc/passwd中字符0连续出现3次及以上的行(注意转义字符'\')：
    
33. [root@centos7 temp]# grep "0\{3,\}" /etc/passwd
    
34. learner:x:1000:1000::/home/learner:/bin/bash  
    
35. 如输出文件/etc/passwd中以字符r或l开头的行：
    
36. [root@centos7 temp]# grep "^[r,l]" /etc/passwd
    
37. root:x:0:0:root:/root:/bin/bash
    
38. lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    
39. learner:x:1000:1000::/home/learner:/bin/bash  
    
40. 选项-i使grep在匹配模式时忽略大小写：
    
41. [root@centos7 temp]# grep -i abcd file  
    
42. ABCD
    
43. function abcd() {
    
44. [root@centos7 temp]#  
    
45. 选项-o表示只输出匹配的字符，而不是整行：
    
46. [root@centos7 temp]# grep -oi abcd file  
    
47. ABCD
    
48. abcd
    
49. [root@centos7 temp]#  
    
50. 选项-c统计匹配的行数：
    
51. [root@centos7 temp]# grep -oic abcd file  
    
52. 2
    
53. [root@centos7 temp]#  
    
54. 选项-v表示取反匹配，如输出/etc/passwd中不以/sbin/nologin结尾的行：
    
55. [root@centos7 temp]# grep -v "/sbin/nologin$" /etc/passwd
    
56. root:x:0:0:root:/root:/bin/bash
    
57. sync:x:5:0:sync:/sbin:/bin/sync
    
58. shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    
59. halt:x:7:0:halt:/sbin:/sbin/halt
    
60. learner:x:1000:1000::/home/learner:/bin/bash  
    
61. 选项-f FILE表示以文件FILE中的每一行作为模式匹配：
    
62. [root@centos7 temp]# cat test
    
63. abcd
    
64. ABCD
    
65. [root@centos7 temp]# grep -f test file  
    
66. ABCD
    
67. function abcd() {
    
68. [root@centos7 temp]#   
    
69. 选项-x表示整行匹配：
    
70. [root@centos7 temp]# grep -xf test file  
    
71. ABCD
    
72. [root@centos7 temp]#  
    
73. 选项-w表示匹配整个单词：
    
74. [root@centos7 temp]# grep here file
    
75. here
    
76. there
    
77. [root@centos7 temp]# grep -w here file
    
78. here
    
79. [root@centos7 temp]#   
    
80. 选项-h表示当多个文件时不输出文件名：
    
81. [root@centos7 temp]# cat /etc/passwd|grep ^root - /etc/passwd -h
    
82. root:x:0:0:root:/root:/bin/bash
    
83. root:x:0:0:root:/root:/bin/bash  
    
84. 选项-n表示显示行号：
    
85. [root@centos7 temp]# grep -n "^[r,l]" /etc/passwd
    
86. 1:root:x:0:0:root:/root:/bin/bash
    
87. 5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    
88. 24:learner:x:1000:1000::/home/learner:/bin/bash  
    
89. 选项-A N、-B N、-C N表示输出匹配行和其'周围行'
    
90. -A N 表示输出匹配行和其之后(after)的N行
    
91. -B N 表示输出匹配行和其之前(before)的N行
    
92. -C N 表示输出匹配行和其之前之后各N行
    
93. [root@centos7 temp]# grep -A 2 ^operator /etc/passwd
    
94. operator:x:11:0:operator:/root:/sbin/nologin
    
95. games:x:12:100:games:/usr/games:/sbin/nologin
    
96. ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
    
97. [root@centos7 temp]# grep -B2 ^operator /etc/passwd   
    
98. halt:x:7:0:halt:/sbin:/sbin/halt
    
99. mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    
100. operator:x:11:0:operator:/root:/sbin/nologin
     
101. [root@centos7 temp]# grep -C1 ^operator /etc/passwd   
     
102. mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
     
103. operator:x:11:0:operator:/root:/sbin/nologin
     
104. games:x:12:100:games:/usr/games:/sbin/nologin  
     
105. 选项-F视PATTERN为它的字面意思匹配(忽略字符的特殊含义)，等同于执行命令fgrep：
     
106. [root@centos7 temp]# grep -F ^root /etc/passwd
     
107. [root@centos7 temp]#   
     
108. 命令无输出
     
109. 选项-E可以使用扩展的正则表达式，如同执行egrep命令：
     
110. [root@centos7 temp]# egrep "^root|^learner" /etc/passwd
     
111. root:x:0:0:root:/root:/bin/bash
     
112. learner:x:1000:1000::/home/learner:/bin/bash  
     
113. 使用扩展正则表达式意味着不需要转义就能表示字符的特殊含义，包括?,+,{,|,(和)。
     
114. 选项-P表示使用perl的正则表达式进行匹配
     
115. 如：
     
116. [root@centos7 ~]# echo "helloworld123456"| grep -oP "\d+"
     
117. 123456
     
118. [root@centos7 ~]#  
     
119. perl正则中"\d"表示数字，+表示匹配一到多次(同vim)。
     
120. 选项-a将二进制文件当成文本文件处理：
     
121. [root@centos7 ~]# grep -a online /usr/bin/ls
     
122. %s online help: <%s>
     
123. [root@centos7 ~]#  
     
124. 选项--exclude=GLOB和--include=GLOB分别表示排除和包含匹配GLOB的文件，GLOB表示通配符(find及xargs用法见基础命令介绍三)：
     
125. [root@centos7 temp]# find . -type f | xargs grep --exclude=*.txt --include=test* bash
     
126. ./test.sh:#!/bin/bash
     
127. [root@centos7 temp]#  
     
128. grep强大的过滤能力来自于各种选项以及正则表达式的配合，在今后的文章中还有更多的例子。

复制代码