一.grep (文本过滤命令)
Global search regular expression and print out the line
全面搜索研究正则表达式并显示出来。
grep 命令是一种强大的文本搜索工具 , 根据用户指定的“模式”对目标文本进行匹配检查 , 打印匹配到的行。
由正则表达式或者字符及基本文本字符所编写的过滤条件。
1.grep匹配字符
[root@foundation182 mnt]# grep root passwd ##找出带有root字符
[root@localhost mnt]# grep ^root passwd ##找出以root开头的
[root@localhost mnt]# grep root$ passwd ##找出以root结尾的
[root@localhost mnt]# grep -i ^root passwd ##忽略大小写找出以root开头的
[root@localhost mnt]# grep -i root$ passwd ##忽略大小写找出以root结尾的
[root@localhost mnt]# grep -i -E "^root|root$" passwd ##-E 扩展正则表达式,-i 忽略大小写
[root@localhost mnt]# grep -i -E -v "^root|root$" passwd ##-v 反向过滤；把符合条件的过滤掉
[root@localhost mnt]# grep -v -i -E "^root|root$" passwd |grep root ##找出中间字符为root的
2.grep 中字符的匹配次数设定
* 字符出现 [0- 任意次 ]
\? 字符出现 [0-1 次 ]
\+ 字符出现 [1- 任意次 ]
\{n\} 字符出现 [n 次 ]
|{m,n\} 字符出现 [ 最少出现 m 次,最多出现 n 次 ]
\{0,n\} 字符出现 [0-n 次 ]
\{m,\} 字符出现 [ 至少 m 次 ]
\(xy\)\{n\}xy 关键字出现 [n 次 ]
.* 关键字之间匹配任意字符
[root@localhost mnt]# grep 'r..t' test ##匹配r和t中间有两个字符的内容
[root@localhost mnt]# grep 'r...t' test ##匹配r和t中间有三个字符的内容
[root@localhost mnt]# grep 'r*t' test ####[0- 任意次 ]
[root@localhost mnt]# grep -E 'ro*t' test ##o字符出现0-任意次
[root@localhost mnt]# grep -E 'ro?t' test ##o字符出现0-1次
[root@localhost mnt]# grep -E 'ro{1,}t' test ##o字符出现1-任意次
[root@localhost mnt]# grep -E 'ro{1,3}t' test ##o字符出现1-3次
[root@localhost mnt]# grep -E 'ro{,3}t' test ##o字符出现0-3次
[root@localhost mnt]# grep -E '(root){2,}' test ##显示两个以上的root
[root@localhost mnt]# grep -E 'r.*t' test ##显示r-t之间的任意字符
3.grep中任意字符的匹配位置设定
^ 关键字
关键字 $
\< 关键字
关键字 \>
\< 关键字 \>
[root@localhost mnt]# grep -E "r...." test ##找出r开头后面有四个字符的行
[root@localhost mnt]# grep -E "r....\>" test ##找出r开头后面只有四个字符的行
[root@localhost mnt]# grep -E "....t" test ##找出t结尾前面有四个字符的行
[root@localhost mnt]# grep -E "\<....t" test ##找出r结尾前面只有四个字符的行
4.编辑shell使其能现列出已经可以登录的用户
[root@localhost mnt]# vim show_loginuser.sh
[root@localhost mnt]# sh show_loginuser.sh
二.sed(行编辑器)
stream editor
用来操作纯 ASCII 码的文本.
处理时 , 把当 前处理的行存储在临时缓冲区中 , 称为“模式空间” (pattern space) 可以指定仅仅处理哪些行.
sed 符合模式条件的处理,不符合条件的不予处理,处理完成之后把缓冲区的内容送往屏幕,接着处理下一行 , 这样不断重复 , 直到文件末尾.
1.Sed 命令格式
调用 sed 命令有两种形式:
sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)
2.sed 对字符的处理
p 显示
d 删除
a 添加
c 替换
w 写入
i 插入
p 模式操作
[root@localhost mnt]# cp /etc/fstab /mnt
[root@localhost mnt]# sed -n '/^#/p' fstab ##显示以#开头的行
[root@localhost mnt]# sed -n '/^#/!p' fstab ##显示除了以#开头的行
[root@localhost mnt]# sed -n '/0$/!p' fstab ##显示除了以0结尾的行
[root@localhost mnt]# sed -n '/0$/p' fstab ##显示以0结尾的行
[root@localhost mnt]# cat -n fstab |sed -n '2,6p' ##显示2-6行
[root@localhost mnt]# cat -n fstab |sed -n -e'2p' -e '6p' ##显示第二行和第六行
[root@localhost mnt]# cat -n fstab |sed -n -e '2p;6p' ##显示第二行和第六行
[root@localhost mnt]# cat -n fstab |sed -ne '2!p;6!p' | uniq -d ##显示除了第二行和第六行
d操作模式
[root@localhost mnt]# cat -n fstab |sed -e '2d;6d' ##除了2行和6行都显示
[root@localhost mnt]# cat -n fstab |sed -e '2,6d' ##除了2-6行都显示
[root@localhost mnt]# sed -e '/^#/d' fstab ##删除以#开头的行
[root@localhost mnt]# sed -e '/^$/d' fstab ##删除空格行
[root@localhost mnt]# sed -e '/^$/d;/^#/d' fstab ##删除空格行和#开头的行
a操作模式
root@localhost mnt]# sed '/hello/aworld' westos
[root@localhost mnt]# sed '/hello/aworld\nwestos' westos ## \n在world后面换行添加
[root@localhost mnt]# sed 's/hello/hello world/g' westos##将hello更换成hello world
i操作模式
[root@localhost mnt]# sed '/hello/iworld\nwestos' westos
c操作模式
w操作模式
##w的效率要比>高
[root@localhost mnt]# sed '/hello/p' westos##将内容复制一遍
[root@localhost mnt]# sed '/hello/=' westos ##添加行号
[root@localhost mnt]# echo `sed '/hello/=' westos` ##列的信息改成行
[root@localhost mnt]# sed '6r westos' fstab##将westos内容加到fstab文件的第六行下面
sed其他用法
[root@localhost mnt]# sed -n '/^UUID/=' fstab## 只显示行数
[root@localhost mnt]# sed '/^UUID/=' fstab##显示行数和内容
[root@localhost mnt]# sed '=' fstab | sed 'N;s/\n//g' ##在文件前面加行号
[root@localhost mnt]# sed '=' fstab | sed 'N;s/\n/ /g'##内容和行号之前有空格
[root@localhost mnt]# sed 'G' fstab
[root@localhost mnt]# sed '$!G' fstab
[root@localhost mnt]# sed -n '$p' fstab
s 替换模式
[root@localhost mnt]# sed 's/nologin/westos/g' passwd ##将全文的nologin替换成westos
[root@localhost mnt]# sed '3,5s/nologin/westos/g' passwd ##将3-5行的nologin替换词westos
[root@localhost mnt]# sed '/adm/,/sync/s/nologin/westos/g' passwd ##替换adm到sync之间的内容
[root@localhost mnt]# sed -e '/adm/,/sysnc/s/nologin/westos/g;s/sbin/lee/g' passwd ##多条命令同时进行
[root@localhost mnt]# sed -f file -i passwd ##将原文件改变
三.编写一个shell脚本同时建立三个用户
四.编写一个shell自动安装httpd并使用指定端口
五.awk报告生成器
awk 处理机制 :awk 会逐行处理文本 , 支持在处理第一行之前做一些准备工作 , 以及在处理完最后一行做一些总结性质的工作 , 在命令格式上分别体现如下 :
BEGIN{}: 读入第一行文本之前执行 , 一般用来初始化操作
{}: 逐行处理 , 逐行读入文本执行相应的处理 , 是最常见的编辑指令快
END{}: 处理完最后一行文本之后执行 , 一般用来输出处理结果
awk基本用法
[root@localhost mnt]# awk -F ":" '{print $1}' passwd ##列出第一列
[root@localhost mnt]# awk -F ":" 'BEGIN{print "NAME"}{print $1}END{print "END"}' passwd ##以：为分隔符，处理前列出name，列出第一列
[root@localhost mnt]# awk -F ":" '/bash$/{print $1}' passwd
[root@localhost mnt]# awk -F : 'BEGIN{N=0}/bash$/{N++}END{print N}' passwd ##从零开始统计bash结尾的行数
[root@localhost mnt]# awk '/^ro/{print}' passwd ##打印出以ro开头的行
[root@localhost mnt]# awk -F ":" '$6!~/^\/home/&&/bash$/{print $1}' /etc/passwd ##以：为分隔符，打印家目录下不是bash结尾的，列出第一列
[root@localhost mnt]# awk -F ":" 'BEGIN{n=0}$6!~/^\/home/&&/bash$/{n++}END{print n}' /etc/passwd ##以：为分隔符，列出数目
[root@localhost mnt]# awk 'END{print NR}' passwd ##列出行数
[root@localhost mnt]# awk '/^[a-d]/{print}' passwd ##列出以a-d开头的行
