玩转 Linux Shell 第十章：文本操作利器详解
10.1 cut
cut 的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。
1）基本用法
cut [选项参数] filename
说明：默认分隔符是制表符
2）选项参数说明
| 选项参数 | 功能 |
|---|---|
| -f | 列号，提取第几列 |
| -d | 分隔符，按照指定分隔符分割列，默认是制表符“\t” |
| -c | 按字符进行切割 后加加 n 表示取第几列 比如 -c 1 |
3）案例实操
（1）数据准备
[zhao@hadoop101 shells]$ touch cut.txt
[zhao@hadoop101 shells]$ vim cut.txt
dong shen
guan zhen
wo wo
lai lai
le le
（2）切割 cut.txt 第一列
[zhao@hadoop101 shells]$ cut -d " " -f 1 cut.txt
dong
guan
wo
lai
le
（3）切割 cut.txt 第二、三列
[zhao@hadoop101 shells]$ cut -d " " -f 2,3 cut.txt
shen
zhen
wo
lai
le
（4）在 cut.txt 文件中切割出 guan
[zhao@hadoop101 shells]$ cat cut.txt |grep guan | cut -d " " -f 1
guan
（5）选取系统 PATH 变量值，第 2 个“：”开始后的所有路径：
[zhao@hadoop101 shells]$ echo $PATH
/usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/zhao/.local/bin:/home/zhao/bin
zhao@hadoop101 shells]$ echo $PATH | cut -d ":" -f 3- /usr/local/sbin:/usr/sbin:/home/zhao/.local/bin:/home/zhao/bin
（6）切割 ifconfig 后打印的 IP 地址
[zhao@hadoop101 shells]$ ifconfig ens33 | grep netmask | cut -d " " -f 10 192.168.111.101
10.2 awk
一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。
1）基本用法
awk [选项参数] ‘/pattern1/{action1} /pattern2/{action2}…’ filename
pattern：表示 awk 在数据中查找的内容，就是匹配模式
action：在找到匹配内容时所执行的一系列命令
2）选项参数说明
| 选项参数 | 功能 |
|---|---|
| -F | 指定输入文件分隔符 |
| -v | 赋值一个用户定义变量 |
3）案例实操
（1）数据准备
[zhao@hadoop101 shells]$ sudo cp /etc/passwd ./
passwd 数据的含义
用户名:密码(加密过后的):用户 id:组 id:注释:用户家目录:shell 解析器
（2）搜索 passwd 文件以 root 关键字开头的所有行，并输出该行的第 7 列。
[zhao@hadoop101 shells]$ awk -F : '/^root/{print $7}' passwd
/bin/bash
（3）搜索 passwd 文件以 root 关键字开头的所有行，并输出该行的第 1 列和第 7 列，中间以“，”号分割。
[zhao@hadoop101 shells]$ awk -F : '/^root/{print $1","$7}' passwd
root,/bin/bash
注意：只有匹配了 pattern 的行才会执行 action。
（4）只显示/etc/passwd 的第一列和第七列，以逗号分割，且在所有行前面添加列名 user，shell 在最后一行添加"dahaige，/bin/zuishuai"。
[zhao@hadoop101 shells]$ awk -F : 'BEGIN{print "user, shell"} {print $1","$7}
END{print "dahaige,/bin/zuishuai"}' passwd
user, shell
root,/bin/bash
bin,/sbin/nologin
。。。
zhao,/bin/bash
dahaige,/bin/zuishuai
注意：BEGIN 在所有数据读取行之前执行；END 在所有数据执行之后执行。
（5）将 passwd 文件中的用户 id 增加数值 1 并输出
[zhao@hadoop101 shells]$ awk -v i=1 -F : '{print $3+i}' passwd
1
2
3
4
4）awk 的内置变量
| 变量 | 说明 |
|---|---|
| FILENAME | 文件名 |
| NR | 已读的记录数（行号） |
| NF | 浏览记录的域的个数（切割后，列的个数） |
5）案例实操
（1）统计 passwd 文件名，每行的行号，每行的列数
[zhao@hadoop101 shells]$ awk -F : '{print "filename:" FILENAME ",linenum:"
NR ",col:"NF}' passwd
filename:passwd,linenum:1,col:7
filename:passwd,linenum:2,col:7
filename:passwd,linenum:3,col:7
...
（2）查询 ifconfig 命令输出结果中的空行所在的行号
[zhao@hadoop101 shells]$ ifconfig | awk '/^$/{print NR}'
9
18
26
（3）切割 IP
[zhao@hadoop101 shells]$ ifconfig ens33 | awk '/netmask/ {print $2}'
192.168.6.101