Linux三剑客 grep、sed和awk浅析

grep、sed和awk是文本处理中最强大的三个命令行工具。它们在Linux中广泛用于文本搜索、替换、格式化和报告，下面我将详细介绍相关语法和使用案例。

grep (Global Regular Expression Print)

grep是一个模式搜索工具，它使用正则表达式来搜索文本，并输出匹配的行。

基本语法:

grep [options] pattern [file...]

常用选项:

• -i: 忽略大小写。
• -v: 反转匹配，只输出不匹配的行。
• -r or -R: 递归搜索目录。
• -n: 显示匹配的行号。
• -l: 只输出包含匹配的文件名，而不是匹配的内容。

使用示例:

grep 'pattern' filename.txt  # 在文件中搜索字符串'pattern'

grep -r 'pattern' /path/to/directory/  # 递归搜索目录中匹配'pattern'的行

grep -i 'pattern' filename.txt  # 忽略大小写搜索'pattern'

grep -n 'pattern' filename.txt  # 显示匹配'pattern'的行及其行号

---

sed (Stream Editor)

sed是一个流编辑器，它用于对文本数据的流进行过滤和转换。

基本语法:

sed [options] script [inputfile...]

常用选项:

• -e script: 添加要执行的脚本。
• -f scriptfile: 添加一个包含sed脚本的文件。
• -i: 直接修改文件内容（慎用，建议先测试脚本）。

使用示例:

sed 's/old/new/' filename.txt  # 将'old'替换为'new'

sed '/pattern/d' filename.txt  # 删除所有包含'pattern'的行

sed '10d' filename.txt  # 删除第10行

sed -i 's/old/new/g' filename.txt  # 直接在文件中全局替换'old'为'new'

---

awk

awk是一个强大的文本分析工具，它的特点是提供了编程语言的功能，可以处理数据并生成报告。

基本语法:

awk [options] 'program' inputfile...

常用选项:

• -F fs: 设置输入字段分隔符为fs。
• -v var=value: 设置用户定义变量。

使用示例:

awk '{print $2,$1}' filename.txt  # 交换每行的第一和第二个字段

awk -F: '/pattern/ {print $1}' /etc/passwd  # 打印/etc/passwd中匹配'pattern'行的第一个字段

awk 'BEGIN {sum=0} {sum += $1} END {print sum}' filename.txt  # 计算文件中第一个字段的总和

awk -F ',' '{ if($3 > 0) print $1,$2 }' data.csv  # 打印CSV文件第三列大于0的行的第一和第二列

awk程序通常包含BEGIN、END和模式匹配部分，它们分别在处理文本之前、之后和对每一行执行。字段变量（如$1、$2等）用于访问当前记录的字段。

---

这些工具的灵活性和强大功能使得它们在文本处理中非常有用。通过熟练使用这些工具，你可以编写出高效且复杂的文本处理命令。