linux grep sed awk命令详解

### Linux grep sed awk命令详解 #### 一、grep命令详解 **grep** 是一个用于查找文件里符合条件的字符串的强大工具。它可以对文件进行快速搜索，找出含有特定模式的行。 - **基本语法**：`grep [选项] 模式 文件` - **常用选项**： - `-i`：忽略大小写 - `-v`：反转查找，即显示出不包含匹配字符串的行 - `-n`：显示匹配行的行号 - `-l`：只显示包含匹配字符串的文件名 - `-r`：递归搜索目录 - `-c`：计算匹配行的数量 - **示例**： - 查找包含“hello”的行：`grep "hello" file.txt` - 忽略大小写查找包含“world”的行：`grep -i "world" file.txt` - 反转查找，显示不包含“test”的行：`grep -v "test" file.txt` #### 二、sed命令详解 **sed**（stream editor）是一个强大的文本编辑器，可以用于执行基础或复杂的文本转换。它的工作方式是非交互式的，通常用于脚本中处理大量文本文件。 - **基本语法**：`sed [选项] '命令' 文件` - **常用命令**： - `s/pattern/replacement/flags`：用replacement替换匹配pattern的部分。例如，`sed 's/hello/world/g' file.txt` 将文件中所有出现的“hello”替换为“world”。 - `a\text`：在当前行后添加text。例如，`sed '2a\New line' file.txt` 在第2行后添加“New line”。 - `i\text`：在当前行前插入text。 - `d`：删除当前行。 - `p`：打印当前行。 - `n`：读取下一行并处理，不打印当前行。 - `w filename`：将当前行写入filename。 - `q`：退出sed。 - **示例**： - 替换第1行的“old”为“new”：`sed '1s/old/new/' file.txt` - 在文件的最后添加一行“End of file”：`sed '$a\End of file' file.txt` - **高级用法**： - **地址**：可以指定命令作用的行范围。例如，`sed '1,5s/old/new/' file.txt` 只替换第1至第5行中的“old”为“new”。 - **标记**：使用标记可以跳转到脚本中的特定位置。例如，`sed '1b label; label: s/old/new/' file.txt` 如果在第1行，则跳过替换操作。 #### 三、awk命令详解 **awk** 是一种强大的文本分析工具，它可以处理结构化的文本数据，进行过滤、排序、统计等操作。 - **基本语法**：`awk 'pattern { action }' 文件` - **常用字段和变量**： - `$1, $2, ...`：代表每一列的值。 - `NR`：当前处理的记录（行）数。 - `NF`：当前行中的字段数。 - **常用操作**： - `print`：打印。 - `{print $1}`：打印第一列。 - `{print $1, $2}`：打印第一列和第二列。 - `sum += $1`：累计第一列的数值。 - **示例**： - 打印第2列：`awk '{print $2}' file.txt` - 统计第1列的总和：`awk '{sum+=$1} END {print sum}' file.txt` - 显示第3行以后的数据：`awk 'NR>2 {print}' file.txt` - **进阶用法**： - **模式匹配**：使用正则表达式进行匹配。 - `/pattern/ {action}`：当行包含pattern时执行action。 - **函数定义**：可以自定义函数进行更复杂的数据处理。 - `BEGIN {function square(x) {return x * x}} {print square($1)}`：计算第一列每个数值的平方。 通过以上内容，我们可以看出grep、sed和awk都是非常强大且灵活的工具，它们各自拥有不同的优势，可以根据实际需求选择合适的方法来处理文本文件。在实际工作中，熟练掌握这些命令可以帮助我们高效地完成各种文本处理任务。