常用命令linux_文本处理

awk提取文件第一列 ， 这里' '中是要输出的表达式，$1代表第一列，Input.txt是输入文件。
```shell
awk '{print $1}' ./Input.txt > ./out.txt

awk -F ':' '{print $1}' /etc/ocserv/ocpasswd >> 20210709vpn_user
```

提取前两列

```shell
awk '{print $1,$2}' ./Input.txt > ./out.txt
```

awk 获取文件中按指定分隔符的字段2
```shell
cat build.prop | grep 'ro.build.display.id' | awk -F '=' '{print $2}'
```

排序并删除重复行

```shell
sort ./out.txt | uniq out
```
linux过滤文本空行和注释
```shell
$ cat postgresql.conf | grep -v "^[[:space:]].*#" | grep -v "^#" | grep -v "^$"

```

## sed
#### 显示某一行下面的所有内容
假设您想从包含特定文本 "特定行" 的行开始，显示其下的所有内容，您可以使用以下 sed 命令：

`sed -n '/特定行/,$p' 文件名`
这里的解释如下：

sed：调用流编辑器。
-n：告诉 sed 仅打印脚本告诉它打印的行。
'/特定行/,$p'：sed 脚本部分，/特定行/ 是一个模式，用于匹配包含 "特定行" 文字的行；, 表示范围；$ 表示文件的末尾；p 表示打印。
例如，如果您有一个文本文件 example.txt，并且想要从包含 "Proxmox VE" 的行开始显示所有后续内容，您可以这样使用 sed：

`sed -n '/Abc/,$p' example.txt`
或者
`cat example.txt |  sed -n '/Abc/,$p'`

`cat example.txt | sed -n '/Abc/,$p' | sed '1!d'`
sed '1!d'：第二个 sed 命令，用于删除除第一行之外的所有行。1! 是一个条件，表示 "除非是第一行，否则"，d 是 sed 的删除命令。

`cat example.txt | sed -n '/Abc/,$p' | sed '1d'`
只删除第一行

`cat example.txt | sed -n '/Abc/,$p' | awk 'NR > 1 {print $3}'`
这里，NR > 1 是 awk 的条件，它确保只打印第二行及之后的行的第三列。NR 是 awk 中的内置变量，代表当前记录（行）的编号。

## awk
#### 显示某一行的第二列
`pvecm status | awk '/Node/{print $2}'`
这里的解释如下：
pvecm status：显示pve集群状态。
awk：是一个强大的文本处理工具，用于分析 pvecm status 的输出。
/Node/{print $2}：awk 命令的脚本部分。/Node/ 是一个模式，用于匹配包含 "Node" 文字的行。{print $2} 是一个动作，用于打印匹配行的第二列（假设节点名称位于第二列）。

#### 显示所有行的第三列的命令：
`pvecm status | awk '{print $3}'`
awk '{print $3}'：awk 命令，{print $3} 是 awk 脚本，它指示 awk 打印每一行的第三列。

#### 按列数筛选，显示第三列的命令
如果您只想打印第三列，并且当列数少于三列时跳过该行，可以使用以下命令：
`pvecm status | awk 'NF >= 3 {print $3}'`
这里的 NF 是 awk 中的一个内置变量，代表当前行的字段数（列数）。NF >= 3 是一个条件，只有当行中的列数至少为三列时，才会执行 {print $3} 动作。

#### 按行数筛选，显示第三列的命令
`pvecm status | awk 'NR > 1 {print $3}'`
这里，NR > 1 是 awk 的条件，它确保只打印第二行及之后的行的第三列。NR 是 awk 中的内置变量，代表当前记录（行）的编号。