linux学习--简单的文本处理工具 _Linux学习

炒沙作縻终不饱，缕冰文章费工巧。这篇文章主要讲述linux学习--简单的文本处理工具相关的知识，希望能为你提供帮助。
文本处理工具查看文本内容
【linux学习--简单的文本处理工具】cat
语法

cat [OPTION]... [FILE]...

选项

-E：显示行结束符$ -A：显示所有控制符 -n：对显示出的每一行进行编号 -b：非空行编号 -s：压缩连续的空行成一行

分页查看文件内容
more
语法

more [OPTIONS...] FILE...

选项

-d: 显示翻页及退出提示

less
语法

less FILE.../文本搜索文本 n/N 跳到下一个或上一个匹配

显示文本前内容
head
语法

head [OPTION]... [FILE]...

选项

-c # 指定获取前#字节 -n # 指定获取前#行,#如果为负数,表示从文件头取到倒数第#前 -# 同上

显示文本后内容
tail
语法

tail [OPTION]... [FILE]...

选项

-c # 指定获取后#字节 -n # 指定获取后#行,如果#是负数,表示从第#行开始到文件结束 -# 同上 -f 跟踪显示文件fd新追加的内容,常用日志监控，相当于 --follow=descriptor,当文件删除再新建同名文件,将无法继续跟踪文件 -F 跟踪文件名，相当于--follow=name --retry，当文件删除再新建同名文件,将可以继续跟踪文件 tailf 类似 tail –f，当文件不增长时并不访问文件,节约资源,CentOS8无此工具

提取文本内容
cut
语法

cut [OPTION]... [FILE]...

选项

-d DELIMITER: 指明分隔符，默认tab -f FILEDS: #: 第#个字段,例如:3 #,#[,#]：离散的多个字段，例如:1,3,6 #-#：连续的多个字段, 例如:1-6 混合使用：1-3,7 -c 按字符切割 --output-delimiter=STRING指定输出分隔符

合并文件
paste
语法

paste [OPTION]... [FILE]...

选项

-d #分隔符：指定分隔符，默认用TAB -s #所有行合成一行显示

例，批量修改口令

[root@centos8 ~]#cat user.txt wang mage [root@centos8 ~]#cat pass.txt 123456 magedu [root@centos8 ~]#paste -d: user.txt pass.txt wang:123456 mage:magedu [root@centos8 ~]#paste -d: user.txt pass.txt|chpasswd

文本数据统计
wc
选项

-l 只计数行数 -w 只计数单词总数 -c 只计数字节总数 -m 只计数字符总数 -L 显示文件中最长行的长度

文本排序
sort
语法

sort [options] file(s)

选项

-r 执行反方向（由上至下）整理 -R 随机排序 -n 执行按数字大小整理 -h 人类可读排序,如: 2K 1G -f 选项忽略（fold）字符串中的字符大小写 -u 选项（独特，unique），合并重复项，即去重 -t c 选项使用c做为字段界定符 -k # 选项按照使用c字符分隔的 # 列来整理能够使用多次

面试题:有两个文件，a.txt与b.txt ，合并两个文件，并输出时确保每个数字也唯一

[root@localhost date]# sort -u a.txt b.txt 1 2 3 4 5 6 7 8 [root@localhost date]# sort a.txt b.txt | uniq 1 2 3 4 5 6 7 8

去重
uniq
语法

uniq [OPTION]... [FILE]...

选项

-c: 显示每行重复出现的次数 -d: 仅显示重复过的行 -u: 仅显示不曾重复的行

文本比较
diff
格式

-u 选项来输出“统一的（unified）”diff格式文件，最适用于补丁文件

例

[root@localhost date]# diff a.txt b.txt 3a4,8 > 4 > 5 > 6 > 7 > 8 [root@localhost date]# diff -u a.txt b.txt --- a.txt2021-11-29 04:00:23.348423156 -0500 +++ b.txt2021-11-29 04:00:29.786474146 -0500 @@ -1,3 +1,8 @@ 1 2 3 +4 +5 +6 +7 +8

练习
1、找出ifconfig “网卡名” 命令结果中本机的IPv4地址

[root@localhost date]# ifconfig ens160 |grep -o -E [0-9]+\\.[0-9]+\\.[0-9]+\\.[0-9]+|head -1 192.168.1.44 [root@localhost date]#

2、查出分区空间使用率的最大百分比值

[root@localhost date]# df | grep -Eo [0-9]+%|sort -nr|head -1 17%

3、查出用户UID最大值的用户名、UID及shell类型

[root@localhost date]# cat /etc/passwd | tail -1|cut -d : -f1,3,7

4、查出/tmp的权限，以数字方式显示

[root@localhost date]# stat /tmp | grep -E Uid|tr -s "(/" " "|cut -d " " -f2 1777 [root@localhost date]#stat /tmp | grep -E ^Access|head -1|tr -s "(/" " "|cut -d " " -f2

5、统计当前连接本机的每个远程主机IP的连接数，并按从大到小排序