三剑客grep awk sed

1、cat 查看日志文件 $ cat all.log 2、根据程序打印日志的位置过滤日志条目 cat all.log | grep -a 'ESIndexAggregationTask.java:254' 3、使用 awk 定位到日志数值位置 本轮总计滚动查询 2 次，总计返回数据 62212 条， ......

经过网上查资料，发现 由于 mac 系统与 linux 系统的差异，mac自带的sed命令，因为其是基于bsd，所以与常用的gnu不一样，安装gnu-sed 可正常使用： 1.brew install gnu-sed //注意，命令行之行此句时，要在用户权限下，不要在root下，因为在root下，会 ......

sed 引入变量时，需要使用三引号，格式为三个单引号，或者单引号内套一个双引号！！！ [root@controller ~]# cat test.txt 123 456 789 [root@controller ~]# sed -i 's/3/'''c'''/' test.txt [root@con ......

001、 [root@PC1 test04]# ls a.txt [root@PC1 test04]# cat a.txt ## 测试数据 3333 gene 9999 kkkk gene 7777 8888 gene gene 0000 6666 ## 输出匹配字符及其下一行 [root@PC1 ......

001、 [root@PC1 test04]# ls a.txt [root@PC1 test04]# cat a.txt ## 测试数据 3333 gene 9999 kkkk gene 7777 8888 gene 0000 6666 [root@PC1 test04]# sed -n '/ge ......

001、 [root@PC1 test04]# ls a.txt [root@PC1 test04]# cat a.txt ## 测试数据 3333 gene 9999 kkkk gene 7777 8888 gene 0000 6666 [root@PC1 test04]# awk '$1 == ......

如果你是一个新手，请从头阅读这篇文章，如果你只是忘记了grep命令的一些常用选项，直接查看文章尾部的总结部分即可。 先说说grep命令能做什么？ 我们可以使用grep命令在文本中查找指定的字符串，就像你在windows中打开txt文件，使用快捷键 “Ctrl+F” 在文本中查找某个字符串一样，说白了 ......

001、 [b20223040323@admin2 test]$ ls a.gff [b20223040323@admin2 test]$ cat a.gff region 1 pseudogene 2 transcript 3 exon 4 pseudogene 5 transcript 6 ex ......

awk 是 Linux 中非常强大的文本分析编程工具 awk 的输入可以是标准输入，文件或其他命令的输出 awk 将输入逐行读入，以空格为默认分隔符进行切割并处理 ## 基础用法 **筛选每一行的指定列** ``` # 筛选第二列内容 # print 表示打印 echo "name1 china 2 ......

1、测试数据如下： [root@centos79 test]# ls a.txt [root@centos79 test]# cat a.txt 3 4 5 d g 3 s g 8 k s g 2 5 d s c w a r t e 4 s 2、在第2行后插入xxxx [root@centos79 ......

一、split 初始化和类型强制awk的内建函数split允许你把一个字符串分隔为单词并存储在数组中。你可以自己定义域分隔符或者使用现在FS(域分隔符)的值。格式： split (string, array, field separator)split (string, array) -->如果第三 ......

# grep: 过滤 常用场景：举例： 查看java进程： ps -ef | grep java 选项 含义 -c 仅列出文件中包含模式的行数 -i 忽略模式中的字母大小写 -l 列出带有匹配行的文件名，不列出具体的匹配行 -n 列出所有的匹配行，并显示行号 -v 列出没有匹配模式的行，可以使用该选 ......

目录 一、sed命令 二、sed操作符 三、sed打印 四、sed删除 五、sed替换 六、sed添加 七、实验演示 1.提取版本号 2.查看指定时间日志 一、sed命令 -e执行多个命令 -f使用指定脚本在处理输入文件 -h显示帮助 -i直接修改（sed执行时在模式空间里，i命令直接执行，其他是到 ......

### 安装 ``` distributionBase=GRADLE_USER_HOME ``` ### 替换 apline 源 ``` set -eux && sed -i 's/dl-cdn.alpinelinux.org/mirrors.ustc.edu.cn/g' /etc/apk/repo ......

001、 [root@PC1 test3]# ls test.txt [root@PC1 test3]# cat test.txt ## 测试数据 jjjj kkk gene jjj dddd yyy iiii ppp ffff 999 gene ttt eeee mmm aaaa nnn [roo ......

目录 一、grep查找文件内容 二、sort排序 三、uniq统计压缩重复 四、tr替换压缩 五、cut截断 六.sqlit拆分 七.paste合并 八.eval 一、grep（匹配文件内容） grep [选项]… 查找条件 目标文件 -m 匹配次数 -v 除什么以外 -i 忽略大小写 -n　显示匹 ......

有时候我们想使用netstat 命令查询具体哪个端口，但是windows dos 自带没有像linux 哪样的grep,我们就需要使用第三方插件。下载地址：https://gnuwin32.sourceforge.net/packages/grep.htm 如果无法下载可使用百度网盘下载：链接: h ......

## 利用awk命令计算文件大小 使用组合命令列出/boot目录中每一个文件的文件名和大小 ` ls -lF /boot | awk '{print $5 "\t" $9}' | sort -rn` 这样输出结果以后列出/boot 目录中每一个文件的文件名和大小，文件大小和文件名再次由制表符隔开，并 ......

## 资料来源 [awk知识点总结 | 骏马金龙](https://www.cnblogs.com/f-ck-need-u/p/7509812.html "awk知识点总结 | 骏马金龙") [精通awk系列 | 骏马金龙](https://www.cnblogs.com/f-ck-need-u/p ......

sed一次从输入读一行数据。 不会修改原文件的数据，只是将修改后的数据发送到STDOUT。 sed命令格式：sed options script file script：要使用的命令， file：待处理的文件。 执行多条命令： 方式一： 使用-e选项，在命令行上输入多条命令。命令行之间用分号隔开，命 ......

## 资料来源 [sed修炼系列 | 骏马金龙](https://www.cnblogs.com/f-ck-need-u/p/7488469.html "sed修炼系列 | 骏马金龙") [sed命令 | runoob](https://www.runoob.com/linux/linux-comm ......

awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，ga ......

利器 | 测试必会之 Linux 三剑客 ( grep / awk / sed ) IT牛客 IT牛客 2023-05-02 21:00 发表于河南 收录于合集 #linux13个 #awk1个 #sed1个 原文： blog.csdn.net/weixin_43291944/article/det ......

001、将所有的小写字母转换为大写 [root@PC1 test4]# ls a.txt [root@PC1 test4]# cat a.txt ## 测试数据 abd mnj uyr XDE THR QYE cvb Ddg gyi [root@PC1 test4]# sed 's/[a-z]/\U ......

在以location开头的行下添加一行：sed -i.bak "/^[[:space:]]*location/a\ allow 172.16.0.0/16;" gateway.conf在以location开头的行上添加一行：sed -i.bak "/^[[:space:]]*location/i\ ......

001、匹配空格 [root@PC1 test4]# ls a.txt [root@PC1 test4]# cat a.txt ## 测试数据 1_aa bb 2_ccdd 3_ee ff 4_gg hh kk [root@PC1 test4]# sed -n l a.txt ## 显示出空格和制表 ......

1. use awk https://stackoverflow.com/questions/2371248/how-to-convert-timestamps-to-dates-in-bash https://www.oreilly.com/library/view/learning-awk-pr ......

001、 [root@PC1 test]# ls a.txt b.txt c.txt [root@PC1 test]# find *.txt a.txt b.txt c.txt [root@PC1 test]# find *.txt | awk '{print "mv", $0, $0".bak"} ......

#### 1 替换 sed -i 's/oldname/newname/g' a.log --将a.log中的oldname 替换为newname，g为每行多个都替换，-i为全局替换 #### 2 日志截取 sed -n '/2023-02-27 13:/,/2023-02-27 17:/p' er ......

### grep grep 命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。grep全称是 Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。 ```sh grep [option] pattern fil ......