文本操作三剑客之grep,再也不担心分析日志了

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 文本操作三剑客之grep,再也不担心分析日志了

说明: 文本查找工具,根据用户指定的“模式(过滤条件)”对目标文本逐行进行匹配检查,打印匹配到的行, 支持正则匹配。

命令格式:

grep [options] [pattern] file...

常用options参数说明:

参数缩写 参数完整名 作用
-a --text 不要忽略二进制数据
-A <行数> --after-context=<行数> 除了显示符合范本样式的那一行之外,并显示该行之后的内容
-b --byte-offset 在显示符合范本样式的那一行之外,并显示该行之前的内容
-B <行数> --before-context=<行数> 除了显示符合样式的那一行之外,并显示该行之前的内容
-c --count 计算符合范本样式的列数
-C <行数> --context=<行数> 除了显示符合范本样式的那一列之外,并显示该列之前后的内容
-i --ignore-case 忽略字符大小写的差别
-H --with-filename 在显示符合范本样式的那一列之前,标示该列的文件名称。
-n --line-number 在显示符合范本样式的那一列之前,标示出该列的编号。
-R/-r --recursive 此参数的效果和指定“-d recurse”参数相同
-l --file-with-matches 列出文件内容符合指定的范本样式的文件名称。
-v --revert-match 反转查找
-w --word-regexp 只显示全字符合的列
-m <数量> --max-count=<数量> 找到num行结果后停止查找,用来限制匹配行数

pattern说明:

可以支持正则表达式的模式。

模式 说明
'字符串' 匹配字符串的内容,如'abc', 匹配所有包含abc的行
行的开始 如:'^abc'匹配所有以abc开头的行
$ 行的结束 如:‘abc$’ 匹配所有以abc结尾的行
. 匹配一个非换行符的字符 如:'gr.p’匹配gr后接一个任意字符,然后是p
* 匹配零个或多个先前字符 如:’*abc’匹配所有一个或多个空格后紧跟grep的行
[] 匹配一个指定范围内的字符,如’[Gg]rep’匹配Grep和grep
[^] 匹配一个不在指定范围内的字符,如:’[^A-FH-Z]rep’匹配不包含A-R和T-Z的一个字母开头,紧跟rep的行
\w 匹配文字和数字字符,也就是[A-Za-z0-9],如:'G\w*p’匹配以G后跟零个或多个文字或数字字符,然后是p
x{m,} 重复字符x,至少m次,不多于n次,如:'o{5,10}'匹配5–10个o的行。

注意:正则中的特殊字符需要叫斜杆。

更多正则的内容可以查看:www.runoob.com/regexp/rege…

常见例子:

# 基本使用
grep yoursearchkeyword f.txt     #文件查找
grep 'KeyWord otherKeyWord' f.txt cpf.txt #多文件查找, 含空格加引号
grep 'KeyWord' /home/admin -r -n #目录下查找所有符合关键字的文件
grep 'keyword' /home/admin -r -n -i # -i 忽略大小写
grep 'KeyWord' /home/admin -r -n --include *.{vm,java} #指定文件后缀
grep 'KeyWord' /home/admin -r -n --exclude *.{vm,java} #反匹配


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
10天前
|
存储 SQL 监控
|
10天前
|
运维 监控 安全
|
13天前
|
监控 关系型数据库 MySQL
分析慢查询日志
【10月更文挑战第29天】分析慢查询日志
34 3
|
13天前
|
监控 关系型数据库 数据库
怎样分析慢查询日志?
【10月更文挑战第29天】怎样分析慢查询日志?
32 2
|
1月前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1625 14
|
1月前
|
存储 消息中间件 大数据
大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解
大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解
35 4
|
1月前
|
SQL 分布式计算 Hadoop
Hadoop-19 Flume Agent批量采集数据到HDFS集群 监听Hive的日志 操作则把记录写入到HDFS 方便后续分析
Hadoop-19 Flume Agent批量采集数据到HDFS集群 监听Hive的日志 操作则把记录写入到HDFS 方便后续分析
43 2
|
2月前
|
缓存 监控 算法
分析慢日志文件来优化 PHP 脚本的性能
分析慢日志文件来优化 PHP 脚本的性能
08-06-06>pe_xscan 精简log分析代码 速度提升一倍
08-06-06>pe_xscan 精简log分析代码 速度提升一倍
|
3月前
|
存储 消息中间件 监控
Java日志详解:日志级别,优先级、配置文件、常见日志管理系统ELK、日志收集分析
Java日志详解:日志级别,优先级、配置文件、常见日志管理系统、日志收集分析。日志级别从小到大的关系(优先级从低到高): ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < OFF 低级别的会输出高级别的信息,高级别的不会输出低级别的信息