shell脚本命令(sotr/unip/tr/cut/eval)与正则表达式

本文涉及的产品
转发路由器TR,750小时连接 100GB跨地域
简介: 1、sort命令2、unip命令3、tr命令4、cut命令5、eval命令6、正则表达式

1、sort命令


概述:

  • Linux sort命令用于将文本文件内容加以排序。
  • sort命令可针对文本文件的内容,以行为单位来排序


格式:

sort [选项]  参数


常用选项:

  • -f∶ 忽略大小写,会将小写字母都转换为大写字母来进行比较;
  • -b∶ 忽略每行前面的空格;
  • -n∶ 按照数字进行排序;
  • -r∶ 反向排序;
  • -u∶ 等同于uniq,表示相同的数据仅显示一行;
  • -t∶ 指定字段分隔符,默认使用 【Tab】键分隔;
  • -k∶指定排序字段;
  • -o <输出文件>∶ 将排序后的结果转存至指定文件


d1.pngd2.pngd3.png


2、unip命令


概述:

  • Linux uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用。
  • uniq 可检查文本文件中重复出现的行列。

格式:

uniq [选项]  参数

常用选项:

  • -c∶ 进行计数,并删除文件中重复出现的行;
  • -d∶ 仅显示连续的重复行;
  • -u∶ 仅显示出现一次的行


d4.pngd5.png


3、tr命令


概述:

  • Linux tr 命令用于转换或删除文件中的字符。
  • tr 指令从标准输入设备读取数据,经过字符串转译后,将结果输出到标准输出设备。

 

格式:

tr [选项]  参数


常用选项:

  • -c∶保留字符集1的字符,其他的字符(也包括换行符\n)用字符集2替换
  • -d∶ 删除所有属于字符集1的字符
  • -s∶ 将重复出现的字符串压缩为一个字符串;用字符集2替换 字符集1
  • -t∶ 字符集2 替换 字符集1,不加选项和结果

参数

  • 字符集1:指定要转换或删除的原字符集,当执行转换操作时,必须使用参数“字符集2”指定转换的目标字符集,但是执行删除操作时,不需要参数“字符集2”;
  • 字符集2:指定要转换成的目标字符集


d6.pngd7.pngd8.pngd9.png


使用tr进行排序

  1. 使用echo ${arr[*]}可以输出数组列表
  2. 结合| tr " " "\n" 可以将输出内容中的空格换成换行符
  3. 然后在使用| sort -n对输出的内容进行按数值从小到大排序即可。


d10.png


4、cut命令


概述:

Linux cut命令用于显示每行从开头算起 num1 到 num2 的文字。


cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。

如果不指定 File 参数,cut 命令将读取标准输入。必须指定 -b、-c 或 -f 标志之一

 

格式:

cut [选项]  参数


常用选项:

  • -f∶ 通过指定哪一个字段进行提取。cut命令使用"TAB"作为默认的字段分隔符。
  • -d∶ “TAB"是默认的分隔符,使用此选项可以更改为其他的分隔符。
  • - -complement∶ 此选项用于排除所指定的字段。
  • - -output-delimiter∶ 更改输出内容的分隔符。


d11.pngd12.png


5、eval命令


概述:

加上eval时,shell就会在执行命令之前扫描他2次,

eval命令将首先会先扫描命令行进行所有的置换,然后在执行该命令,

该命令适用于那些一次扫描无法实现其功能的变量,该命令对变量进行2次扫描

 

d13.pngd14.png


6、正则表达式


通常用于判断语句中,用来检查某一字符串是否满足某一格式

正则表达式是由普通字符与元字符组成:

  1. 普通字符包括大小写字母、数字、标点符号及一些其他符号。
  2. 元字符是指在正则表达式中具有特殊意义的专用字符,可以用来规定其前导字符( 即位于元字符前面的字符)在目标对象中的出现模式。


基础常见的元字符:(支持工具grep、egrep、sed、awk)


\ :转义字符,用于取消特殊符号的含义,例: \!、\n、\$等
^ :匹配字符串开始的位置,例: ^a、 ^the、 ^#、^[a-z]
$ :匹配字符串结束的位置,例: word$、 ^$匹配空行
. :匹配除\n之外的任意的一个字符,例: go.d、 g..d
* :匹配前面子表达式0次或者多次,例: goo*d、 go.*d
[list] :匹配list列表中的一个字符,例: go[ola]d, [abc]、 [a-z]、 [a-z0-9]、 [0-9]匹配任意一位数字
[^list] :匹配任意非list列表中的一个字符,例: [^0-9]、 [^A-20-9]、 [^a-z]匹配任意一位非小写字母
\{n\} :匹配前面的子表达式n次,例: go\{2\}d、 '[0-9]\{2\} '匹配两位数字
\{n,\} :匹配前而的子表达式不少于n次,例: go\{2, \}d、'[0-9]\{2, \}'匹配两位及两位以上数字
\{n,m\} :匹配前面的子表达式n到m次,例: go\{2,3\}d、 ' [0-9]\{2,3\}'匹配两位到三位数字



注: egrep、 awk使用{n}、{n,小、{n, m}匹配时“{}”前不用加“\”

 

 

 

 

 

扩展正则表达式元字符:(支持工具egrep、awk)

 

+ :匹配前面子表达式1次以上,例: do+g, 将匹配至少一个o, 如dog、 doog、 dooog等
? :匹配前面子表达式0次或者1次,例: do?g, 将匹配dg或dog
() :将括号中的字符串作为h一个整体,例1: d(oo)+g," 将匹配oo整体1次以上,如doog、doooog等
| :以或的方式匹配字条串,例: d (oo|)g," 将匹配doog或者doofuck123g或者dooooooog


d15.pngd16.pngd17.png

相关文章
|
8月前
|
数据采集 Shell Linux
【Shell 命令集合 文档编辑】Linux 字符转换或删除 tr 命令使用指南
【Shell 命令集合 文档编辑】Linux 字符转换或删除 tr 命令使用指南
128 0
常用文本内容命令(tr cut sort uniq)
常用文本内容命令(tr cut sort uniq)
|
8月前
|
存储 Shell Linux
【Shell 命令集合 系统设置 】Linux 将参数作为命令行输入 eval命令 使用指南
【Shell 命令集合 系统设置 】Linux 将参数作为命令行输入 eval命令 使用指南
120 0
|
8月前
|
存储 算法 Shell
【Shell 命令集合 文档编辑】Linux 正则表达式匹配 egrep命令使用教程
【Shell 命令集合 文档编辑】Linux 正则表达式匹配 egrep命令使用教程
103 0
|
8月前
|
Linux Perl
Linux命令之tr
Linux命令之tr
73 2
|
8月前
|
Linux
Linux命令(79)之tr
Linux命令(79)之tr
296 1
|
Linux Windows
一秒学会文件内容浏览,cut命令使用,uniq命令使用,sort命令,tr
一、文件内容浏览 a.cat查看/etc/passwd文件内容,且输出时带行号
267 0
|
7月前
|
数据库 Python
Python网络数据抓取(8):正则表达式
Python网络数据抓取(8):正则表达式
74 2
|
7月前
|
自然语言处理 JavaScript 前端开发
Python高级语法与正则表达式(二)
正则表达式描述了一种字符串匹配的模式,可以用来检查一个串是否含有某种子串、将匹配的子串做替换或者从某个串中取出符合某个条件的子串等。
|
7月前
|
安全 算法 Python
Python高级语法与正则表达式(一)
Python提供了 with 语句的写法,既简单又安全。 文件操作的时候使用with语句可以自动调用关闭文件操作,即使出现异常也会自动关闭文件操作。