shell脚本命令(sotr/unip/tr/cut/eval)与正则表达式

本文涉及的产品
转发路由器TR,750小时连接 100GB跨地域
简介: 1、sort命令2、unip命令3、tr命令4、cut命令5、eval命令6、正则表达式

1、sort命令


概述:

  • Linux sort命令用于将文本文件内容加以排序。
  • sort命令可针对文本文件的内容,以行为单位来排序


格式:

sort [选项]  参数


常用选项:

  • -f∶ 忽略大小写,会将小写字母都转换为大写字母来进行比较;
  • -b∶ 忽略每行前面的空格;
  • -n∶ 按照数字进行排序;
  • -r∶ 反向排序;
  • -u∶ 等同于uniq,表示相同的数据仅显示一行;
  • -t∶ 指定字段分隔符,默认使用 【Tab】键分隔;
  • -k∶指定排序字段;
  • -o <输出文件>∶ 将排序后的结果转存至指定文件


d1.pngd2.pngd3.png


2、unip命令


概述:

  • Linux uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用。
  • uniq 可检查文本文件中重复出现的行列。

格式:

uniq [选项]  参数

常用选项:

  • -c∶ 进行计数,并删除文件中重复出现的行;
  • -d∶ 仅显示连续的重复行;
  • -u∶ 仅显示出现一次的行


d4.pngd5.png


3、tr命令


概述:

  • Linux tr 命令用于转换或删除文件中的字符。
  • tr 指令从标准输入设备读取数据,经过字符串转译后,将结果输出到标准输出设备。

 

格式:

tr [选项]  参数


常用选项:

  • -c∶保留字符集1的字符,其他的字符(也包括换行符\n)用字符集2替换
  • -d∶ 删除所有属于字符集1的字符
  • -s∶ 将重复出现的字符串压缩为一个字符串;用字符集2替换 字符集1
  • -t∶ 字符集2 替换 字符集1,不加选项和结果

参数

  • 字符集1:指定要转换或删除的原字符集,当执行转换操作时,必须使用参数“字符集2”指定转换的目标字符集,但是执行删除操作时,不需要参数“字符集2”;
  • 字符集2:指定要转换成的目标字符集


d6.pngd7.pngd8.pngd9.png


使用tr进行排序

  1. 使用echo ${arr[*]}可以输出数组列表
  2. 结合| tr " " "\n" 可以将输出内容中的空格换成换行符
  3. 然后在使用| sort -n对输出的内容进行按数值从小到大排序即可。


d10.png


4、cut命令


概述:

Linux cut命令用于显示每行从开头算起 num1 到 num2 的文字。


cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。

如果不指定 File 参数,cut 命令将读取标准输入。必须指定 -b、-c 或 -f 标志之一

 

格式:

cut [选项]  参数


常用选项:

  • -f∶ 通过指定哪一个字段进行提取。cut命令使用"TAB"作为默认的字段分隔符。
  • -d∶ “TAB"是默认的分隔符,使用此选项可以更改为其他的分隔符。
  • - -complement∶ 此选项用于排除所指定的字段。
  • - -output-delimiter∶ 更改输出内容的分隔符。


d11.pngd12.png


5、eval命令


概述:

加上eval时,shell就会在执行命令之前扫描他2次,

eval命令将首先会先扫描命令行进行所有的置换,然后在执行该命令,

该命令适用于那些一次扫描无法实现其功能的变量,该命令对变量进行2次扫描

 

d13.pngd14.png


6、正则表达式


通常用于判断语句中,用来检查某一字符串是否满足某一格式

正则表达式是由普通字符与元字符组成:

  1. 普通字符包括大小写字母、数字、标点符号及一些其他符号。
  2. 元字符是指在正则表达式中具有特殊意义的专用字符,可以用来规定其前导字符( 即位于元字符前面的字符)在目标对象中的出现模式。


基础常见的元字符:(支持工具grep、egrep、sed、awk)


\ :转义字符,用于取消特殊符号的含义,例: \!、\n、\$等
^ :匹配字符串开始的位置,例: ^a、 ^the、 ^#、^[a-z]
$ :匹配字符串结束的位置,例: word$、 ^$匹配空行
. :匹配除\n之外的任意的一个字符,例: go.d、 g..d
* :匹配前面子表达式0次或者多次,例: goo*d、 go.*d
[list] :匹配list列表中的一个字符,例: go[ola]d, [abc]、 [a-z]、 [a-z0-9]、 [0-9]匹配任意一位数字
[^list] :匹配任意非list列表中的一个字符,例: [^0-9]、 [^A-20-9]、 [^a-z]匹配任意一位非小写字母
\{n\} :匹配前面的子表达式n次,例: go\{2\}d、 '[0-9]\{2\} '匹配两位数字
\{n,\} :匹配前而的子表达式不少于n次,例: go\{2, \}d、'[0-9]\{2, \}'匹配两位及两位以上数字
\{n,m\} :匹配前面的子表达式n到m次,例: go\{2,3\}d、 ' [0-9]\{2,3\}'匹配两位到三位数字



注: egrep、 awk使用{n}、{n,小、{n, m}匹配时“{}”前不用加“\”

 

 

 

 

 

扩展正则表达式元字符:(支持工具egrep、awk)

 

+ :匹配前面子表达式1次以上,例: do+g, 将匹配至少一个o, 如dog、 doog、 dooog等
? :匹配前面子表达式0次或者1次,例: do?g, 将匹配dg或dog
() :将括号中的字符串作为h一个整体,例1: d(oo)+g," 将匹配oo整体1次以上,如doog、doooog等
| :以或的方式匹配字条串,例: d (oo|)g," 将匹配doog或者doofuck123g或者dooooooog


d15.pngd16.pngd17.png

相关文章
|
10天前
|
存储 Shell 数据安全/隐私保护
Shell 内建命令:Shell 的内在魔力
Shell 内建命令比外部命令执行快,不需额外进程。`type` 命令用来检查命令类型。内建命令如 `cd`、`alias` 和 `echo` 直接在 Shell 中执行,不涉及磁盘 I/O。`type` 示例展示了 `cd` 是内建的,`ifconfig` 是外部的。`bash` 包含多种内建命令,如 `cd` 用于切换目录,`alias` 定义别名,`read` 从输入读取数据。`echo` 默认加换行,`echo -n` 可避免。
19 5
|
9天前
|
Shell 虚拟化
分布式系统详解--框架(Zookeeper-基本shell命令)
分布式系统详解--框架(Zookeeper-基本shell命令)
12 1
|
12天前
|
安全 Shell Linux
探索Linux命令chsh:更改用户的默认shell
`chsh`是Linux命令,用于更改用户的默认登录shell。它涉及用户环境配置和系统安全,允许用户选择更适合自己的shell以提升效率。命令有交互式选项和参数如`-s`来指定新shell。在使用时要注意新shell的可执行性、权限问题及选择合适的shell。例如,要更改为bash,用户可运行`chsh`后按提示操作,而root用户能用`sudo chsh -s /bin/zsh john`为用户`john`设定zsh。在更改前,确认shell路径、权限,并了解不同shell的特点。
|
9天前
|
分布式计算 Hadoop Shell
分布式系统详解--框架(Hadoop-基本shell命令)
分布式系统详解--框架(Hadoop-基本shell命令)
8 0
|
2月前
|
Python
Python 内置正则表达式库re的使用
正则表达式是记录文本规则的代码,用于查找和处理符合特定规则的字符串。在Python中,常通过原生字符串`r&#39;string&#39;`表示。使用`re.compile()`创建正则对象,便于多次使用。匹配字符串有`match()`(从开头匹配)、`search()`(搜索首个匹配)和`findall()`(找所有匹配)。替换字符串用`sub()`,分割字符串则用`split()`。
40 3
|
26天前
|
数据库 Python
Python网络数据抓取(8):正则表达式
Python网络数据抓取(8):正则表达式
17 2
|
9天前
|
自然语言处理 JavaScript 前端开发
Python高级语法与正则表达式(二)
正则表达式描述了一种字符串匹配的模式,可以用来检查一个串是否含有某种子串、将匹配的子串做替换或者从某个串中取出符合某个条件的子串等。
|
9天前
|
安全 算法 Python
Python高级语法与正则表达式(一)
Python提供了 with 语句的写法,既简单又安全。 文件操作的时候使用with语句可以自动调用关闭文件操作,即使出现异常也会自动关闭文件操作。
|
18天前
|
Python
Python使用正则表达式分割字符串
在Python中,你可以使用re模块的split()函数来根据正则表达式分割字符串。这个函数的工作原理类似于Python内置的str.split()方法,但它允许你使用正则表达式作为分隔符。
|
4天前
|
Python
Python正则表达式详解:掌握文本匹配的魔法
Python正则表达式详解:掌握文本匹配的魔法