三剑客

简介: 三剑客

sed:字符流的编辑工具 (行编辑工具)==按照每行中的字符进行处理操作

sed 命令作用说明:

1).擅长对行进行操作处理

2).擅长将文件的内容信息进行修改调整/删除

编写脚本:修改文件内容信息时

a  sed命令查询信息方法

根据文件内容的行号进行查询

test1:显示单行信息

# sed -n '2p' kang.txt

test2:根据行号信息,输出多行内容(连续)

# sed -n '1,3p' kang.txt

test3:根据内容信息,输出多行内容(不连续)

# sed -n '1p;3p' kang.txt

根据文件内容的信息进行查询

test1:根据内容信息,输出单行内容

# 将有kang 行的信息,输出单行内容

# sed -n '/kang/p' kang.txt

test2: 根据内容信息,输出多行内容(连续)

# 将有kang到he行的信息都输出出来

# sed -n '/kang/,/he/p' kang.txt

b sed命令添加信息方法

在文件第一行添加信息

kang2021

# sed '1ikang2021' kang.txt

在文件的最后一行添加信息

kang2022

# sed  '7akang2021' kang.txt

# sed '$akang,520' kang.txt

cat -n kang.txt  显示具体内容行号

总结: sed 命令的指令信息

pprint输出信息

i  insert   插入信息,在指定信息前面插入新的信息

aappend附加信息,在指定信息后面附加新的信息

ddelete删除指定信息

ssubstitute代替     g全局

test: 在有hehao 的行前面添加youxiu;在zhidaobu后面添加wohenbang

# sed -e '/hehao/iyouxiu' -e '/zhidaobu/awohenbang' kang.txt

# 添加多行信息

# sed '$a100\n101' kang.txt

总结: sed命令的参数信息

-n  取消默认输出

-r  识别扩展正则

-i  真实编辑文件(将内存中的信息覆盖到磁盘中)

-e  识别sed命令多个操作指令

文件中添加内容的方法:

1.vim/vi

2.cat>>xxx<EOF  ..EOF

3.echo-e"xxx\nxxx"

4.sed'na/ixxx\nxxx'

c sed命令删除信息方法

  1. 删除单行信息

# sed ‘2d’ kang.txt

  1. 删除多行信息

# sed '2,4d' kang.txt (2-4)

# sed '3d;6d' kang.txt (3和6)

  1. 删除有kang520信息的行

# sed '/kang520/d' kang.txt

  1. 取消空行显示

# sed '/^$/d' kang.txt

d sed命令修改信息方法

# sed 's#原内容#修改后内容#g' kang.txt

# sed  's#()#\n#g' 文件信息 后项引用前项

提取ip地址的方法

# ip a s ens33|sed -rn '3s#^.*t (.*)/24.*#\1#gp'

修改文件内容直接进行自动备份

# sed -i .bak 's#kang520#kang2020#g' kang.txt

批量修改文件的扩展名,将kangxxx.txt 扩展名修改为kang.bak

# ls kang*.txt|sed -r 's#(.*)txt#mv & \1bak#g'

专业命令:rename

rename .txt .bak kang*.txt

awk 擅长对列进行操作/进行数据信息的统计(数组)

作用特点:

  1. 排除信息
  2. 查询信息
  3. 统计信息
  4. 替换信息

语法格式

awk [参数] '模式-动作' 文件

[root@ansible ~]# cat awk.txt

Zhang   Dandan  2733885168      :250:100:175

Zhang   Xiaoyu  390320151       :155:90:201

Meng    Feixue  80042789        :250:60:50

Wu      Waiwai  70271111        :250:80:75

Liu     Bing    4117483         :250:100:175

Wang    Xiaoai  3515064655      :50:95:135

Zi      Gege    1986787350      :250:168:200

Lao     Nanhai  918391635       :250:100:300

命令查询信息方法:

按照行号查询信息:

# 单行

# awk 'NR==2' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

# 多行

# awk 'NR==2,NR==4' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

Meng    Feixue  80042789        :250:60:50

Wu      Waiwai  70271111        :250:80:75

# 多行(不连续)

# awk 'NR==2;NR==4' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

Wu      Waiwai  70271111        :250:80:75

按照字符查询

# awk 'Xiaoyu' awk.txt

# awk '/Xiaoyu/' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

# awk '/Xiaoyu/,/Waiwai/' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

Meng    Feixue  80042789        :250:60:50

Wu      Waiwai  70271111        :250:80:75

# awk '/Xiaoyu/;/Waiwai/' awk.txt

Zhang   Xiaoyu  390320151       :155:90:201

Wu      Waiwai  70271111        :250:80:75

指定列

# awk '/Xiaoyu/{print $1,$3}' awk.txt

Zhang 390320151

# awk '/Xiaoyu/{print $1","$3}' awk.txt

Zhang,390320151

# awk '/Zhang/{print $NF}' awk.txt

:250:100:175

:155:90:201

-F 指定分隔符

awk '/Zhang/{print $NF}' awk.txt| awk -F ":" '{print $3}'

100

90

# awk -F ":" '/Zhang/{print $3}' awk.txt

100

90

# awk -F "[ :]+" '/Zhang/{print $5}' awk.txt

100

90

# awk -F "[ :]+" '/Zhang/{print $(NF-1)}' awk.txt

100

90

显示所有以41开头的ID号码的人的全名和ID号码

# awk '$3~/^41/{print $1,$2,$3}' awk.txt

Liu Bing 4117483

Lao Nanhai 418391635

显示所有ID号码最后一位数字是1或5的人的全名

1)

# awk '$3~/[15]$/{print $1,$2}' awk.txt

Zhang Xiaoyu

Wu Waiwai

Wang Xiaoai

Lao Nanhai

2)

# awk '$3~/1$|5$/{print $1,$2}' awk.txt

Zhang Xiaoyu

Wu Waiwai

Wang Xiaoai

Lao Nanhai

3)

[root@ansible ~]# awk '$3~/(1|5)$/{print $1,$2}' awk.txt | column -t

Zhang  Xiaoyu

Wu     Waiwai

Wang   Xiaoai

Lao    Nanhai

gsub (/需要替换的信息/,"修改成什么信息",将哪列信息进行修改)

# awk '$2~/Xiaoyu/{gsub(/:/,"$",$NF);print$NF}' awk.txt

$155$90$201

文件中的空行进行排除/文件中注释信息进行排除

# grep -Ev "^#|^$" 文件信息

# sed -n '/^#|^$/!p' 文件信息

# awk '/^#|^$/' awk.txt

#

总结: awk命令中$符号的用法

$1 $2 $3 : 取第几列

$NF : 取最后一列信息

$(NF-n)  :取倒数第几列

$0           : 取所有列的信息

awk高级功能说明

a. 对日志信息进行统计(技术)


b. 对日志信息数值进行求和 客户端-下载  服务端-上传    (消耗网络流量)

c. (数组)进行排序分析

d. 脚本编写(循环语句 判断语句)

awk模式说明:匹配的条件信息

普通模式

  1. 正则表达式作为模式

# awk '/^oldboy/{print xx}'

  1. 利用比较匹配信息

NR==2

NR>=2

NR<=2

NR==3,NR==10 (范围)

  1. 特殊模式
    BEGIN{}

# awk 'BEGIN{print "姓","名","捐款记录"}{print $0}' awk.txt | column -t

姓     名      捐款记录

Zhang  Dandan  2733885168  :250:100:175

Zhang  Xiaoyu  390320151   :155:90:201

Meng   Feixue  80042789    :250:60:50

Wu     Waiwai  70271111    :250:80:75

#

Liu    Bing    4117483     :250:100:175

Wang   Xiaoai  3515064655  :50:95:135

Zi     Gege    1986787350  :250:168:200

Lao    Nanhai  418391635   :250:100:300

  1. END{}

# awk 'BEGIN{print "姓","名","捐款记录"}{print $0}END{print "操作结束"}' awk.txt | column -t

姓        名      捐款记录

Zhang     Dandan  2733885168  :250:100:175

Zhang     Xiaoyu  390320151   :155:90:201

Meng      Feixue  80042789    :250:60:50

Wu        Waiwai  70271111    :250:80:75

#

Liu       Bing    4117483     :250:100:175

Wang      Xiaoai  3515064655  :50:95:135

Zi        Gege    1986787350  :250:168:200

Lao       Nanhai  418391635   :250:100:300

操作结束

# awk -vFS=":" '{print $2}' awk.txt

250

155

250

250




250

50

250

250

# awk '/^$/{i=i+1;print i}' awk.txt

1

2

# awk '/^$/{i=i+1}END{print i}' awk.txt

2

  1. 统计系统中有多少个虚拟用户 普通用户



相关文章
|
3天前
|
人工智能 自然语言处理 Shell
深度评测 | 仅用3分钟,百炼调用满血版 Deepseek-r1 API,百万Token免费用,简直不要太爽。
仅用3分钟,百炼调用满血版Deepseek-r1 API,享受百万免费Token。阿里云提供零门槛、快速部署的解决方案,支持云控制台和Cloud Shell两种方式,操作简便。Deepseek-r1满血版在推理能力上表现出色,尤其擅长数学、代码和自然语言处理任务,使用过程中无卡顿,体验丝滑。结合Chatbox工具,用户可轻松掌控模型,提升工作效率。阿里云大模型服务平台百炼不仅速度快,还确保数据安全,值得信赖。
133302 24
深度评测 | 仅用3分钟,百炼调用满血版 Deepseek-r1 API,百万Token免费用,简直不要太爽。
|
5天前
|
人工智能 API 网络安全
用DeepSeek,就在阿里云!四种方式助您快速使用 DeepSeek-R1 满血版!更有内部实战指导!
DeepSeek自发布以来,凭借卓越的技术性能和开源策略迅速吸引了全球关注。DeepSeek-R1作为系列中的佼佼者,在多个基准测试中超越现有顶尖模型,展现了强大的推理能力。然而,由于其爆火及受到黑客攻击,官网使用受限,影响用户体验。为解决这一问题,阿里云提供了多种解决方案。
16290 37
|
13天前
|
机器学习/深度学习 人工智能 自然语言处理
PAI Model Gallery 支持云上一键部署 DeepSeek-V3、DeepSeek-R1 系列模型
DeepSeek 系列模型以其卓越性能在全球范围内备受瞩目,多次评测中表现优异,性能接近甚至超越国际顶尖闭源模型(如OpenAI的GPT-4、Claude-3.5-Sonnet等)。企业用户和开发者可使用 PAI 平台一键部署 DeepSeek 系列模型,实现 DeepSeek 系列模型与现有业务的高效融合。
|
4天前
|
并行计算 PyTorch 算法框架/工具
本地部署DeepSeek模型
要在本地部署DeepSeek模型,需准备Linux(推荐Ubuntu 20.04+)或兼容的Windows/macOS环境,配备NVIDIA GPU(建议RTX 3060+)。安装Python 3.8+、PyTorch/TensorFlow等依赖,并通过官方渠道下载模型文件。配置模型后,编写推理脚本进行测试,可选使用FastAPI服务化部署或Docker容器化。注意资源监控和许可协议。
1241 8
|
13天前
|
人工智能 搜索推荐 Docker
手把手教你使用 Ollama 和 LobeChat 快速本地部署 DeepSeek R1 模型,创建个性化 AI 助手
DeepSeek R1 + LobeChat + Ollama:快速本地部署模型,创建个性化 AI 助手
3386 117
手把手教你使用 Ollama 和 LobeChat 快速本地部署 DeepSeek R1 模型,创建个性化 AI 助手
|
8天前
|
人工智能 自然语言处理 API
DeepSeek全尺寸模型上线阿里云百炼!
阿里云百炼平台近日上线了DeepSeek-V3、DeepSeek-R1及其蒸馏版本等六款全尺寸AI模型,参数量达671B,提供高达100万免费tokens。这些模型在数学、代码、自然语言推理等任务上表现出色,支持灵活调用和经济高效的解决方案,助力开发者和企业加速创新与数字化转型。示例代码展示了如何通过API使用DeepSeek-R1模型进行推理,用户可轻松获取思考过程和最终答案。
|
5天前
|
人工智能 自然语言处理 程序员
如何在通义灵码里用上DeepSeek-V3 和 DeepSeek-R1 满血版671B模型?
除了 AI 程序员的重磅上线外,近期通义灵码能力再升级全新上线模型选择功能,目前已经支持 Qwen2.5、DeepSeek-V3 和 R1系列模型,用户可以在 VSCode 和 JetBrains 里搜索并下载最新通义灵码插件,在输入框里选择模型,即可轻松切换模型。
901 14
|
12天前
|
API 开发工具 Python
阿里云PAI部署DeepSeek及调用
本文介绍如何在阿里云PAI EAS上部署DeepSeek模型,涵盖7B模型的部署、SDK和API调用。7B模型只需一张A10显卡,部署时间约10分钟。文章详细展示了模型信息查看、在线调试及通过OpenAI SDK和Python Requests进行调用的步骤,并附有测试结果和参考文档链接。
1904 9
阿里云PAI部署DeepSeek及调用
|
9天前
|
人工智能 数据可视化 Linux
【保姆级教程】3步搞定DeepSeek本地部署
DeepSeek在2025年春节期间突然爆火出圈。在目前DeepSeek的网站中,极不稳定,总是服务器繁忙,这时候本地部署就可以有效规避问题。本文以最浅显易懂的方式带读者一起完成DeepSeek-r1大模型的本地部署。
|
12天前
|
缓存 自然语言处理 安全
快速调用 Deepseek API!【超详细教程】
Deepseek 强大的功能,在本教程中,将指导您如何获取 DeepSeek API 密钥,并演示如何使用该密钥调用 DeepSeek API 以进行调试。

热门文章

最新文章