使用shell脚本巧妙统计文件

简介: 在数据迁移的过程中,会产生大量的dump文件,需要对dump的文件情况进行一个简单清晰的管理,比如目录下的文件特别多,而且某些表比较大,对应的dump文件比较多,就想得到一个很简洁的报告,能够统计出来每个表有多少个dump文件。

在数据迁移的过程中,会产生大量的dump文件,需要对dump的文件情况进行一个简单清晰的管理,比如目录下的文件特别多,而且某些表比较大,对应的dump文件比较多,就想得到一个很简洁的报告,能够统计出来每个表有多少个dump文件。

比如有1000个dump文件,都是基于 表TEST1,TEST2,TEST3,TEST4的。那么就想得到一个简单的统计报告,类似下面的形式

TEST1 100

TEST2 450

TEST3 300

TEST4 150

 

简单模拟一下这个问题。

使用如下的脚本a.sh来生成DUMP文件吧。

for i in {1..$2}
do
touch $1_EXT_$i.dmp
done

 

生成这1000个dump文件。

[ora11g@rac1 DUMP]$ ksh a.sh TEST1 100
[ora11g@rac1 DUMP]$ ksh a.sh TEST2 450
[ora11g@rac1 DUMP]$ ksh a.sh TEST3 300
[ora11g@rac1 DUMP]$ ksh a.sh TEST4 150

[ora11g@rac1 DUMP]$ ll *.dmp|wc -l
1000

简单看一下生成的dump的情况。
[ora11g@rac1 DUMP]$ ll *.dmp|tail -10
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_91.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_92.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_93.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_94.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_95.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_96.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_97.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_98.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_99.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_9.dmp
[ora11g@rac1 DUMP]$

 

首先需要得到的是在这个目录下有几个相关的表。

比如像目前的情况,就需要得到当前目录下有

TEST1

TEST2

TEST3

TEST4

可以使用如下的命令来统计得到。

[ora11g@rac1 DUMP]$  ls -lrt *.dmp|awk '{print $9}'|awk -F_EXT '{print $1}'|uniq
TEST1
TEST2
TEST3
TEST4

 

然后更近一步,怎么得到每个表对应多少个dump文件呢。

可以使用如下的脚本b.sh来快速得到

ls -lrt *.dmp|awk '{print $9}'|awk -F_EXT '{print $1}'|uniq|xargs -i echo "echo {} \`ls -lrt {}_EXT_[0-9]*.dmp|wc -l \`>> tablst" >test.sh
ksh test.sh
rm test.sh

[ora11g@rac1 DUMP]$ ksh b.sh
[ora11g@rac1 DUMP]$ cat tablst
TEST1 100
TEST2 450
TEST3 300
TEST4 150

这样文件的统计工作就很清晰明了了。

目录
相关文章
|
3天前
|
Shell Android开发
Android系统 adb shell push/pull 禁止特定文件
Android系统 adb shell push/pull 禁止特定文件
15 1
|
24天前
|
弹性计算 Shell Perl
ecs服务器shell常用脚本练习(二)
【4月更文挑战第1天】shell代码训练(二)
106 1
|
27天前
|
Java Shell
SpringBoot启动脚本Shell
SpringBoot启动脚本Shell
17 0
|
4天前
|
Java 关系型数据库 MySQL
Elasticsearch【问题记录 01】启动服务&停止服务的2类方法【及 java.nio.file.AccessDeniedException: xx/pid 问题解决】(含shell脚本文件)
【4月更文挑战第12天】Elasticsearch【问题记录 01】启动服务&停止服务的2类方法【及 java.nio.file.AccessDeniedException: xx/pid 问题解决】(含shell脚本文件)
30 3
|
1天前
|
监控 Shell 应用服务中间件
第十二章 Shell脚本编写及常见面试题(二)
第十二章 Shell脚本编写及常见面试题(二)
|
1天前
|
监控 关系型数据库 Shell
第十二章 Shell脚本编写及常见面试题(一)
第十二章 Shell脚本编写及常见面试题(一)
|
2天前
|
监控 Shell
生产环境Shell脚本Ping监控主机是否存活(多种方法)
生产环境Shell脚本Ping监控主机是否存活(多种方法)
|
2天前
|
运维 Shell
Shell脚本判断IP是否合法性(多种方法)
Shell脚本判断IP是否合法性(多种方法)
|
8天前
|
运维 监控 Shell
利用Shell脚本编写局域网监控软件:实时监测主机连接情况
本文介绍了如何使用Shell脚本创建一个局域网监控工具,以实时检查主机连接状态。脚本包括扫描IP地址范围检测主机可达性及使用`netstat`监控ESTABLISHED连接。此外,还展示了如何每60秒将连接数数据自动提交到指定网站API,以便实时跟踪网络活动。这个自动化监控系统有助于提升网络安全性和故障排查效率。
32 0
|
9天前
|
Shell
Shell脚本之流程控制语句
Shell脚本之流程控制语句