《懒人Shell脚本》之一——遍历文件并格式化输出文件

简介: 【背景】1.项目开发中,急需要根据资源路径res下的文件,生成如下三种格式的文件。格式一:

#define IDR_CEF_0001    101

#define IDR_CEF_0002    102

...

#define     IDR_CEF_0122    222

1

2

3

4

格式二:

{“about.html”, IDR_CEF_0001},

{“addProbe.html”, IDR_CEF_0002},

{“img/helpimg/help17.PNG”, IDR_CEF_0122},


格式三:

IDR_CEF_0001 HTML “res\about.html”

IDR_CEF_0002 HTML “res\addProbe.html”

IDR_CEF_0122 HTML “res\img\helpimg\help17.PNG”


【着急情况半手工实现如下】

1.C++实现获取文件名称,输出到txt文档中,拷贝到Excel以便按列处理。

2.构造格式一左数据,组合成格式一数据。

3.结合notepad++正则表达式匹配,构造格式二、三内容,组合成格式二、三数据。


缺点非常明显:

1.手动,很容易路径弄错,文件少弄,后期Bug不可评估。

2.耗时也接近3个小时。

3.如果又有新的文件如(Inner,outer,other)三份资源文件,需要操作3次。

总之,很傻,很笨。


【Shell脚本实现】

源码如下:


#! /bin/bash


function read_dir()

{

for file in `ls $1`

do

if [ -d $1"/"$file ]; then

read_dir $1"/"$file

else

echo $1"/"$file

fi

done

}


#output files

touch out_files.txt

read_dir "/home/laoyang/test/res" > out_files.txt


#recurse files

#1.delete the front path /home/laoyang

cat out_files.txt | sed 's/\/home\/laoyang\///g' > out22_files.txt


#get line nums

linenums=`cat out22_files.txt | wc -l`

echo $linenums


#construct format_files.txt

#1.#define IDR_CEF_0001 101

rm -rf format_file1.txt

for((i=1;i<=$linenums;i++))

do

echo "#define   IDR_CEF_"${i} $[ 100 + ${i} ] >> format_file1.txt

done


#2. {"about.html",  IDR_CEF_0001},

cat out22_files.txt | sed 's/test\/res\///g' > out33_files.txt

awk '{print $2}' format_file1.txt > format_file2_1.txt #IDR_CEF_0001 format

sed 's/$/},/g' format_file2_1.txt > format_file2_2.txt

sed 's/^/{"/g' out33_files.txt > out4_file.txt

sed 's/$/",/g' out4_file.txt > out5_file.txt


paste -d "  " out5_file.txt format_file2_2.txt > format_file2.txt


#3.IDR_CEF_0001 HTML    "res\\about.html"

rm -rf format_file3_2.txt

for((i=1;i<=$linenums;i++))

do

echo "HTML" >> format_file3_2.txt

done


cat out22_files.txt | sed 's/test\///g' > out44_files.txt

cat out44_files.txt | sed 's#\/#\\\\#g' > out55_files.txt  


cat out55_files.txt | sed 's#^#"#g' > out66_files.txt

cat out66_files.txt | sed 's#$#"#g' > out77_files.txt


paste -d "  " format_file2_1.txt format_file3_2.txt > format_file3_tmp.txt

paste -d "  " format_file3_tmp.txt out77_files.txt > format_file3.txt


mkdir format_rst

mv format_file1.txt format_file2.txt format_file3.txt ./format_rst/

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

优点:

1.快,不会丢失,有多少文件就是多少文件。

2.可以复用,新增文件或者其他模块也有类似文件,直接跑一遍脚本即可。


Shell脚本在文本逐行读取、按列匹配、正则匹配有先天的优势。所以Shell实现是很好的选择。

如果用C++实现代码行数会几百甚至上千,且匹配会非常复杂。


相关文章
|
2月前
|
Shell
Shell 文件包含
10月更文挑战第5天
33 4
|
3月前
|
Unix Shell Linux
LeetCode刷题 Shell编程四则 | 194. 转置文件 192. 统计词频 193. 有效电话号码 195. 第十行
本文提供了几个Linux shell脚本编程问题的解决方案,包括转置文件内容、统计词频、验证有效电话号码和提取文件的第十行,每个问题都给出了至少一种实现方法。
LeetCode刷题 Shell编程四则 | 194. 转置文件 192. 统计词频 193. 有效电话号码 195. 第十行
|
2月前
|
Shell
一个用于添加/删除定时任务的shell脚本
一个用于添加/删除定时任务的shell脚本
86 1
|
29天前
|
Shell Linux 测试技术
6种方法打造出色的Shell脚本
6种方法打造出色的Shell脚本
53 2
6种方法打造出色的Shell脚本
|
16天前
|
XML JSON 监控
Shell脚本要点和难点以及具体应用和优缺点介绍
Shell脚本在系统管理和自动化任务中扮演着重要角色。尽管存在调试困难、可读性差等问题,但其简洁高效、易于学习和强大的功能使其在许多场景中不可或缺。通过掌握Shell脚本的基本语法、常用命令和函数,并了解其优缺点,开发者可以编写出高效的脚本来完成各种任务,提高工作效率。希望本文能为您在Shell脚本编写和应用中提供有价值的参考和指导。
43 1
|
20天前
|
Ubuntu Shell 开发工具
ubuntu/debian shell 脚本自动配置 gitea git 仓库
这是一个自动配置 Gitea Git 仓库的 Shell 脚本,支持 Ubuntu 20+ 和 Debian 12+ 系统。脚本会创建必要的目录、下载并安装 Gitea,创建 Gitea 用户和服务,确保 Gitea 在系统启动时自动运行。用户可以选择从官方或小绿叶技术博客下载安装包。
40 2
|
2月前
|
监控 网络协议 Shell
ip和ip网段攻击拦截系统-绿叶结界防火墙系统shell脚本
这是一个名为“小绿叶技术博客扫段攻击拦截系统”的Bash脚本,用于监控和拦截TCP攻击。通过抓取网络数据包监控可疑IP,并利用iptables和firewalld防火墙规则对这些IP进行拦截。同时,该系统能够查询数据库中的白名单,确保合法IP不受影响。此外,它还具备日志记录功能,以便于后续分析和审计。
49 6
|
1月前
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
2月前
|
监控 Unix Shell
shell脚本编程学习
【10月更文挑战第1天】shell脚本编程
71 12
|
2月前
|
存储 运维 监控
自动化运维:使用Shell脚本简化日常任务
【9月更文挑战第35天】在IT运维的日常工作中,重复性的任务往往消耗大量的时间。本文将介绍如何通过编写简单的Shell脚本来自动化这些日常任务,从而提升效率。我们将一起探索Shell脚本的基础语法,并通过实际案例展示如何应用这些知识来创建有用的自动化工具。无论你是新手还是有一定经验的运维人员,这篇文章都会为你提供新的视角和技巧,让你的工作更加轻松。
67 2