Spark修炼之道(基础篇)——Linux大数据开发基础:第十二节:Shell编程入门(四)

简介: 本节主要内容shell脚本调试shell函数shell控制结构初步1. shell脚本调试当脚本出错时,需要对脚本进行调试,学会脚本调试是每个linux系统使用者必备技能。shell脚本调试无需任何额外的工具,只需要要在脚本文件前加-x选项即可,创建debug.sh文件,内容如下:#!/bin/bash#Filename: debug.shech

本节主要内容

  1. shell脚本调试
  2. shell函数
  3. shell控制结构初步

1. shell脚本调试

当脚本出错时,需要对脚本进行调试,学会脚本调试是每个linux系统使用者必备技能。shell脚本调试无需任何额外的工具,只需要要在脚本文件前加-x选项即可,创建debug.sh文件,内容如下:

#!/bin/bash
#Filename: debug.sh
echo "scripting"
echo "debuging"
ls +

使用bash -x 命令进行脚本调试

root@sparkslave02:~/ShellLearning/Chapter12# bash -x debug.sh 
+ echo scripting
scripting
+ echo debuging
debuging
+ ls +
ls: cannot access +: No such file or directory

-x选项将shell脚本每一行命令及执行结果打印输出,如此便能帮助开发人员快速定位到出错的脚本位置。如果代码量比较大或者脚本开发人员知道代码出错的大致位置,则可以使用set -x; set +x;命令进行局部调试,如

#!/bin/bash
#Filename: debug2.sh
for i in {1..6}
do
set -x
//set -x表示跟在该命令后的脚本输出调试信息
echo $i
//set +x表示从此处禁用调试
set +x
done
echo "Script executed"

上面的代码意味着,只会打印输出echo $i,具体调试信息输出如下:

root@sparkslave02:~/ShellLearning/Chapter12# ./debug2.sh 
+ echo 1
1
+ set +x
+ echo 2
2
+ set +x
+ echo 3
3
+ set +x
+ echo 4
4
+ set +x
+ echo 5
5
+ set +x
+ echo 6
6
+ set +x

除bash -x命令进行脚本调试之外,还可以在脚本的第一行添加-xv命令,使得脚本默认进行调试,例如:

//加-xv选项,使脚本执行时会打印输出调试信息
#!/bin/bash -xv
#Filename: debug.sh
for i in {1..6}
do
set -x
echo $i
set +x
done
echo "Script executed"
~                       

2. shell函数

同样,同c、c ++等编程语言一样,shell中可以定义函数,函数的定义格式如下

function fname()
{
   shell脚本语句;
}

vim命令创建functionDemo.sh脚本文件

root@sparkslave02:~/ShellLearning/Chapter12# vim functionDemo.sh

#定义一个函数fname
function fname(){
   #输出第一个参数
   echo $1
   #输出函数所在文件名
   echo $0
   #输出所有参数
   echo $@
}
#将函数中传入两个参数
fname "arg1" "args"

执行结果:

root@sparkslave02:~/ShellLearning/Chapter12# ./functionDemo.sh 
arg1
./functionDemo.sh
arg1 args

3. shell控制结构初步

同其它编程语言一样,shell也有自己的控制结构,包括for循环、while循环、until循环,if语句等。本小节先介绍for循环的使用,for循环的用法非常多,下面给出四个最为常用的for循环用法

(1)for i in $(seq 10)

root@sparkslave02:~/ShellLearning/Chapter12# vim forloop.sh
for i in $(seq 10)
do
echo $i
done

root@sparkslave02:~/ShellLearning/Chapter12# chmod a+x forloop.sh 
root@sparkslave02:~/ShellLearning/Chapter12# ./forloop.sh 
1
2
3
4
5
6
7
8
9
10

(2) for((i=1;i<=10;i++))

for((i=2;i<=10;i++))
do
echo $i
done

(3)for i in ls

root@sparkslave02:~/ShellLearning/Chapter12# vim forloop3.sh
for i in `ls`
do
echo $i
done

root@sparkslave02:~/ShellLearning/Chapter12# chmod a+x forloop3.sh
root@sparkslave02:~/ShellLearning/Chapter12# ./forloop3.sh 
debug2.sh
debug.sh
forloop2.sh
forloop3.sh
forloop.sh
functionDemo.sh

(4)for i in ${arr[*]}

root@sparkslave02:~/ShellLearning/Chapter12# vim forloop4.sh
arr=(0 1 2 3)
for i in ${arr[*]}
do
echo ${arr[i]}
done

root@sparkslave02:~/ShellLearning/Chapter12# ./forloop4.sh 
0
1
2
3
相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
8月前
|
数据采集 分布式计算 大数据
不会Python,还敢说搞大数据?一文带你入门大数据编程的“硬核”真相
不会Python,还敢说搞大数据?一文带你入门大数据编程的“硬核”真相
172 1
|
Unix Linux Shell
Linux新手入门手册
在Linux或类Unix系统中,掌握一系列基础命令和快捷键是提升工作效率的关键。这些工具和技巧不仅能帮助用户更高效地管理系统,还能在日常使用中带来极大的便利。以下是对这些基础操作与快捷键的详细解析大全。
252 9
|
分布式计算 大数据 数据处理
技术评测:MaxCompute MaxFrame——阿里云自研分布式计算框架的Python编程接口
随着大数据和人工智能技术的发展,数据处理的需求日益增长。阿里云推出的MaxCompute MaxFrame(简称“MaxFrame”)是一个专为Python开发者设计的分布式计算框架,它不仅支持Python编程接口,还能直接利用MaxCompute的云原生大数据计算资源和服务。本文将通过一系列最佳实践测评,探讨MaxFrame在分布式Pandas处理以及大语言模型数据处理场景中的表现,并分析其在实际工作中的应用潜力。
542 2
|
Unix Linux Shell
linux入门!
本文档介绍了Linux系统入门的基础知识,包括操作系统概述、CentOS系统的安装与远程连接、文件操作、目录结构、用户和用户组管理、权限管理、Shell基础、输入输出、压缩打包、文件传输、软件安装、文件查找、进程管理、定时任务和服务管理等内容。重点讲解了常见的命令和操作技巧,帮助初学者快速掌握Linux系统的基本使用方法。
817 3
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
Shell
Shell编程(下)
Shell编程(下)
219 1
|
Shell Linux Windows
Shell编程(上)
Shell编程(上)
187 1
|
分布式计算 Java 大数据
大数据-92 Spark 集群 SparkRDD 原理 Standalone详解 ShuffleV1V2详解 RDD编程优化
大数据-92 Spark 集群 SparkRDD 原理 Standalone详解 ShuffleV1V2详解 RDD编程优化
221 0
大数据-92 Spark 集群 SparkRDD 原理 Standalone详解 ShuffleV1V2详解 RDD编程优化
|
存储 数据可视化 Linux
Linux 基础入门
Linux 基础入门
159 0
|
SQL 分布式计算 大数据
大数据-91 Spark 集群 RDD 编程-高阶 RDD广播变量 RDD累加器 Spark程序优化
大数据-91 Spark 集群 RDD 编程-高阶 RDD广播变量 RDD累加器 Spark程序优化
215 0