技术心得:实例解析shell子进程(subshell)

本文涉及的产品
云解析 DNS,旗舰版 1个月
全局流量管理 GTM,标准版 1个月
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
简介: 技术心得:实例解析shell子进程(subshell)

实例解析shell子进程(subshell )


通过实例,解析个人对shell子进程的一个了解,主要包括以下几个方面


1:什么是shell子进程


2:shell什么情况下会产生子进程


3:子进程的特点与注意事项


4:$变量$$在脚本里的意义,及如何得到子进程里的进程号

参考文档:apue,bash的man和info文档

1:什么是shell子进程

子进程,是从父子进程的概念出发的,unix操作系统的进程从init进程开始(init进程为1,而进程号0为系统原始进程,以下讨论的进程原则上不包括进程0)均有其对应的子进程,就算是由于父进程先行结束导致的孤儿进程,也会被init领养,使其父进程ID为1。

也因为所有的进程均有父进程,事实上,所有进程的创建,都可视为子进程创建过程。在apue一书里提及unix操作系统进程的创建,大抵上的模式都是进行fork+exec类系统调用。

理解子进程的创建执行,需要至少细分到二个步骤,包括

通过fork创建子进程环境,

通过exec加载并执行进程代码。

其间诸如继承的环境变量等细节,可以查看apue第八章相关章节。

而shell子进程(以下均称subshell),顾名思义,就是由“当前shell进程”创建的一个子进程

2:shell什么情况下会产生子进程

以下几个创建子进程的情况。(以下英文摘自info bash)

1:&,提交后台作业

If a command is terminated by the control operator `&', the shell executes the command asynchronously in a subshell.

2:管道

Each command in a pipeline is executed in its own subshell

3:括号命令列表

()操作符

Placing a list of commands between parentheses causes a subshell

environment to be created

4:执行外部脚本、程序:

When Bash finds such a file while searching the `$PATH' for a command, it spawns a subshell to execute it. In other words, executing

filename ARGUMENTS

is equivalent to executing

bash filename ARGUMENTS

说明:大致上子进程的创建包括以上四种情况了。需要说明的是只要是符合上边四种情况之一,便会创建(fork)子进程,不因是否是函数,命令,或程序,也不会因为是内置函数(buitin)或是外部程序。

此外,上边提到子进程创建与执行的二个步骤,shell子进程的创建在步骤之一并无多大差别,一般还是父进程调用fork产生进程环境,估在第二步exec的时候,是存在差别的。

shell做为解释语言程序,提供给第二步exec加载和执行的程序体并不是脚本本身,而是由第一行#!指定的,默认为shell程序,当然也可以是awk,sed等程序,在之前写过的一篇文章里:shell脚本的set id如何生效就有提及。这里不再展开讨论。

只不过子进程的执行会根据情况而有所差别,对于内置函数,exec程序体为shell程序,并在会在子shell直接调用内置函数,

而外部函数或程序,在创建了子进程环境后,大致会有二种执行情况:

1:直接exec外部程序,

比如下边例子中直接执行的sleep,pstree命令等

2:subshellexec程序体为shell程序,在此基础上会进一步创建一个子进程以执行函数。

比如下边例子中通过函数提交后台程序中的shell命令等

例:内置函数(直接在subshell里执行,不管是否通过函数)

【root@localhost shell】# mkfifo a

【root@localhost shell】# type echo

echo is a shell builtin

【root@localhost shell】# b(){ echo a>a; }

【root@localhost shell】# b &

【1】 15697

【root@localhost shell】# echo a>a &

【2】 15732

【root@localhost shell】# pstree -pa $$


bash,571


|-bash,15697


|-bash,15732


//代码效果参考:http://hnjlyzjd.com/hw/wz_24866.html

-pstree,15734 -pa 571</p> <p>例:定义函数并提交后台进行</p> <p>(函数调用中的sleep在subshell之下又创建一个子进程,</p> <p>而pstree,sleep命令的直接执行,则是直接在子进程上进行)</p> <p>【root@localhost shell】# a(){ sleep 30; } ;</p> <p>【root@localhost shell】# sleep 40 &</p> <p>【1】 15649</p> <p>【root@localhost shell】# a &</p> <p>【2】 15650</p> <p>【root@localhost shell】# pstree -pa $$

bash,571

|-bash,15650

| `-sleep,15651 30

|-pstree,15652 -pa 571

`-sleep,15649 40

对于第四点,要注意,shell脚本的执行模式,在第四点的二种模式下,shell是会创建子进程的:

filename ARGUMENTS

bash filename ARGUMENTS

但shell同时提供二种不创建子程序的进程创建方式

1:source命令,使用方法

Source filename ARGUMENTS

. filename ARGUMENTS

此种方法,直接在当前shell进程中执行filename脚本,filename结束后继续返回当前shell进程

2:exec命令,使用方法

Exec filename ARGUMENTS

此种方法直接在当前shell进程中执行filname脚本,filename结束后退出当前shell进程

3:子进程的特点与注意事项

这方面不具体展开,只提一点写脚本容易出现的错误。

做为子进程,其进程环境与父进程的环境是独立的, 所以在变量传递过程中,需要注意子进程内部不能更改到父进程的变量。

比如如下通过管道求和并赋给外部变量sum例子,结果sum值并不会因此改变:

【root@localhost shell】# sum=0

【root@localhost shell】# echo '1 2 3 4' |sed 's/ //n/g'|while read line; do sum+=$line; done

【root@localhost shell】# echo $sum

0

【root@localhost shell】#

bai@bbox:~$ echo '1 2 3 4' |sed 's/ /\n/g'|while read line; do sum+=$line; done;echo $sum

bai@bbox:~$ echo '1 2 3 4' |sed 's/ /\n/g'|(while read line; do sum+=$line; done;echo $sum)

1234

bai@bbox:~$

4:变量$$在脚本里的意义</p> <p>变量$$代表的是当前shell进程的进和id,这里要特别留意“当前shell”,

看看info bash里的说明

`$'

Expands to the process ID of the shell. In a `()' subshell, it

expands to the process ID of the invoking shell, not the subshell.

再看看man bash里的说明

$

Expands to the process ID of the shell. In a () subshell, it expands to the process ID of the current shell, not the subshell.

所以在实际环境中,$$并不一定“当前进程”的进程号,而是当前shell进程的进程号。</p> <p>从文档中,需要留意的便是 invoking shell (info) 或 current shell(man) 与 当前subshell进程的关系了</p> <p>这就引出了几个问题</p> <p>1:到底怎么样算是 current shell</p> <p>2:子进程里的$$对应的是哪个 current shell

3:如何猎取子进程的$$?</p> <p>做为调试和测试,下边的例子引用几个变量,</p> <p>BASH_SOURCE'</p> <p> An array variable whose members are the source filenames</p> <p> corresponding to the elements in theFUNCNAME' array variable.


BASH_LINENO'</p> <p> An array variable whose members are the line numbers in source</p> <p> files corresponding to each member of FUNCNAME.</p> <p>${BASH_LINENO【$i】}' is the line number in the source file where


${FUNCNAME【$i】}' was called. The corresponding source file name</p> <p> is${BASH_SOURCE【$i】}'. Use LINENO' to obtain the current line</p> <p> number.</p> <p>FUNCNAME'


An array variable containing the names of all shell functions


currently in the execution call stack. The element with index 0


is the name of any currently-executing shell function. The


bottom-most element is "main". This variable exists only when a


shell function is executing. Assignments to FUNCNAME' have no</p> <p> effect and return an error status. IfFUNCNAME' is unset, it


loses its special properties, even if it is subsequently reset.


脚本里set -x,并设置PS4跟踪程序执行过程


PS4='+【$SHELL】【$BASH_SUBSHELL】【$PPID-$$】【$LINENO】【"${BASH_SOURCE【*】}"】【${FUNCNAME【*】}】【${BASH_LINENO【*】}】/n +

PS4设置显示值如下:

【$SHELL】:当前shell路径

【$BASH_SUBSHELL】:子shell路径长度

【$PPID-$$】:父进程id,和变量$$值(current shell进程ID)

【$LINENO】:在当前shell的命令行号

【"${BASH_SOURCE【*】}"】:源脚本程序文件记录队列

【${FUNCNAME【*】}】:函数调用记录队列

【${BASH_LINENO【*】}】:执行行号记录队列

程序如下:

【root@localhost shell】# cat -n subshell.sh

+【/bin/bash】【0】【569-571】【1060】【""】【】【】

+cat -n subshell.sh

1 #!/bin/bash

2

3 set -x

4 sub2() {

5 # sh subshell2.sh

6 sleep 1

7 }

8 sub() {

9 sub2 &

10 sleep 20

11 }

12 sub &

13 pstree -p $PPID

执行结果如下:

【root@localhost shell】# bash subshell.sh

+【/bin/bash】【0】【569-571】【1059】【""】【】【】

+bash subshell.sh

+【/bin/bash】【0】【571-17858】【12】【"subshell.sh"】【】【0】

+sub

+【/bin/bash】【0】【571-17858】【13】【"subshell.sh"】【】【0】

+pstree -p 571

+【/bin/bash】【1】【571-17858】【10】【"subshell.sh subshell.sh"】【sub main】【12 0】

+sleep 20

+【/bin/bash】【1】【571-17858】【9】【"subshell.sh subshell.sh"】【sub main】【12 0】

+sub2

+【/bin/bash】【2】【571-17858】【6】【"subshell.sh subshell.sh subshell.sh"】【sub2 sub main】【9 12 0】

+sleep 1

bash(571)---bash(17858)-+-bash(17859)-+-bash(17860)---sleep(17863)

| `-sleep(17862)

`-pstree(17861)

说明:

1:

首先在当前shell(进程id 571)下执行subshell.sh ,产生子进程,

【$PPID-$$】=【571-17858】显示此时执行subshell.sh脚本的进程号为17858,


【】【0】显示未进行函数调用,未产生函数记录记录


说明在subshell.sh执行进程里,$$值保存的“current shell”即为本身,17858

【$LINENO】=【12】显示在subshell.sh第12行调用sub函数

sub函数在程序里通过&提交后台方式调用,

进程树显示,sub函数的调用在17858进程后创建子进程17859,执行体为bash

此时,ppid指示父进程为571,$$变量值为17858,


说明对于sub调用产生的进程,其“current shell”仍然为subshell.sh脚本执行进程17858


【$LINENO】=【13】显示在subshell.sh第13行执行pstree命令


pstree命令调用方式是在脚本里直接调用


进程树显示,pstree命令直接在17858进程后创建子进程17861并执行


此时,ppid指示父进程为571,$$变量值为17858,

说明对于这里运行的pstree命令的子进程,其“current shell”仍然为subshell.sh脚本执行进程17858

2:

【sub main】【12 0】显示进入sub函数内部

【$LINENO】=【9】显示执行(在sub函数内)脚本第9行,调用sub2函数

进程树显示,sub2函数的调用在17859进程后创建子进程17860,执行体为bash

此时,ppid仍然指示父进程为571,$$变量值为17858,


说明对于sub2调用产生的进程,其“current shell”仍然为subshell.sh脚本执行进程17858


【$LINENO】=【10】显示执行(在sub函数内)脚本第10行,sleep命令


此处sleep命令调用方式是在脚本里的sub函数内直接调用


进程树显示,sleep命令是sub函数调用时创建的进程17859后创建子进程17862并执行


此时,ppid指示父进程为571,$$变量值为17858,

说明对于这里运行的pstree命令的子进程,其“current shell”仍然为subshell.sh脚本执行进程17858

3:

【sub2 sub main】【9 12 0】显示进入sub2函数内部

【6】显示执行(在sub2函数内)脚本第6行,sleep 1

此处sleep命令调用方式是在脚本里的sub2函数内直接调用

进程树显示,sleep命令是sub2函数调用时创建的进程17860后创建子进程17863并执行

此时,ppid指示父进程为571,$$变量值为17858,


说明对于这里运行的sleep命令的子进程,其“current shell”仍然为subshell.sh脚本执行进程17858


终上


这里的$$只有二个值,

一个是最初的bash shell: 571,

一个是subshell.sh脚本调用时产生的进程:17858

其他由subshell.sh产生的子进程,无论是函数还是命令运行,$$变量值保存的“current shell”均为subshell.sh调用时产生的进程:17858


由此推论出上边提到的四种子shell的创建方法:提交后台,管道,括号命令列表,脚本调用。似乎只有第四种方法--脚本调用--产生的subshell可以做o为“current shell”


可以通过以下二个例子再次论证这个推论


例子一:


更改脚本调用方式,


此种方式采用当前shell进程执行subshell.sh,不再创建一个子进程


结果$$变量值保存的“current shell”均为当前进程

【root@localhost shell】# source subshell.sh

+【/bin/bash】【0】【569-571】【1062】【""】【】【】

+source subshell.sh

++【/bin/bash】【0】【569-571】【3】【"subshell.sh"】【】【1062】

+set -x

++【/bin/bash】【0】【569-571】【13】【"subshell.sh"】【】【1062】

+pstree -p 569

++【/bin/bash】【0】【569-571】【12】【"subshell.sh"】【】【1062】

+sub

++【/bin/bash】【1】【569-571】【1】【"subshell.sh subshell.sh"】【sub source】【12 1062】

+sub2

++【/bin/bash】【2】【569-571】【2】【"subshell.sh subshell.sh subshell.sh"】【sub2 sub source】【1 12 1062】

sleep 1

++【/bin/bash】【1】【569-571】【2】【"subshell.sh subshell.sh"】【sub source】【12 1062】

+sleep 20

sshd(569)---bash(571)-+-bash(18801)---sleep(18804)

|-bash(18806)---bash(18808)---sleep(18809)

`-pstree(18807)

例子二:

在子进程里边,采用脚本调用方式,或取子进程进程号

为此增加一个脚本subshell2.sh,并在subshell.sh进行调用

+cat -n subshell2.sh

1 #!/bin/bash

2 set -x

3 echo $PPID

4 sleep 10

+cat -n subshell.sh

1 #!/bin/bash

2

3 set -x

4 sub2() {

5 ./subshell2.sh &

6 sleep 1

7 }

8 sub() {

9 sub2 &

10 sleep 20

11 }

12 sub &

13 pstree -pa $PPID

【root@localhost shell】# ./subshell.sh

+【/bin/bash】【0】【569-571】【1138】【""】【】【】

+./subshell.sh

+【/bin/bash】【0】【571-19715】【13】【"./subshell.sh"】【】【0】

+pstree -pa 571

+【/bin/bash】【0】【571-19715】【12】【"./subshell.sh"】【】【0】

+sub

+【/bin/bash】【1】【571-19715】【9】【"./subshell.sh ./subshell.sh"】【sub main】【12 0】

+sub2

+【/bin/bash】【2】【571-19715】【5】【"./subshell.sh ./subshell.sh ./subshell.sh"】【sub2 sub main】【9 12 0】

./subshell2.sh

+【/bin/bash】【2】【571-19715】【6】【"./subshell.sh ./subshell.sh ./subshell.sh"】【sub2 sub main】【9 12 0】

sleep 1

+【/bin/bash】【1】【571-19715】【10】【"./subshell.sh ./subshell.sh"】【sub main】【12 0】

+sleep 20

+【/bin/bash】【0】【19718-19719】【3】【"./subshell2.sh"】【】【0】

+echo 19718

19718

+【/bin/bash】【0】【19718-19719】【4】【"./subshell2.sh"】【】【0】

+sleep 10

bash,571

`-subshell.sh,19715 ./subshell.sh

|-pstree,19717 -pa 571

`-subshell.sh,19716 ./subshell.sh

|-sleep,19721 20

`-subshell.sh,19718 ./subshell.sh

|-sleep,19720 1

`-subshell2.sh,19719 ./subshell2.sh

`-sleep,19722 10

从上边的执行结果可以看出,当程序执行进入subshell2.sh时,创建了进程号19294的进程境,$$变量值保存的“current shell”均为更新为subshell2.sh调用时创建的进程:


这样,打出来的subshell2.sh的父进程id,实际上就是

相关文章
|
3天前
|
网络协议 网络安全 网络虚拟化
本文介绍了十个重要的网络技术术语,包括IP地址、子网掩码、域名系统(DNS)、防火墙、虚拟专用网络(VPN)、路由器、交换机、超文本传输协议(HTTP)、传输控制协议/网际协议(TCP/IP)和云计算
本文介绍了十个重要的网络技术术语,包括IP地址、子网掩码、域名系统(DNS)、防火墙、虚拟专用网络(VPN)、路由器、交换机、超文本传输协议(HTTP)、传输控制协议/网际协议(TCP/IP)和云计算。通过这些术语的详细解释,帮助读者更好地理解和应用网络技术,应对数字化时代的挑战和机遇。
20 3
|
3天前
|
存储 网络协议 安全
30 道初级网络工程师面试题,涵盖 OSI 模型、TCP/IP 协议栈、IP 地址、子网掩码、VLAN、STP、DHCP、DNS、防火墙、NAT、VPN 等基础知识和技术,帮助小白们充分准备面试,顺利踏入职场
本文精选了 30 道初级网络工程师面试题,涵盖 OSI 模型、TCP/IP 协议栈、IP 地址、子网掩码、VLAN、STP、DHCP、DNS、防火墙、NAT、VPN 等基础知识和技术,帮助小白们充分准备面试,顺利踏入职场。
13 2
|
6天前
|
监控 关系型数据库 MySQL
MySQL自增ID耗尽应对策略:技术解决方案全解析
在数据库管理中,MySQL的自增ID(AUTO_INCREMENT)属性为表中的每一行提供了一个唯一的标识符。然而,当自增ID达到其最大值时,如何处理这一情况成为了数据库管理员和开发者必须面对的问题。本文将探讨MySQL自增ID耗尽的原因、影响以及有效的应对策略。
20 3
|
12天前
|
机器学习/深度学习 人工智能 自然语言处理
思通数科AI平台在尽职调查中的技术解析与应用
思通数科AI多模态能力平台结合OCR、NLP和深度学习技术,为IPO尽职调查、融资等重要交易环节提供智能化解决方案。平台自动识别、提取并分类海量文档,实现高效数据核验与合规性检查,显著提升审查速度和精准度,同时保障敏感信息管理和数据安全。
60 11
|
8天前
|
Kubernetes Cloud Native 云计算
云原生技术深度解析:重塑企业IT架构的未来####
本文深入探讨了云原生技术的核心理念、关键技术组件及其对企业IT架构转型的深远影响。通过剖析Kubernetes、微服务、容器化等核心技术,本文揭示了云原生如何提升应用的灵活性、可扩展性和可维护性,助力企业在数字化转型中保持领先地位。 ####
|
9天前
|
自然语言处理 并行计算 数据可视化
免费开源法律文档比对工具:技术解析与应用
这款免费开源的法律文档比对工具,利用先进的文本分析和自然语言处理技术,实现高效、精准的文档比对。核心功能包括文本差异检测、多格式支持、语义分析、批量处理及用户友好的可视化界面,广泛适用于法律行业的各类场景。
|
12天前
|
算法 Linux 定位技术
Linux内核中的进程调度算法解析####
【10月更文挑战第29天】 本文深入剖析了Linux操作系统的心脏——内核中至关重要的组成部分之一,即进程调度机制。不同于传统的摘要概述,我们将通过一段引人入胜的故事线来揭开进程调度算法的神秘面纱,展现其背后的精妙设计与复杂逻辑,让读者仿佛跟随一位虚拟的“进程侦探”,一步步探索Linux如何高效、公平地管理众多进程,确保系统资源的最优分配与利用。 ####
44 4
|
12天前
|
机器学习/深度学习 人工智能 自然语言处理
医疗行业的语音识别技术解析:AI多模态能力平台的应用与架构
AI多模态能力平台通过语音识别技术,实现实时转录医患对话,自动生成结构化数据,提高医疗效率。平台具备强大的环境降噪、语音分离及自然语言处理能力,支持与医院系统无缝集成,广泛应用于门诊记录、多学科会诊和急诊场景,显著提升工作效率和数据准确性。
|
13天前
|
缓存 负载均衡 算法
Linux内核中的进程调度算法解析####
本文深入探讨了Linux操作系统核心组件之一——进程调度器,着重分析了其采用的CFS(完全公平调度器)算法。不同于传统摘要对研究背景、方法、结果和结论的概述,本文摘要将直接揭示CFS算法的核心优势及其在现代多核处理器环境下如何实现高效、公平的资源分配,同时简要提及该算法如何优化系统响应时间和吞吐量,为读者快速构建对Linux进程调度机制的认知框架。 ####
|
3天前
|
存储 供应链 物联网
深入解析区块链技术的核心原理与应用前景
深入解析区块链技术的核心原理与应用前景

推荐镜像

更多