掌握sh文件和shell脚本:如何在串行和并行模式下运行Python脚本

简介: 掌握sh文件和shell脚本:如何在串行和并行模式下运行Python脚本

前言


在pycharm上依次执行多个python文件比较繁琐,于是乎上传到服务器编写sh文件来一键启动!


0、sh文件的介绍


.sh文件是一种在Linux和其他Unix系统中使用的脚本文件,通常用于自动化系统管理任务或在命令行环境中执行一系列命令。.sh文件的全称是shell脚本文件,其中shell指的是命令行解释器,它可以解释并执行一系列命令。


  • 通常情况下,.sh文件是用纯文本格式编写的,可以使用任何文本编辑器创建和编辑,如nano、vi、emacs等等。在编写.sh文件时,我们可以使用类似于在命令行环境中执行命令的语法,也可以使用各种控制结构、变量和函数来编写复杂的脚本。
  • .sh文件可以使用不同的shell程序来解释和执行,其中bash是最常用的shell程序。其他常见的shell程序包括sh、csh、tcsh等等。
  • 在Linux和其他Unix系统中,我们可以使用.sh文件来完成各种自动化系统管理任务,例如自动备份数据、监视系统日志、配置网络设置、安装软件包等等。此外,我们还可以编写.sh文件来执行一些常见的任务,例如编译程序、管理文件系统、处理文本文件等等。


总之,.sh文件是在Linux和其他Unix系统中非常重要的脚本文件类型,它们提供了一种简单而强大的方式来自动化系统管理任务和执行常见的命令行任务。


一、创建sh文件


1-1、打开终端窗口


1-2、创建一个sh文件,以sh结尾

touch auto.sh

1-3、使用vim命令编辑文件,并且输入内容

编辑文件

vim xx.sh
# i进入编辑模式
# esc退出编辑模型,进入命令模式
# 输入!wq保存文件并且退出

输入内容

#!/bin/bash
echo "Hello, World!"


1-4、将sh文件设置为可执行文件,可以使用如下命令

chmod +x xx.sh


1-5、执行sh文件

bash xx.sh


二、编写sh文件

1、首先使用vim命令打开auto.sh文件

vim auto.sh


2、串行执行sh文件

#!/bin/bash
# 以下文件是串行执行的。
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_br.py
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_dks_bp.py
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_jp_dks.py
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_jp_kn.py
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_kn_bp.py


3、并行执行

#!/bin/bash
# 只需要在每一条命令后加&就可以啦
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_br.py &
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_dks_bp.py &
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_jp_dks.py &
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_jp_kn.py &
/opt/conda_buss/bin/python3.7 /home/dakai.duan/ddk_new_customer/dks_self_tag_bi_word_kn_bp.py &


三、执行文件

# 输入命令,接下来就可以摸鱼了,等待程序自己执行完成。
sh auto.sh



四、常用命令介绍


  • cd:改变当前工作目录
  • ls:列出目录中的文件和子目录
  • pwd:显示当前工作目录的路径
  • cp:复制文件或目录
  • mv:移动文件或目录,也可以用于文件或目录的重命名
  • rm:删除文件或目录
  • mkdir:创建新目录
  • rmdir:删除空目录
  • cat:显示文件内容,也可以用于文件合并
  • grep:在文件中查找指定的文本
  • echo:在终端窗口中打印文本
  • top:显示系统中运行的进程列表和统计信息
  • ps:显示当前用户的进程列表
  • kill:停止运行中的进程
  • ssh:通过安全加密连接远程计算机
  • scp:通过安全加密复制文件到远程计算机
  • wget:从Web下载文件
  • tar:用于创建和提取.tar压缩文件
  • zip:用于创建和提取.zip压缩文件
  • sudo:以超级用户权限运行命令


总结


要过年了,现在需要做的是迅速逃离上海回家!



相关文章
|
3月前
|
存储 安全 Unix
七、Linux Shell 与脚本基础
别再一遍遍地敲重复的命令了,把它们写进Shell脚本,就能一键搞定。脚本本质上就是个存着一堆命令的文本文件,但要让它“活”起来,有几个关键点:文件开头最好用#!/usr/bin/env bash来指定解释器,并用chmod +x给它执行权限。执行时也有讲究:./script.sh是在一个新“房间”(子Shell)里跑,不影响你;而source script.sh是在当前“房间”里跑,适合用来加载环境变量和配置文件。
|
3月前
|
存储 Shell Linux
八、Linux Shell 脚本:变量与字符串
Shell脚本里的变量就像一个个贴着标签的“箱子”。装东西(赋值)时,=两边千万不能有空格。用单引号''装进去的东西会原封不动,用双引号""则会让里面的$变量先“变身”再装箱。默认箱子只能在当前“房间”(Shell进程)用,想让隔壁房间(子进程)也能看到,就得给箱子盖个export的“出口”戳。此外,Shell还自带了$?(上条命令的成绩单)和$1(别人递进来的第一个包裹)等许多特殊箱子,非常有用。
|
3月前
|
数据采集 监控 Shell
无需Python:Shell脚本如何成为你的自动化爬虫引擎?
Shell脚本利用curl/wget发起请求,结合文本处理工具构建轻量级爬虫,支持并行加速、定时任务、增量抓取及分布式部署。通过随机UA、异常重试等优化提升稳定性,适用于日志监控、价格追踪等场景。相比Python,具备启动快、资源占用低的优势,适合嵌入式或老旧服务器环境,复杂任务可结合Python实现混合编程。
|
5月前
|
Web App开发 缓存 安全
Linux一键清理系统垃圾:释放30GB空间的Shell脚本实战​
这篇博客介绍了一个实用的Linux系统盘清理脚本,主要功能包括: 安全权限检查和旧内核清理,保留当前使用内核 7天以上日志文件清理和系统日志压缩 浏览器缓存(Chrome/Firefox)、APT缓存、临时文件清理 智能清理Snap旧版本和Docker无用数据 提供磁盘空间使用前后对比和大文件查找功能 脚本采用交互式设计确保安全性,适合定期维护开发环境、服务器和个人电脑。文章详细解析了脚本的关键功能代码,并给出了使用建议。完整脚本已开源,用户可根据需求自定义调整清理策略。
578 1
|
Linux 区块链 Python
Python实用记录(十三):python脚本打包exe文件并运行
这篇文章介绍了如何使用PyInstaller将Python脚本打包成可执行文件(exe),并提供了详细的步骤和注意事项。
566 1
Python实用记录(十三):python脚本打包exe文件并运行
|
存储 Shell 区块链
怎么把Python脚本打包成可执行程序?
该文档介绍了如何将Python脚本及其运行环境打包成EXE可执行文件,以便在不具备Python环境的计算机上运行。首先确保Python脚本能够正常运行,然后通过安装PyInstaller并使用`--onefile`参数将脚本打包成独立的EXE文件。此外,还提供了去除命令行窗口和指定可执行文件图标的详细方法。这些步骤帮助用户轻松地将Python程序分发给最终用户。
219 3
怎么把Python脚本打包成可执行程序?
|
存储 区块链 Python
怎么把Python脚本打包成可执行程序?
最近根据用户提的需求用python做了一个小工具,但是在给客户使用的时候不能直接发送python文件,毕竟让客户去安装python环境,那就离了大谱了。所以这时候就需要把多个py文件带着运行环境打包成EXE可执行文件。
怎么把Python脚本打包成可执行程序?
|
区块链 Python
Python脚本打包 exe,auto-py-to-exe来帮你!
Python脚本打包 exe,auto-py-to-exe来帮你!
1152 0
|
存储 区块链 Python
怎么把Python脚本打包成可执行程序?
【6月更文挑战第3天】最近根据用户提的需求用python做了一个小工具,但是在给客户使用的时候不能直接发送python文件,毕竟让客户去安装python环境,那就离了大谱了。所以这时候就需要把多个py文件带着运行环境打包成EXE可执行文件。
214 1
一步步教你将包含其他文件的 Python 脚本等打包成 EXE
最近我编写了一个Python脚本,该脚本需要依赖两个同级目录下的文件才能正常运行。然而,当我将脚本打包成EXE程序后,必须将这两个文件放在EXE文件的同级目录下才能正常执行。为了简化部署,我希望能将这两个文件一起打包到EXE文件中,这时候该怎么办呢?

推荐镜像

更多