批量下载有序文件

简介: 【4月更文挑战第29天】

》》》》》魏红斌带你学shell脚本《《《《《


更多shell脚本学习点击个人主页


作为一个资深程序猿,我将带领您从零开始,一步步踏上运维之旅,无论您是否拥有现成的服务器,都将学会如何轻松购买、部署,并通过编写及应用精心设计的Shell脚本,解决实际工作中遇到的问题。这些脚本不仅源自真实的业务场景,经历了反复实践与严格测试,确保了其简洁高效、易于理解且便于使用。更重要的是,我们将全程免费分享,并深度解析背后原理,助您深入理解并灵活运用,每一款脚本均经过真实业务场景的反复打磨与严格测试,秉持着简洁高效、易于理解和使用的理念设计,无偿提供并且提供相关解析过程,让读者能更深入了解相关内容

无服务器的朋友们

让我们先从选购并部署服务器开始。只需简单三步,即可拥有您的专属云服务器:

  1. 访问ECS官网:点击链接直达阿里云ECS网站:ECS选择网址。这是您获取高质量云服务器的第一站。
  2. 选择并购买:在琳琅满目的服务器配置中,挑选符合您需求的那一款,一键下单,完成支付。整个过程犹如在线购物般便捷。
  3. 进入ECS控制台:支付成功后,您将被引导至ECS管理控制台。在这里,您可以全面掌控您的服务器资源,后续的所有运维操作都将在此展开。

已有服务器的朋友们

如果您已拥有ECS实例,那么请直接登录ECS管理控制台在左侧导航栏中,依次选择“实例与镜像” > “实例”,确保您已定位到目标资源所在的资源组和地域。接下来,在实例列表中找到待连接的实例,点击操作列下的“远程连接”,选择“通过Workbench远程连接”并点击“立即登录”。

登录实例

无论是新购还是已有服务器,接下来都需要进行实例登录。这里支持多种认证方式,以最常见的“密码认证”为例:

  • 输入用户名(通常为rootecs-user)。
  • 接着,输入登录密码。如果您忘记了密码,无需担忧,您可以在ECS实例详情页面查询,或者通过“更改密码”功能进行修改。

编写与运行Shell脚本

成功登录后,您将看到一个熟悉的命令行界面——这就是您的运维主战场。现在,键入vim test.sh,我们便进入了文本编辑模式,准备创建第一个Shell脚本。

按下键盘上的i键,进入插入模式,此刻您可以自由地复制粘贴今天要学习的脚本代码,粘贴后按ecs后,按:wq保存脚本,可以用./ test.sh或者sh test.sh进行脚本执行。

今天我们要学习的脚本是(脚本内容直接复制粘贴即可):

#!/bin/bash

# 本脚本准备有序的网络资料进行批量下载操作(如01.jpg, 02.jpg, ..., 100.jpg)

# 设置资源来源的基础URL

base_url="http://www.test.com/"

echo "开始下载…"

# 确保curl命令可用

command -v curl >/dev/null 2>&1 || { echo >&2 "curl命令未找到,无法继续执行脚本。"; exit 1; }

# 设置文件类型

file_type=jpg

# 循环下载文件

for i in $(seq -w 001 100); do

   file="$i.$file_type"

   echo "正在下载 $file"

   # 使用curl下载文件并保存至/tmp目录,同时修正命令行参数中的短横线问题

   if ! curl -s -L -o "/tmp/$file" "$base_url$file"; then

       echo "下载 $file 失败!"

   fi

   sleep 1

done

echo "下载完成。"

下面是该脚本的逐行解析:

  1. #!/bin/bash: 表示这是一个使用Bash shell解释器执行的脚本文件。
  2. 注释行介绍了脚本的功能:按顺序下载一系列编号的图片文件。
  3. base_url="http://www.test.com/": 定义了资源的基本URL路径,所有文件都将从此URL开始构建。
  4. echo "开始下载…": 打印提示信息,表明脚本开始执行下载任务。
  5. command -v curl >/dev/null 2>&1 || { echo >&2 "curl命令未找到,无法继续执行脚本。"; exit 1; }: 检查系统中是否安装了curl命令,如果没有,则输出错误信息并退出脚本。
  6. file_type=jpg: 定义了要下载文件的类型,这里是JPEG图片。
  7. for i in $(seq -w 001 100); do: 使用seq命令生成一个从001到100的序列,并且每个数字带有前导零,用于构造文件名。
  8. file="$i.$file_type": 根据当前循环变量i和预设的文件类型创建完整的文件名。
  9. echo "正在下载 $file": 打印出当前正在尝试下载的文件名。
  10. if ! curl -s -L -o "/tmp/$file" "$base_url$file"; then: 使用curl命令尝试下载文件,-s表示静默模式不显示进度信息,-L表示跟随重定向,-o后面跟的是输出文件的路径,这里指定了/tmp/目录。如果下载失败(即curl命令返回非零状态码),则执行随后的代码块。
  11. echo "下载 $file 失败!": 如果上一行的curl命令失败,输出错误信息。
  12. sleep 1: 在每次下载之后暂停1秒,这有助于避免因请求过快而被服务器拒绝或限速。
  13. done: 结束for循环。
  14. echo "下载完成。": 当所有文件下载完毕(无论成功与否),打印结束信息。

如果想上手操作练代码的同学们可以通过阿里云ecs服务器免费试用参与!

入口:新老同学免费试用

相关实践学习
2分钟自动化部署人生模拟器
本场景将带你借助云效流水线Flow实现人生模拟器小游戏的自动化部署
7天玩转云服务器
云服务器ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,可降低 IT 成本,提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
2月前
|
JSON 安全 API
对目录中的文件进行排序
此Python脚本可通过电子邮件发送带文件附件的邮件。您可自定义发件人邮箱、密码、收件人邮箱、邮件主题与正文。脚本使用Gmail SMTP服务器发送邮件,并将附件编码为base64格式添加至邮件中。出于安全考虑,请使用应用专用密码。
22 7
|
4月前
分享:根据批量的图片文件名,如何在电脑里一次性查找多张图片,复制并保存到新的文件夹
本文介绍了一款批量文件处理软件,用于快速查找和管理大量图片。通过下载链接提供软件,用户可执行以下操作:搜索并复制特定文件名的图片,从大型图库中筛选目标图片至指定位置,或按文件名批量删除图片。软件支持完全匹配、模糊查找和格式限定等查找方式。使用后能显著提升图片整理效率,节省时间。
606 3
|
6月前
|
Python
用Python实现批量下载文件
用Python实现批量下载文件
|
6月前
如何从多个文件夹里各提取相应数量的文件放一起到新文件夹中形成多文件夹组合
该文介绍了一个工具的使用方法,通过它可以从多个文件夹中批量提取并合并文件。文中提供了两个下载链接(度娘网盘和蓝奏云)并附有提取码。工具主要用于平均分配文件到指定文件夹,例如将100张图片平均放入50个文件夹,每个文件夹2张。操作步骤包括创建目标文件夹、添加源文件夹路径、启用“平均复制”选项,然后执行任务。最后,展示了操作完成后文件夹内的正确分布情况。
156 10
|
6月前
|
弹性计算 运维 Shell
|
6月前
|
存储 数据管理 Serverless
Python实现:教你轻松统计文件夹下文件个数
Python实现:教你轻松统计文件夹下文件个数
|
6月前
|
监控 算法 数据安全/隐私保护
使用Python实现批量文件的压缩处理
使用Python实现批量文件的压缩处理
89 0
|
6月前
|
存储 定位技术 Python
批量将文件名称符合要求的文件自动复制到新文件夹:Python实现
批量将文件名称符合要求的文件自动复制到新文件夹:Python实现
104 2
合并多个文件的内容到一个文件
合并多个文件的内容到一个文件
|
6月前
|
Python
Python实现删除磁盘上空文件夹
Python实现删除磁盘上空文件夹
36 0