批量下载有序文件

简介: 【4月更文挑战第29天】

》》》》》魏红斌带你学shell脚本《《《《《


更多shell脚本学习点击个人主页


作为一个资深程序猿,我将带领您从零开始,一步步踏上运维之旅,无论您是否拥有现成的服务器,都将学会如何轻松购买、部署,并通过编写及应用精心设计的Shell脚本,解决实际工作中遇到的问题。这些脚本不仅源自真实的业务场景,经历了反复实践与严格测试,确保了其简洁高效、易于理解且便于使用。更重要的是,我们将全程免费分享,并深度解析背后原理,助您深入理解并灵活运用,每一款脚本均经过真实业务场景的反复打磨与严格测试,秉持着简洁高效、易于理解和使用的理念设计,无偿提供并且提供相关解析过程,让读者能更深入了解相关内容

无服务器的朋友们

让我们先从选购并部署服务器开始。只需简单三步,即可拥有您的专属云服务器:

  1. 访问ECS官网:点击链接直达阿里云ECS网站:ECS选择网址。这是您获取高质量云服务器的第一站。
  2. 选择并购买:在琳琅满目的服务器配置中,挑选符合您需求的那一款,一键下单,完成支付。整个过程犹如在线购物般便捷。
  3. 进入ECS控制台:支付成功后,您将被引导至ECS管理控制台。在这里,您可以全面掌控您的服务器资源,后续的所有运维操作都将在此展开。

已有服务器的朋友们

如果您已拥有ECS实例,那么请直接登录ECS管理控制台在左侧导航栏中,依次选择“实例与镜像” > “实例”,确保您已定位到目标资源所在的资源组和地域。接下来,在实例列表中找到待连接的实例,点击操作列下的“远程连接”,选择“通过Workbench远程连接”并点击“立即登录”。

登录实例

无论是新购还是已有服务器,接下来都需要进行实例登录。这里支持多种认证方式,以最常见的“密码认证”为例:

  • 输入用户名(通常为rootecs-user)。
  • 接着,输入登录密码。如果您忘记了密码,无需担忧,您可以在ECS实例详情页面查询,或者通过“更改密码”功能进行修改。

编写与运行Shell脚本

成功登录后,您将看到一个熟悉的命令行界面——这就是您的运维主战场。现在,键入vim test.sh,我们便进入了文本编辑模式,准备创建第一个Shell脚本。

按下键盘上的i键,进入插入模式,此刻您可以自由地复制粘贴今天要学习的脚本代码,粘贴后按ecs后,按:wq保存脚本,可以用./ test.sh或者sh test.sh进行脚本执行。

今天我们要学习的脚本是(脚本内容直接复制粘贴即可):

#!/bin/bash

# 本脚本准备有序的网络资料进行批量下载操作(如01.jpg, 02.jpg, ..., 100.jpg)

# 设置资源来源的基础URL

base_url="http://www.test.com/"

echo "开始下载…"

# 确保curl命令可用

command -v curl >/dev/null 2>&1 || { echo >&2 "curl命令未找到,无法继续执行脚本。"; exit 1; }

# 设置文件类型

file_type=jpg

# 循环下载文件

for i in $(seq -w 001 100); do

   file="$i.$file_type"

   echo "正在下载 $file"

   # 使用curl下载文件并保存至/tmp目录,同时修正命令行参数中的短横线问题

   if ! curl -s -L -o "/tmp/$file" "$base_url$file"; then

       echo "下载 $file 失败!"

   fi

   sleep 1

done

echo "下载完成。"

下面是该脚本的逐行解析:

  1. #!/bin/bash: 表示这是一个使用Bash shell解释器执行的脚本文件。
  2. 注释行介绍了脚本的功能:按顺序下载一系列编号的图片文件。
  3. base_url="http://www.test.com/": 定义了资源的基本URL路径,所有文件都将从此URL开始构建。
  4. echo "开始下载…": 打印提示信息,表明脚本开始执行下载任务。
  5. command -v curl >/dev/null 2>&1 || { echo >&2 "curl命令未找到,无法继续执行脚本。"; exit 1; }: 检查系统中是否安装了curl命令,如果没有,则输出错误信息并退出脚本。
  6. file_type=jpg: 定义了要下载文件的类型,这里是JPEG图片。
  7. for i in $(seq -w 001 100); do: 使用seq命令生成一个从001到100的序列,并且每个数字带有前导零,用于构造文件名。
  8. file="$i.$file_type": 根据当前循环变量i和预设的文件类型创建完整的文件名。
  9. echo "正在下载 $file": 打印出当前正在尝试下载的文件名。
  10. if ! curl -s -L -o "/tmp/$file" "$base_url$file"; then: 使用curl命令尝试下载文件,-s表示静默模式不显示进度信息,-L表示跟随重定向,-o后面跟的是输出文件的路径,这里指定了/tmp/目录。如果下载失败(即curl命令返回非零状态码),则执行随后的代码块。
  11. echo "下载 $file 失败!": 如果上一行的curl命令失败,输出错误信息。
  12. sleep 1: 在每次下载之后暂停1秒,这有助于避免因请求过快而被服务器拒绝或限速。
  13. done: 结束for循环。
  14. echo "下载完成。": 当所有文件下载完毕(无论成功与否),打印结束信息。

如果想上手操作练代码的同学们可以通过阿里云ecs服务器免费试用参与!

入口:新老同学免费试用

相关实践学习
通义万相文本绘图与人像美化
本解决方案展示了如何利用自研的通义万相AIGC技术在Web服务中实现先进的图像生成。
7天玩转云服务器
云服务器ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,可降低 IT 成本,提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
消息中间件 算法 Java
弥补延时消息的不足,RocketMQ 基于时间轮算法实现了定时消息!
弥补延时消息的不足,RocketMQ 基于时间轮算法实现了定时消息!
1096 1
弥补延时消息的不足,RocketMQ 基于时间轮算法实现了定时消息!
|
应用服务中间件 Android开发 nginx
|
网络安全 数据安全/隐私保护 网络虚拟化
刷完OpenWrt在浏览器无法访问的解决办法
其实问题很明显、 是因为刷了trunk版固件、 并没有集成luci、 那接下来就是装luci、但是装luci需要联网(不过其实不联网其实也是可以安装的、) 我说的联网是让路有联网、而不是网线接路由,路由接电脑、然后电脑拨号上网、这种联网、 如何让路由联网呢? 1、最简单的方法、如果你有两个路由、或者...
13199 0
|
4月前
|
SQL 分布式计算 大数据
SparkSQL 入门指南:小白也能懂的大数据 SQL 处理神器
在大数据处理的领域,SparkSQL 是一种非常强大的工具,它可以让开发人员以 SQL 的方式处理和查询大规模数据集。SparkSQL 集成了 SQL 查询引擎和 Spark 的分布式计算引擎,使得我们可以在分布式环境下执行 SQL 查询,并能利用 Spark 的强大计算能力进行数据分析。
|
前端开发 JavaScript Java
计算机Java项目|基于springboot的社区团购系统设计
计算机Java项目|基于springboot的社区团购系统设计
476 0
|
10月前
|
传感器 人工智能 数据可视化
数字孪生高效赋能,打造水利新质生产力
数字孪生水利运用云计算、大数据、AI、实景三维等技术,实现江河水库等水利工程的可视化展示与智能化模拟。通过三维可视化和实时数据映射,平台提供智能感知、分析、预测和预演功能,支持监测预警、调度优化及灾害预防,助力提升水利管理水平,保障水安全。
|
资源调度 监控 大数据
大数据计算资源管理
【10月更文挑战第25天】
424 4
|
Python
Fastapi进阶用法,路径参数,路由分发,查询参数等详解
Fastapi进阶用法,路径参数,路由分发,查询参数等详解
1187 1
|
人工智能 智能硬件
如何在一周内摸清一个行业:ChatGPT + 麦肯锡关键词分析法
如何在一周内摸清一个行业:ChatGPT + 麦肯锡关键词分析法
2552 0
如何在一周内摸清一个行业:ChatGPT + 麦肯锡关键词分析法
|
数据采集 JSON 数据格式
一日一技:你怎么总是搞不清反斜杠的问题
一日一技:你怎么总是搞不清反斜杠的问题
348 0