FTP定时批量下载文件(SHELL脚本及使用方法 ) (转)--good

简介: #/bin/bash URL="http://192.168.5.100/xxx.php" check() { RESULT=$(curl -s $URL) echo $RESULT if [ "$RESULT" -eq "1111" ...

 

#/bin/bash

URL="http://192.168.5.100/xxx.php"

check() {
    RESULT=$(curl -s $URL)
    echo $RESULT
    
    if [ "$RESULT" -eq "1111" ] ; then
        echo "again"
        sleep 1
        check
    elif [ "$RESULT" -eq "0000" ] ; then
        echo "exit"
        exit 0
    else 
        echo "error"
    fi
}

https://gist.github.com/xdtianyu/aa339f6003604ef6a72f






ftp -v -d -i -n -g [主机名] ,其中
-v 显示远程服务器的所有响应信息;
-n 限制ftp的自动登录,即不使用;.n etrc文件;
-d 使用调试方式;
-g 取消全局文件名。
http://blog.itpub.net/20943428/viewspace-630467/

1. 脚本实例

  将以下脚本保存为 getftp.sh

复制代码
#!/bin/bash 
datesign=`date -d -95day +%Y%m%d`
ftp -nv 12.2.2.28 <<!FTPRUN
user user01 user01 
prompt bin cd TXT 
lcd /app/info/getftp mget ${datesign}*.txt bye !FTPRUN 
复制代码

 

脚本说明:

#!/bin/bash

#表明该文本的内容为SHELL命令 datesign=`date -d -95day +%Y%m%d`

#声明变量datesign,用来记录需要获取文件名中的日期标签。 #-95day 表示距系统时间的天数,假如今天是20121123, #-2day就表示20121121。

#%Y表示年,如2012,%y也表示年,但是格式为12 #%m表示月,如11 #%d表示日,如23

#同样,%H,%M,%S分明表示时分秒,

#以系统时间为2012年11月23日10时55分44秒为例

#`date –d -2day +%Y-%m-%d %H:%M:%S` 的值为:20121121 10:55:44 ftp -nv 12.2.2.28 <<!FTPRUN

#登录FTP服务器,12.2.2.28表示FTP服务器的IP地址

#从!FTPRUN至代码结束的!FTPRUN是FTP命令。 #!FTPRUN是自己随意给的标示名 user user01 user01

#给出FTP的用户名和密码。此处用户名和密码都是:user01 Prompt

#该命令忽略FTP交互 Bin

#二进制格式传送 cd TXT

#TXT表示数据文件在FTP服务器上的目录。 lcd /app/info/getftp

# /app/info/getftp数据文件要下载到服务器的目录 mget ${datesign}*.txt

#需要下载的文件,${datesign}为前面声明的变量,*表示通配符 Bye

#FTP完成退出 !FTPRUN

 


2. 执行脚本使其定时调用

  SHELL文件在执行时,可能会因存在特殊字符而出现问题。需要将 getftp.sh 文件转换一下格式。 可以直接在Linux下执行(假如不能运行则可以赋予它执行的权限后在运行chmod +x ./getftp.sh):

DOS2UNIX /app/info/getftp/getftp.sh  

  /app/info/getftp为 getftp.sh 脚本所在目录。

  通过vi编辑器根据实际环境对脚本进行相应更改,即可进行测试。 3. 自动执行配置 在Linux下执行:  

Crontab –e 
* 5 * * * /app/info/getftp/getftp.sh  

  保存退出。代码就会在每天5:00自动运行。 

 


附:cron调度进程说明

cron是系统主要的调度进程,可以在无需人工干预的情况下运行作业。有一个叫做crontab的命令允许用户提交、编辑或删除相应的作业。每一个用户都可以有一个crontab文件来保存调度信息。可以使用它运行任意一个shell脚本或某个命令,每小时运行一次,或一周三次,这完全取决于你。每一个用户都可以有自己的crontab文件,但在一个较大的系统中,系统管理员一般会禁止这些文件,而只在整个系统保留一个这样的文件。系统管理员是通过cron.deny和cron.allow这两个文件来禁止或允许用户拥有自己的crontab文件。 

crontab的域 

为了能够在特定的时间运行作业,需要了解crontab文件每个条目中各个域的意义和格式。 

下面就是这些域: 

第1列分钟1~5 9 

第2列小时1~2 3(0表示子夜)
 
第3列日1~3 1  第4列月1~1 2 

第5列星期0~6(0表示星期天)
 
第6列要运行的命令  crontab的范例格式: 

下面是c r o n t a b的格式: 

分[]时[]日[]月[]星期[]要运行的命令 其中[]表示空格。 

crontab文件的一个条目是从左边读起的,第一列是分,最后一列是要运行的命令,它位于星期的后面。在这些域中,可以用横杠-来表示一个时间范围,例如你希望星期一至星期五运行某个作业,那么可以在星期域使用1 - 5来表示。
还可以在这些域中使用逗号“,”,例如你希望星期一和星期四运行某个作业,只需要使用1 , 4来表示。
可以用星号*来表示连续的时间段。
如果你对某个表示时间的域没有特别的限定,也应该在该域填入*。
该文件的每一个条目必须含有5个时间域,而且每个域之间要用空格分隔。该文件中所有的注释行要在行首用#来表示。 crontab条目举例

30  21  *  *  *  /apps/bin/cleanup.sh    上面的例子表示每晚的21:30运行/apps/bin目录下的cleanup.sh。
45  4  1,10,22  *  *  /apps/bin/backup.sh  
上面的例子表示每月1、1 0、2 2日的4:45运行/apps/bin目录下的backup.sh。
10  1  *  *  6,0 /bin/find -name "core" -exec rm {}  上面的例子表示每周六、周日的1:10运行一个find命令。
0,30  18-23  *  *  * /apps/bin/dbcheck.sh  
上面的例子表示在每天18:00至23:00之间每隔30分钟运行/apps/bin/目录下的dbcheck.sh。

0  23  *  *  6 /apps/bin/qtrend.sh  上面的例子表示每星期六的11:00pm运行/apps/bin目录下的qtrend.sh。

http://www.cnblogs.com/0201zcr/p/4737508.html



相关文章
|
2月前
|
存储 安全 Unix
七、Linux Shell 与脚本基础
别再一遍遍地敲重复的命令了,把它们写进Shell脚本,就能一键搞定。脚本本质上就是个存着一堆命令的文本文件,但要让它“活”起来,有几个关键点:文件开头最好用#!/usr/bin/env bash来指定解释器,并用chmod +x给它执行权限。执行时也有讲究:./script.sh是在一个新“房间”(子Shell)里跑,不影响你;而source script.sh是在当前“房间”里跑,适合用来加载环境变量和配置文件。
411 9
|
2月前
|
存储 Shell Linux
八、Linux Shell 脚本:变量与字符串
Shell脚本里的变量就像一个个贴着标签的“箱子”。装东西(赋值)时,=两边千万不能有空格。用单引号''装进去的东西会原封不动,用双引号""则会让里面的$变量先“变身”再装箱。默认箱子只能在当前“房间”(Shell进程)用,想让隔壁房间(子进程)也能看到,就得给箱子盖个export的“出口”戳。此外,Shell还自带了$?(上条命令的成绩单)和$1(别人递进来的第一个包裹)等许多特殊箱子,非常有用。
298 2
|
5月前
|
Shell
Shell脚本循环控制:shift、continue、break、exit指令
使用这些命令可以让你的Shell脚本像有生命一样动起来。正确使用它们,你的脚本就能像一场精心编排的舞蹈剧目,既有旋律的起伏,也有节奏的跳跃,最终以一场惊艳的表演结束。每一个动作、每一个转折点,都准确、优雅地完成所需要表达的逻辑。如此,你的脚本不只是冰冷的代码,它透过终端的界面,跳着有节奏的舞蹈,走进观众——使用者的心中。
264 60
|
2月前
|
数据采集 监控 Shell
无需Python:Shell脚本如何成为你的自动化爬虫引擎?
Shell脚本利用curl/wget发起请求,结合文本处理工具构建轻量级爬虫,支持并行加速、定时任务、增量抓取及分布式部署。通过随机UA、异常重试等优化提升稳定性,适用于日志监控、价格追踪等场景。相比Python,具备启动快、资源占用低的优势,适合嵌入式或老旧服务器环境,复杂任务可结合Python实现混合编程。
|
8月前
|
关系型数据库 MySQL Shell
MySQL 备份 Shell 脚本:支持远程同步与阿里云 OSS 备份
一款自动化 MySQL 备份 Shell 脚本,支持本地存储、远程服务器同步(SSH+rsync)、阿里云 OSS 备份,并自动清理过期备份。适用于数据库管理员和开发者,帮助确保数据安全。
|
Shell
Shell 文件包含
10月更文挑战第5天
138 4
|
4月前
|
Web App开发 缓存 安全
Linux一键清理系统垃圾:释放30GB空间的Shell脚本实战​
这篇博客介绍了一个实用的Linux系统盘清理脚本,主要功能包括: 安全权限检查和旧内核清理,保留当前使用内核 7天以上日志文件清理和系统日志压缩 浏览器缓存(Chrome/Firefox)、APT缓存、临时文件清理 智能清理Snap旧版本和Docker无用数据 提供磁盘空间使用前后对比和大文件查找功能 脚本采用交互式设计确保安全性,适合定期维护开发环境、服务器和个人电脑。文章详细解析了脚本的关键功能代码,并给出了使用建议。完整脚本已开源,用户可根据需求自定义调整清理策略。
535 1
|
6月前
|
存储 Unix Shell
确定Shell脚本在操作系统中的具体位置方法。
这对于掌握Linux的文件系统组织结构和路径方面的理解很有帮助,是我们日常工作和学习中都可能使用到的知识。以上讲解详细清晰,应用简便,是每一个想要精通操作系统的计算机爱好者必备的实用技能。
178 17
|
6月前
|
Linux Shell
Centos或Linux编写一键式Shell脚本删除用户、组指导手册
Centos或Linux编写一键式Shell脚本删除用户、组指导手册
195 4
|
6月前
|
Linux Shell 数据安全/隐私保护
Centos或Linux编写一键式Shell脚本创建用户、组、目录分配权限指导手册
Centos或Linux编写一键式Shell脚本创建用户、组、目录分配权限指导手册
397 3