开发者社区> 落雨_> 正文

wget获取整站

简介: wget -m -e robots=off https://www.baidu.com -m是克隆整个网站,-e robots=off是让wget忽视robots.txt 如果网站有中文路径,最好用以下命令 wget -r -p -np -k --restrict-file-names=nocontrol http://www.
+关注继续查看

wget -m -e robots=off https://www.baidu.com
-m是克隆整个网站,-e robots=off是让wget忽视robots.txt

如果网站有中文路径,最好用以下命令

wget -r -p -np -k --restrict-file-names=nocontrol http://www.baidu.com

转自:http://blog.lanyus.com/archives/38.html

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
js获取数组中最大值
js获取数组中最大值
16 0
LeetCode第二题 “两数相加” 比官方更优质
LeetCode第二题 “两数相加” 比官方更优质
13 0
PTA 1078 字符串压缩与解压 (20 分)
文本压缩有很多种方法,这里我们只考虑最简单的一种:把由相同字符组成的一个连续的片段用这个字符和片段中含有这个字符的个数来表示。
35 0
获取数组的度
获取数组的度(算法题)
28 0
PHP如何利用函数来计算给定年月的最大天数
在上一篇文章《怎么通过PHP判断指定月份共有几天》中,我们介绍了使用switch case语句分情况获取某年某月最大天数的方法;在switch case语句中,对于2月,还需要先判断该年是不是闰年,才可获取最大天数,这有点麻烦! 那么如何简洁高效的计算给定月份共有几天,获取某年、某月的最大天数呢?其实PHP内置的date() 函数就可以解决这个问题! date() 函数可以将指定Unix 时间戳格式化为本地日期和时间,只需要设置输出格式为“t”,即可返回给定月份中包含的天数。
98 0
Php直播源码,获取随机数,随机字符串
Php直播源码,获取随机数,随机字符串
581 0
网上报名上传电子照片时,要求大于30K小于200K,该怎么修改?
随着整个互联网开始实名化,需要上传照片的地方很多。
540 0
yum 找不到程序, yum更换国内阿里源
yum 找不到程序, yum更换国内阿里源 因为自己用刚VM安装的centos 7,使用yum安装程序的时候,发现一个程序都找不到, 我猜测可能是国外的yum源被限制了,然后换成国内的阿里yum源,就可以安装了。
5811 0
+关注
落雨_
http://js-dev.cn
文章
问答
视频
文章排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载