使用 wget 下载需要 cookie 认证的网站

简介: 1、使用火狐,安装 Export Cookies 插件2、登录网站,点菜单"工具-Export Cookies..",保存 cookies.txt 到自己的文件夹3、把 cookies.txt 文件名改成 cookie.
+关注继续查看

1、使用火狐,安装 Export Cookies 插件

2
、登录网站,点菜单"工具-Export Cookies..",保存 cookies.txt 到自己的文件夹

3
、把 cookies.txt 文件名改成 cookie.txt

4
、打开终端进入自己的文件夹,输入命令:

wget --referer=http://192.168.1.250 --cookies=on --load-cookies=cookie.txt -keep-session-cookies --save-cookies=cookie.txt http://192.168.1.250/space-1461-do-album-id-109.html

 

 

wget -r -p -np -k http://xxx.com/xxx

-r,  --recursive
(递归)          specify recursive download.(指定递归下载)
-k,  --convert-links
(转换链接)      make links in downloaded HTML point to local files.(将下载的HTML页面中的链接转换为相对链接即本地链接)
-p,  --page-requisites
(页面必需元素)    get all images, etc. needed to display HTML page.(下载所有的图片等页面显示所需的内容)
-np, --no-parent
(不追溯至父级)          don't ascend to the parent directory.

另外断点续传用-nc参数 日志 -o参数

-c 断点续传
-r
递归下载,下载指定网页某一目录下(包括子目录)的所有文件
-nd
递归下载时不创建一层一层的目录,把所有的文件下载到当前目录
-np
递归下载时不搜索上层目录,如wget -c -r www.xxx.org/pub/path/
没有加参数-np,就会同时下载path的上一级目录pub下的其它文件
-k
将绝对链接转为相对链接,下载整个站点后脱机浏览网页,最好加上这个参数
-L
递归时不进入其它主机,如wget -c -r www.xxx.org/ 
如果网站内有一个这样的链接: 
www.yyy.org
,不加参数-L,就会像大火烧山一样,会递归下载www.yyy.org网站
-p
下载网页所需的所有文件,如图片等
-A
指定要下载的文件样式列表,多个样式用逗号分隔
-i
后面跟一个文件,文件内指明要下载的URL

目录
相关文章
|
5月前
|
PHP
PHP CURL模拟百度网盘登陆
PHP CURL模拟百度网盘登陆
|
7月前
|
安全 搜索推荐 网络安全
网站为什么要装https数字证书
互联网是个大染缸,汇聚融合了各种数据信息,而近年来发生的多起数据泄露事件,让网络安全和隐私问题成为了信息安全的雷区。这直接导致越来越多的企业及个人选择申请SSL证书,让网站使用HTTPS安全加密协议,放弃标准的HTTP协议。
|
7月前
|
域名解析 网络协议 算法
2023阿里云免费证书SSL下载及安装
2023阿里云免费证书SSL下载及安装,阿里云SSL免费证书在哪申请?一个阿里云账号一年可以申请20张免费SSL证书,很多同学找不到免费SSL的入口,阿小云来详细说下阿里云SSL证书免费申请入口链接以及免费SSL证书申请流程
1225 0
|
7月前
|
Web App开发 安全 数据建模
网站为什么要装https证书?
企业通过安装证书来激活浏览器到服务器之间的"加密通道"——SSL协议,用于防止传输数据被泄露或篡改。当网站服务器拥有SSL证书时,浏览器的网址列会以https作为开头,告知访问者正位于受到SSL证书保护的网站。
|
10月前
|
Java
burpsuite安装步骤(带下载链接)
burpsuite安装步骤(带下载链接)
184 0
burpsuite安装步骤(带下载链接)
|
12月前
|
安全 JavaScript 应用服务中间件
nginx 80 映射web服务,并安装使用https ssl证书
本文档指导您如何在 Nginx 服务器中安装 SSL 证书。 nginx version: nginx/1.18.0 SSL TrustAsia TLS RSA CA RSA 2048
281 0
openssl开发相关网址
openssl开发常用下载网址
24 0
|
网络安全 Apache 数据安全/隐私保护
phpstudy集成下Apache配置SSL证书实现https加密访问
phpstudy集成下Apache配置SSL证书实现https加密访问
|
JSON Linux 数据格式
Linux curl 表单登录或提交与cookie使用
Linux curl 表单登录或提交与cookie使用本文主要讲解通过curl 实现表单提交登录。单独的表单提交与表单登录都差不多,因此就不单独说了。 说明:针对curl表单提交实现登录,不是所有网站都适用,原因是有些网站后台做了限制或有其他校验。
1101 0
|
应用服务中间件 Linux 网络安全
Linux日记本_07:Nginx安装SSL证书并配置http转https
https 上次写过一篇Linux下Nginx的搭建文章,这篇是补充SSL证书的安装与http请求转换成https请求. SSL证书是什么? ssl证书 当你点击证书的时候已经给了很明确的说明 1.保证远程计算机的身份 2.向远程计算机证明你的身份 证书信息 如果你很熟悉Nginx的话,那么在Nginx下安装SSL证书将会是一件很简单的事情.当然证书的安装方式有很多种,需要根据系统和所使用的软件不同来下载相关的资源,这里我们就不在赘述,我们只关注Nginx下相关的就OK了。
1891 0