从基础到高级,带你深入了解和使用curl命令(一)

简介: `curl`命令是网络通信中的强大工具,用于与HTTP、HTTPS、FTP等协议交互,支持多种操作。基本语法是`curl [options] [URL]`,包含如`-A`设置用户代理,`-b`处理cookie,`-o`保存输出到文件,`-x`指定代理等选项。示例包括请求网址、保存网页、使用代理及模仿浏览器访问。本文为`curl`基础用法介绍,后续将探讨更多高级功能。

image.png

前言

在网络通信和数据传输中,curl命令是一个功能强大且广泛使用的工具。它可以与各种协议进行通信,如HTTP、HTTPS、FTP等,并支持各种操作,如下载文件、发送请求、测试API等。本文将从基础开始,介绍curl命令的基本用法,然后深入探讨其高级功能和实用技巧。

curl简介

curl 是常用的命令行工具,用来请求 Web 服务器。它的名字就是命令行(commandline)的 URL 工具的意思,它非常强大,拥有很多参数,能够实现各种功能,可以这么说,postman能做到的,curl也能做到。curl的基本语法如下:

curl [options] [URL...]

其中,options是一系列选项,用于配置curl的行为,URL是目标资源的地址。

常见的选项如下:

-A/--user-agent <string>             设置用户代理发送给服务器
-b/--cookie <name=string/file>         cookie字符串或文件读取位置
-c/--cookie-jar <file>               操作结束后把cookie写入到这个文件中
-C/--continue-at <offset>            断点续转
-D/--dump-header <file>              把header信息写入到该文件中
-e/--referer                         来源网址
-f/--fail                            连接失败时不显示http错误
-o/--output                          把输出写到该文件中
-O/--remote-name                     把输出写到该文件中,保留远程文件的文件名
-r/--range <range>                   检索来自HTTP/1.1或FTP服务器字节范围
-s/--silent                          静音模式。不输出任何东西
-T/--upload-file <file>              上传文件
-u/--user <user[:password]>          设置服务器的用户和密码
-w/--write-out [format]              什么输出完成后
-x/--proxy <host[:port]>             在给定的端口上使用HTTP代理
-#/--progress-bar                    进度条显示当前的传送状态

curl基本使用示例

  1. 请求网址 curl url

如下:

curl www.baidu.com

image.png

  1. 保存访问的网页
  • 使用重定向功能保存curl URL >> filename.html
curl http://www.baidu.com >> baidu.html

如下图:

image.png

  • 使用curl的内置选项 -o (小写) 保存网页curl -o filename.html URL
curl -o baidu.html http://www.baidu.com

如下图:

image.png

  1. 指定代理服务器及其端口

很多时候上网需要用到代理服务器(比如是使用代理服务器上网或者因为使用 curl 别人网站而被别人屏蔽IP地址的时候),我们可以通过使用curl内置option:-x 来支持设置代理,如下:

curl -x 192.168.100.100:1080 http://www.baidu.com
  1. 模仿浏览器

有些网站需要使用特定的浏览器去访问他们,有些还需要使用某些特定的版本。curl内置option: -A可以让我们指定浏览器去访问网站:

curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" https://www.ceshiren.com

总结

本文主要介绍了curl命令的一些简单用法,比如请求网址,使用代理访问等操作,后续我们将介绍curl命令使用cookie,以及发送请求,下载/上传文件等操作。

相关文章
|
API 数据处理 数据安全/隐私保护
curl基础用法
curl基础用法
|
数据挖掘
【SPSS】回归分析详细操作教程(附案例实战)(下)
【SPSS】回归分析详细操作教程(附案例实战)
1641 0
|
存储 JSON 自然语言处理
手把手教你使用ModelScope训练一个文本分类模型
手把手教你使用ModelScope训练一个文本分类模型
|
jenkins 持续交付
解决Sonarqube quality gate获取不到Sonarqube正确扫描结果的问题
在Jenkins pipeline中,一般都会用到Sonar-scanner来扫描代码,扫描完之后,把结果上传到SonarQube中,SonarQube把结果与质量阀进行对比,然后通过Sonarqube quality gate来判断这次扫描结果是成功还是失败。 不少同学都遇到过Sonarqube quality gate 获得的最后结果不正确,明明SonarQube中的结果是success,而Sonarqube quality gate判断的结果是pending。 这是怎么一回事呢?
3094 0
解决Sonarqube quality gate获取不到Sonarqube正确扫描结果的问题
|
数据采集 关系型数据库 MySQL
python-协程(async、await关键字与asyncio)
python-协程(async、await关键字与asyncio)
1381 0
|
API PHP C++
Windows下用vs2017编译和配置libcurl库(手把手教,适合新人)
Windows下用vs2017编译和配置libcurl库(手把手教,适合新人)
2247 0
|
安全 网络协议 Ubuntu
【常见开源库的二次开发】HTTP之libcurl库——libcurl使用(二)
【常见开源库的二次开发】HTTP之libcurl库——libcurl使用(二)
2680 2
|
Kubernetes 应用服务中间件 nginx
史上最全干货!Kubernetes 原理+实战总结(全文6万字,90张图,100个知识点)(上)
史上最全干货!Kubernetes 原理+实战总结(全文6万字,90张图,100个知识点)
51556 30
|
12月前
|
Java Windows
如何在windows上运行jar包/JAR文件 如何在cmd上运行 jar包 保姆级教程 超详细
本文提供了一个详细的教程,解释了如何在Windows操作系统的命令提示符(cmd)中运行JAR文件。
5530 1
|
Linux
如何让linux显示器命令行界面不显示
若需在命令行界面快速关闭屏幕,可选方法包括:使用`setterm --blank force`立即关闭屏幕;利用`sudo vbetool dpms off`将显示器置于低功耗模式;在X server环境下执行`xset dpms force off`关闭屏幕;或是针对笔记本通过`echo 0 | sudo tee /sys/class/backlight/*/brightness`关闭背光。以上任一方法均可实现屏幕关闭,部分操作需要管理员权限,屏幕通常会在按键或移动鼠标后自动恢复。
1369 10