30天拿下Python之requests模块

简介: 30天拿下Python之requests模块

概述

在上一节,我们介绍了Python的logging模块,包括:logging的基本使用、logging的选项设置、日志旋转、logging.Filter类等内容。在这一节,我们将介绍Python的requests模块。requests模块是Python中最常用的HTTP客户端库之一,因为它简单易用,功能强大,并可以发送各种类型的HTTP请求,包括:POST、GET、PUT等。requests模块不是Python的标准库,我们可以通过pip包管理器进行安装。

发送POST请求

使用requests.post()函数可以发送HTTP POST请求,并返回一个Response对象。该对象包含响应的各种信息,比如:状态码、响应头、响应体等。requests.post()函数可以通过data参数传递要发送的数据,通过timeout参数传递超时的时间。

import requests

# 要发送的自定义数据
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://www.baidu.com', data = data, timeout = 2)

# 检查响的应状态码
if response.status_code == 200:
    print('success')
    print(response.text)
else:
    print('failed, status code is:', response.status_code)

如果想发送Json格式的请求体,可以使用json参数代替data参数,requests模块会自动将Python对象转换为Json格式。

import requests  
  
json_data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://www.test.com/api/test', json = json_data)

发送GET请求

使用requests.get()函数可以发送HTTP GET请求,并返回一个Response对象。

import requests

response = requests.get('https://www.baidu.com/')
# 输出状态码
print(response.status_code)
# 输出响应头
print(response.headers)
# 输出响应体的文本内容
print(response.text)

在GET请求中,参数通常作为查询字符串附加在URL的末尾。而在POST请求中,参数通常作为请求体发送。因此,在使用requests.post()函数时,我们通过data参数传递要发送的数据。而在使用requests.get()函数时,我们通过params参数传递查询参数。

import requests  
  
# 可以替换为目标URL
url = 'https://www.test.com/api/test'
# 要传递的查询参数
params = {'key': 'value'}
response = requests.get(url, params = params, timeout = 2)
  
# 检查响应的状态码
if response.status_code == 200:
    print('success')
    print(response.text)
else:
    print('failed, status code is:', response.status_code)

设置请求头

在requests.post()函数和requests.get()函数中,可以通过headers参数设置自定义的请求头。请求头是一种HTTP消息头,用于传递关于请求的附加信息,比如:User-Agent、Content-Type等。设置请求头可以帮助我们模拟不同的浏览器和客户端,或满足某些API的特殊要求。

import requests

url = 'https://www.test.com/api/test'
headers = {
    'User-Agent': 'Mozilla/5.0',
    'Content-Type': 'application/json'
}
response = requests.get(url, headers = headers)

会话管理

我们可以使用requests.Session()创建一个会话对象,以进行会话管理。通过会话管理,可以在同一会话中发送多个请求,并共享同一份cookies、请求头等信息。

import requests

# 创建会话对象
session = requests.Session()

# 发送第一个请求
url1 = 'https://www.test.com/api/test1'
response1 = session.get(url1)

# 发送第二个请求
url2 = 'https://www.test.com/api/test2'
response2 = session.post(url2, data = {'name': 'Hope'})

# 关闭会话
session.close()

在上面的示例代码中,首先使用requests.Session()创建了一个会话对象session。然后,使用session.get()函数发送第一个GET请求到url1,并使用session.post()函数发送第二个POST请求到url2。由于这些请求都是在同一个会话中发送的,所以它们会共享同一份cookies和请求头等信息。最后,我们调用了session.close()函数来关闭会话。这一步是可选的,因为在Python结束时,会话对象会自动关闭。但如果想在程序中间关闭会话,可以使用session.close()函数来实现。


相关文章
|
2月前
|
SQL 关系型数据库 数据库
Python SQLAlchemy模块:从入门到实战的数据库操作指南
免费提供Python+PyCharm编程环境,结合SQLAlchemy ORM框架详解数据库开发。涵盖连接配置、模型定义、CRUD操作、事务控制及Alembic迁移工具,以电商订单系统为例,深入讲解高并发场景下的性能优化与最佳实践,助你高效构建数据驱动应用。
338 7
|
2月前
|
监控 安全 程序员
Python日志模块配置:从print到logging的优雅升级指南
从 `print` 到 `logging` 是 Python 开发的必经之路。`print` 调试简单却难维护,日志混乱、无法分级、缺乏上下文;而 `logging` 支持级别控制、多输出、结构化记录,助力项目可维护性升级。本文详解痛点、优势、迁移方案与最佳实践,助你构建专业日志系统,让程序“有记忆”。
247 0
|
5月前
|
存储 Web App开发 前端开发
Python + Requests库爬取动态Ajax分页数据
Python + Requests库爬取动态Ajax分页数据
|
2月前
|
JSON 算法 API
Python中的json模块:从基础到进阶的实用指南
本文深入解析Python内置json模块的使用,涵盖序列化与反序列化核心函数、参数配置、中文处理、自定义对象转换及异常处理,并介绍性能优化与第三方库扩展,助你高效实现JSON数据交互。(238字)
374 4
|
2月前
|
Java 调度 数据库
Python threading模块:多线程编程的实战指南
本文深入讲解Python多线程编程,涵盖threading模块的核心用法:线程创建、生命周期、同步机制(锁、信号量、条件变量)、线程通信(队列)、守护线程与线程池应用。结合实战案例,如多线程下载器,帮助开发者提升程序并发性能,适用于I/O密集型任务处理。
276 0
|
2月前
|
XML JSON 数据处理
超越JSON:Python结构化数据处理模块全解析
本文深入解析Python中12个核心数据处理模块,涵盖csv、pandas、pickle、shelve、struct、configparser、xml、numpy、array、sqlite3和msgpack,覆盖表格处理、序列化、配置管理、科学计算等六大场景,结合真实案例与决策树,助你高效应对各类数据挑战。(238字)
189 0
|
3月前
|
安全 大数据 程序员
Python operator模块的methodcaller:一行代码搞定对象方法调用的黑科技
`operator.methodcaller`是Python中处理对象方法调用的高效工具,替代冗长Lambda,提升代码可读性与性能。适用于数据过滤、排序、转换等场景,支持参数传递与链式调用,是函数式编程的隐藏利器。
130 4
|
3月前
|
存储 数据库 开发者
Python SQLite模块:轻量级数据库的实战指南
本文深入讲解Python内置sqlite3模块的实战应用,涵盖数据库连接、CRUD操作、事务管理、性能优化及高级特性,结合完整案例,助你快速掌握SQLite在小型项目中的高效使用,是Python开发者必备的轻量级数据库指南。
303 0
|
4月前
|
存储 安全 数据处理
Python 内置模块 collections 详解
`collections` 是 Python 内置模块,提供多种高效数据类型,如 `namedtuple`、`deque`、`Counter` 等,帮助开发者优化数据处理流程,提升代码可读性与性能,适用于复杂数据结构管理与高效操作场景。
345 0

推荐镜像

更多