30天拿下Python之requests模块

简介: 30天拿下Python之requests模块

概述

在上一节,我们介绍了Python的logging模块,包括:logging的基本使用、logging的选项设置、日志旋转、logging.Filter类等内容。在这一节,我们将介绍Python的requests模块。requests模块是Python中最常用的HTTP客户端库之一,因为它简单易用,功能强大,并可以发送各种类型的HTTP请求,包括:POST、GET、PUT等。requests模块不是Python的标准库,我们可以通过pip包管理器进行安装。

发送POST请求

使用requests.post()函数可以发送HTTP POST请求,并返回一个Response对象。该对象包含响应的各种信息,比如:状态码、响应头、响应体等。requests.post()函数可以通过data参数传递要发送的数据,通过timeout参数传递超时的时间。

import requests
# 要发送的自定义数据
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://www.baidu.com', data = data, timeout = 2)
# 检查响的应状态码
if response.status_code == 200:
    print('success')
    print(response.text)
else:
    print('failed, status code is:', response.status_code)


如果想发送Json格式的请求体,可以使用json参数代替data参数,requests模块会自动将Python对象转换为Json格式。

import requests  
 
json_data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://www.test.com/api/test', json = json_data)

发送GET请求

使用requests.get()函数可以发送HTTP GET请求,并返回一个Response对象。

import requests
response = requests.get('https://www.baidu.com/')
# 输出状态码
print(response.status_code)
# 输出响应头
print(response.headers)
# 输出响应体的文本内容
print(response.text)

在GET请求中,参数通常作为查询字符串附加在URL的末尾。而在POST请求中,参数通常作为请求体发送。因此,在使用requests.post()函数时,我们通过data参数传递要发送的数据。而在使用requests.get()函数时,我们通过params参数传递查询参数。

import requests  
 
# 可以替换为目标URL
url = 'https://www.test.com/api/test'
# 要传递的查询参数
params = {'key': 'value'}
response = requests.get(url, params = params, timeout = 2)
 
# 检查响应的状态码
if response.status_code == 200:
    print('success')
    print(response.text)
else:
    print('failed, status code is:', response.status_code)

设置请求头

在requests.post()函数和requests.get()函数中,可以通过headers参数设置自定义的请求头。请求头是一种HTTP消息头,用于传递关于请求的附加信息,比如:User-Agent、Content-Type等。设置请求头可以帮助我们模拟不同的浏览器和客户端,或满足某些API的特殊要求。

import requests
url = 'https://www.test.com/api/test'
headers = {
    'User-Agent': 'Mozilla/5.0',
    'Content-Type': 'application/json'
}
response = requests.get(url, headers = headers)

会话管理

我们可以使用requests.Session()创建一个会话对象,以进行会话管理。通过会话管理,可以在同一会话中发送多个请求,并共享同一份cookies、请求头等信息。

import requests
# 创建会话对象
session = requests.Session()
# 发送第一个请求
url1 = 'https://www.test.com/api/test1'
response1 = session.get(url1)
# 发送第二个请求
url2 = 'https://www.test.com/api/test2'
response2 = session.post(url2, data = {'name': 'Hope'})
# 关闭会话
session.close()

在上面的示例代码中,首先使用requests.Session()创建了一个会话对象session。然后,使用session.get()函数发送第一个GET请求到url1,并使用session.post()函数发送第二个POST请求到url2。由于这些请求都是在同一个会话中发送的,所以它们会共享同一份cookies和请求头等信息。最后,我们调用了session.close()函数来关闭会话。这一步是可选的,因为在Python结束时,会话对象会自动关闭。但如果想在程序中间关闭会话,可以使用session.close()函数来实现。


相关文章
|
2天前
|
弹性计算 运维 搜索推荐
三翼鸟携手阿里云ECS g9i:智慧家庭场景的效能革命与未来生活新范式
三翼鸟是海尔智家旗下全球首个智慧家庭场景品牌,致力于提供覆盖衣、食、住、娱的一站式全场景解决方案。截至2025年,服务近1亿家庭,连接设备超5000万台。面对高并发、低延迟与稳定性挑战,全面升级为阿里云ECS g9i实例,实现连接能力提升40%、故障率下降90%、响应速度提升至120ms以内,成本降低20%,推动智慧家庭体验全面跃迁。
|
3天前
|
数据采集 人工智能 自然语言处理
3分钟采集134篇AI文章!深度解析如何通过云无影AgentBay实现25倍并发 + LlamaIndex智能推荐
结合阿里云无影 AgentBay 云端并发采集与 LlamaIndex 智能分析,3分钟高效抓取134篇 AI Agent 文章,实现 AI 推荐、智能问答与知识沉淀,打造从数据获取到价值提炼的完整闭环。
352 91
|
10天前
|
人工智能 自然语言处理 前端开发
Qoder全栈开发实战指南:开启AI驱动的下一代编程范式
Qoder是阿里巴巴于2025年发布的AI编程平台,首创“智能代理式编程”,支持自然语言驱动的全栈开发。通过仓库级理解、多智能体协同与云端沙箱执行,实现从需求到上线的端到端自动化,大幅提升研发效率,重塑程序员角色,引领AI原生开发新范式。
882 156
|
3天前
|
数据采集 缓存 数据可视化
Android 无侵入式数据采集:从手动埋点到字节码插桩的演进之路
本文深入探讨Android无侵入式埋点技术,通过AOP与字节码插桩(如ASM)实现数据采集自动化,彻底解耦业务代码与埋点逻辑。涵盖页面浏览、点击事件自动追踪及注解驱动的半自动化方案,提升数据质量与研发效率,助力团队迈向高效、稳定的智能化埋点体系。(238字)
260 156
|
4天前
|
域名解析 人工智能
【实操攻略】手把手教学,免费领取.CN域名
即日起至2025年12月31日,购买万小智AI建站或云·企业官网,每单可免费领1个.CN域名首年!跟我了解领取攻略吧~
|
11天前
|
机器人 API 调度
基于 DMS Dify+Notebook+Airflow 实现 Agent 的一站式开发
本文提出“DMS Dify + Notebook + Airflow”三位一体架构,解决 Dify 在代码执行与定时调度上的局限。通过 Notebook 扩展 Python 环境,Airflow实现任务调度,构建可扩展、可运维的企业级智能 Agent 系统,提升大模型应用的工程化能力。
|
人工智能 前端开发 API
前端接入通义千问(Qwen)API:5 分钟实现你的 AI 问答助手
本文介绍如何在5分钟内通过前端接入通义千问(Qwen)API,快速打造一个AI问答助手。涵盖API配置、界面设计、流式响应、历史管理、错误重试等核心功能,并提供安全与性能优化建议,助你轻松集成智能对话能力到前端应用中。
822 155