Python中使用`requests`库进行异常处理与调试

一、异常处理

requests库在发生异常时，会抛出相应的异常类型。为了捕获并处理这些异常，我们可以使用Python的try-except语句块。

下面是一个使用requests库发送GET请求并进行异常处理的示例：

import requests
from requests.exceptions import RequestException

url = 'https://api.example.com/data'

try:
    response = requests.get(url)
    response.raise_for_status()  # 如果响应状态码不是200，会抛出HTTPError异常
    # 处理响应内容...
    print(response.json())
except RequestException as e:
    # 处理请求异常
    print(f"请求发生异常: {e}")
except Exception as e:
    # 处理其他异常
    print(f"发生未知异常: {e}")

在这个例子中，我们首先尝试发送GET请求。如果请求成功且状态码为200，则处理响应内容。如果请求过程中发生异常（如连接错误、超时等），requests库会抛出RequestException或其子类的异常。我们使用except语句块捕获这些异常，并进行相应的处理。

此外，response.raise_for_status()方法会检查响应的状态码。如果状态码表示错误（如404或500），则会抛出HTTPError异常。通过调用这个方法，我们可以确保只有当请求成功且状态码为200时，才继续处理响应内容。

二、调试

当遇到问题时，调试是解决问题的关键。以下是一些在使用requests库进行调试时常用的技巧：

1. 查看请求和响应信息：
   打印出请求的URL、方法、头部信息和响应的状态码、头部、内容等，有助于定位问题。

   print(f"Request URL: {response.url}")
   print(f"Request Method: {response.request.method}")
   print(f"Request Headers: {response.request.headers}")
   print(f"Response Status Code: {response.status_code}")
   print(f"Response Headers: {response.headers}")
   print(f"Response Content: {response.text}")
   

2. 使用日志记录：
   通过配置requests库的日志记录，可以记录更详细的请求和响应信息。

   import logging
   logging.basicConfig(level=logging.DEBUG)
   requests_log = logging.getLogger("requests.packages.urllib3")
   requests_log.setLevel(logging.DEBUG)
   requests_log.propagate = True
   

3. 模拟请求：
   使用工具如Postman或curl来模拟相同的请求，并比较结果，这有助于确定问题是出在代码还是服务器上。

4. 增加超时设置：
   如果怀疑请求超时，可以在发送请求时设置超时参数。

   response = requests.get(url, timeout=5)  # 设置5秒超时
   

5. 使用代理：
   在某些情况下，使用代理可以帮助绕过网络限制或进行更详细的调试。

   proxies = {
        
       'http': 'http://10.10.1.10:3128',
       'https': 'http://10.10.1.10:1080',
   }
   response = requests.get(url, proxies=proxies)
   

三、总结

在Python中使用requests库时，异常处理和调试是确保程序稳定性和可维护性的关键。通过捕获并处理异常，我们可以避免程序因意外情况而崩溃。通过调试技巧，我们可以快速定位问题并找到解决方案。掌握这些技术将使你在使用requests库时更加得心应手。