目录
前言一、下载网络文件（一）基本步骤（二）分段下载大文件（三）常见问题二、requests模块处理Cookie（一）发送带有 Cookies 的请求（二）从响应中获取 Cookies（三）Session 对象管理 Cookies（四）手动设置和修改 Cookies（五）RequestsCookieJar 转换为字典（六）字典转换为 RequestsCookieJar（七）总结三、重定向与历史请求（一）重定向的概念（二）自动重定向（三）禁止重定向（四）POST 请求的重定向（五）重定向链和历史请求（六）限制重定向次数（七）总结四、总结前言
本文主要介绍了如何使用 Python 的 requests 模块进行网络请求操作，涵盖了从文件下载、Cookie 处理到重定向与历史请求等多个方面。通过详细的示例代码，展示了如何高效地实现各种网络操作，帮助开发者更轻松地进行 HTTP 请求的处理和数据管理。
一、下载网络文件
（一）基本步骤
使用 requests.get() 方法可以发送 HTTP GET 请求，从给定的 URL 下载文件。以下是下载文件的典型步骤：
发送请求 使用 requests.get() 向文件的 URL 发送请求。
获取文件内容 响应对象的 content 属性包含文件的二进制数据，可以将其保存到本地文件中。
保存文件 使用 with open() 创建一个本地文件，将下载的内容写入其中。
示例：
import requests# 要下载的文件的 URLurl = 'sample.pdf'# 发送 GET 请求response = requests.get(url)# 检查请求是否成功if response.status_code == 200: # 以二进制模式打开一个文件，将文件内容写入本地 with open('sample.pdf', 'wb') as file: file.write(response.content) print("文件下载成功")else: print(f"文件下载失败，状态码：{response.status_code}")（二）分段下载大文件
如果文件比较大，建议使用分段下载方式。通过 iter_content() 方法，可以避免将整个文件一次性加载到内存中，而是逐块处理数据，适合大文件下载。
示例：
import requests# 要下载的文件的 URLurl = 'largefile.zip'# 发送 GET 请求，流式获取文件response = requests.get(url, stream=True)# 检查请求是否成功if response.status_code == 200: # 以二进制模式打开一个文件，逐块写入数据 with open('largefile.zip', 'wb') as file: for chunk in response.iter_content(chunk_size=1024): if chunk: # 过滤掉保持活动的空数据块 file.write(chunk) print("大文件下载成功")else: print(f"文件下载失败，状态码：{response.status_code}")（三）常见问题
常见的问题主要有两个：
1. 超时设置：可以使用 timeout 参数来避免请求长时间挂起。例如：
response = requests.get(url, timeout=10) # 设置10秒超时
2. 错误处理：建议添加异常处理来捕获网络错误。例如：
try: response = requests.get(url) response.raise_for_status() # 检查请求是否成功except requests.exceptions.RequestException as e: print(f"请求失败：{e}")二、requests模块处理Cookie
requests 模块可以轻松地处理 HTTP 请求中的 Cookies，包括发送带有 Cookie 的请求和在响应中获取 Cookie。以下是如何使用 requests 模块处理 Cookies 的一些常见方法和操作示例。
（一）发送带有 Cookies 的请求
在发送请求时，可以通过 cookies 参数向服务器发送 Cookie。这个参数接收一个字典形式的 Cookie 数据，其中键是 Cookie 名称，值是 Cookie 的值。
示例：
import requests# 定义 Cookiescookies = { 'session_id': '123456', 'user': 'john_doe'}# 发送带有 Cookies 的请求response = requests.get('login')# 在后续的请求中，Cookies 会自动发送response = session.get('dashboard')# 查看当前 Session 中的 Cookiesprint(session.cookies)在这个示例中，session 对象会自动管理从响应中接收到的 Cookies，并在后续请求中发送它们。这样，可以保持一个会话（如登录后的状态）。
（四）手动设置和修改 Cookies
如果想手动管理 Session 对象的 Cookies，可以通过 session.cookies.set() 方法来设置或修改 Cookies。
示例：
import requests# 创建一个 Session 对象session = requests.Session()# 设置一个新的 Cookiesession.cookies.set('my_cookie', 'cookie_value')# 发送请求，并自动附带这个 Cookieresponse = session.get('login', data={'username': 'user', 'password': 'pass'})# 打印重定向后的请求方法if response.history: print(f"重定向后使用的请求方法: {response.request.method}")在这种情况下，POST 请求可能会被重定向为 GET 请求。
（五）重定向链和历史请求
可以通过 response.history 来查看每一次重定向的状态码和 URL，以跟踪整个请求链。
示例：
import requests# 发送一个可能发生多次重定向的请求response = requests.get('http://example.com')# 打印重定向链中的每个请求信息for resp in response.history: print(f"状态码: {resp.status_code}, URL: {resp.url}, 请求方法: {resp.request.method}")（六）限制重定向次数
requests 模块默认允许最多 30 次重定向。如果需要限制重定向次数，可以通过 max_redirects 参数来控制。
示例：
import requests# 限制最多重定向次数为 5response = requests.get('http://example.com', max_redirects=5)# 查看响应状态码print(f"最终的状态码: {response.status_code}")如果重定向次数超过了设置的限制，requests 会抛出 TooManyRedirects 异常。
（七）总结
自动重定向: requests 默认会自动处理 3xx 重定向，并可通过 response.history 查看重定向链。
禁止重定向: 使用 allow_redirects=False 禁止自动重定向。
POST 请求重定向: 如果遇到 302 或 303 状态码，POST 请求会自动转换为 GET 请求。
历史请求: 通过 response.history 获取每次重定向的状态码、URL 和请求方法，了解请求过程。
限制重定向次数: 可以通过 max_redirects 限制最大重定向次数，防止陷入无限重定向循环。
四、总结
通过 requests 模块，开发者可以轻松实现文件下载、Cookie 自动管理以及处理重定向和历史请求。本文通过清晰的步骤和代码示例，展示了如何处理常见的网络请求需求，并提供了应对大文件下载、请求超时及多次重定向等复杂场景的解决方案，使网络编程变得更加简单和高效。
