Python中request如何使用

Python中的requests库是一种简单且强大的HTTP库，它允许你轻松地发送HTTP请求、处理响应、管理会话等。 在本文中，我们将深入探讨如何使用requests库，包括发送GET和POST请求、处理响应、使用会话对象和处理错误等。首先，我们将简要介绍如何安装requests库，然后详细介绍其主要功能和用法。

安装requests库

在开始使用requests库之前，你需要确保它已安装在你的Python环境中。使用以下命令可以安装requests库：

pip install requests

一、发送GET请求

1、基本用法

GET请求是最常见的HTTP请求类型之一，通常用于从服务器获取数据。使用requests库发送GET请求非常简单，只需要调用requests.get(url)方法即可。

import requests

response = requests.get('https://api.example.com/data')
print(response.status_code)
print(response.text)

2、处理查询参数

在许多情况下，你可能需要向GET请求添加查询参数。可以使用params参数来传递这些参数。

params = {'key1': 'value1', 'key2': 'value2'}

response = requests.get('https://api.example.com/data', params=params)
print(response.url)  # 输出完整的URL
print(response.json())  # 假设返回的是JSON数据

二、发送POST请求

1、基本用法

POST请求通常用于向服务器提交数据。使用requests库发送POST请求也非常简单，只需要调用requests.post(url, data=data)方法即可。

data = {'username': 'admin', 'password': 'password123'}

response = requests.post('https://api.example.com/login', data=data)
print(response.status_code)
print(response.json())

2、提交JSON数据

有时你可能需要以JSON格式提交数据，可以使用json参数而不是data参数。

import json

data = {'username': 'admin', 'password': 'password123'}
response = requests.post('https://api.example.com/login', json=data)
print(response.status_code)
print(response.json())

三、处理响应

1、检查响应状态码

在处理HTTP请求时，检查响应的状态码是非常重要的。requests库提供了status_code属性来获取响应的状态码。

response = requests.get('https://api.example.com/data')

if response.status_code == 200:
    print('Request was successful.')
else:
    print(f'Failed with status code {response.status_code}')

2、处理响应内容

响应内容可以通过多种方式访问，具体取决于内容的类型。常用的方法包括text、json()和content。

# 获取文本内容

print(response.text)
获取JSON内容
print(response.json())
获取二进制内容
print(response.content)

四、使用会话对象

1、会话对象的基本用法

会话对象允许你跨请求保持某些参数和设置，例如cookies、headers等。使用会话对象可以提高性能，因为它减少了TCP连接的建立时间。

session = requests.Session()

设置会话级别的headers
session.headers.update({'User-Agent': 'my-app/1.0'})
发送请求
response = session.get('https://api.example.com/data')
print(response.text)

2、管理cookies

会话对象还可以自动处理和保存cookies，这对于需要登录的操作非常有用。

# 登录并保存cookies

login_data = {'username': 'admin', 'password': 'password123'}
session.post('https://api.example.com/login', data=login_data)
使用保存的cookies发送请求
response = session.get('https://api.example.com/profile')
print(response.text)

五、处理错误

1、捕获异常

在处理HTTP请求时，捕获异常是一个好的实践。requests库提供了一些常见的异常类，如requests.exceptions.RequestException、requests.exceptions.HTTPError等。

try:

    response = requests.get('https://api.example.com/data')
    response.raise_for_status()  # 如果响应状态码不是200，会抛出HTTPError异常
except requests.exceptions.RequestException as e:
    print(f'Request failed: {e}')

2、重试机制

在某些情况下，重试请求是有必要的。你可以使用循环和异常处理来实现简单的重试机制。

import time

max_retries = 3
for i in range(max_retries):
    try:
        response = requests.get('https://api.example.com/data')
        response.raise_for_status()
        break  # 成功时退出循环
    except requests.exceptions.RequestException as e:
        print(f'Request failed: {e}, retrying ({i+1}/{max_retries})...')
        time.sleep(2)  # 等待2秒后重试

六、其他高级功能

1、设置超时

为了避免请求无响应的情况，设置请求超时是一个好的实践。requests库允许你通过timeout参数设置超时。

try:

    response = requests.get('https://api.example.com/data', timeout=5)  # 设置超时为5秒
    print(response.text)
except requests.exceptions.Timeout:
    print('The request timed out')

2、使用代理

在某些情况下，你可能需要通过代理发送请求。requests库支持通过proxies参数设置代理。

proxies = {

    'http': 'http://10.10.1.10:3128',
    'https': 'http://10.10.1.10:1080',
}
response = requests.get('https://api.example.com/data', proxies=proxies)
print(response.text)

七、处理文件上传和下载

1、文件上传

使用requests库上传文件非常简单，只需要使用files参数。

files = {'file': open('report.csv', 'rb')}

response = requests.post('https://api.example.com/upload', files=files)
print(response.status_code)

2、文件下载

下载文件时，可以使用流模式（stream=True）来避免一次性将大文件加载到内存中。

response = requests.get('https://api.example.com/report.csv', stream=True)

with open('report.csv', 'wb') as f:
    for chunk in response.iter_content(chunk_size=8192):
        f.write(chunk)

八、使用第三方库简化处理

在处理复杂的HTTP请求时，使用第三方库可以进一步简化代码。例如，requests-toolbelt是一个专门为requests库设计的工具包，提供了许多有用的功能。

1、安装requests-toolbelt

pip install requests-toolbelt

2、使用MultipartEncoder上传文件

requests-toolbelt提供了一个名为MultipartEncoder的类，可以帮助你轻松地上传包含多个部分的文件。

from requests_toolbelt.multipart.encoder import MultipartEncoder

m = MultipartEncoder(
    fields={
        'field1': 'value1',
        'field2': 'value2',
        'file': ('filename', open('report.csv', 'rb'), 'text/csv')
    }
)
response = requests.post('https://api.example.com/upload', data=m, headers={'Content-Type': m.content_type})
print(response.status_code)

九、总结

在本文中，我们深入探讨了Python中requests库的各种用法，包括发送GET和POST请求、处理响应、使用会话对象、处理错误、设置超时和使用代理等高级功能。通过这些示例，你应该能够轻松地在自己的项目中使用requests库进行HTTP请求。

此外，我们还简要介绍了如何使用第三方库如requests-toolbelt来简化处理。希望这篇文章能够帮助你更好地理解和使用requests库，提高你的开发效率。

相关问答FAQs：

1. 如何在Python中使用request库发送HTTP请求？

使用request库发送HTTP请求非常简单。首先，确保已经安装了request库。然后，导入request库并使用其提供的函数来发送请求。例如，要发送一个GET请求，可以使用requests.get(url)，其中url是目标网址。

2. 如何在Python中使用request库发送带有参数的GET请求？

如果要在GET请求中传递参数，可以将参数添加到URL的查询字符串中。可以使用params参数传递一个字典，其中键是参数的名称，值是参数的值。例如，requests.get(url, params={'key': 'value'})会将参数key的值设置为value。

3. 如何在Python中使用request库发送POST请求并传递数据？

要发送一个POST请求并传递数据，可以使用requests.post(url, data=data)，其中data是要发送的数据。可以将数据作为字典传递，它将自动编码为表单形式。如果要发送JSON数据，可以使用json参数，例如requests.post(url, json=data)。

4. 如何在Python中使用request库处理响应？

当发送请求后，可以使用返回的响应对象来处理响应。可以使用.text属性来获取响应的内容，.status_code属性来获取响应的状态码，.headers属性来获取响应的头部信息。此外，还可以使用.json()方法来解析响应的JSON数据。例如，response = requests.get(url)，然后可以使用response.text来获取响应的内容。

5. 如何在Python中使用request库处理异常和错误？

在使用request库时，可能会遇到各种异常和错误。为了处理这些情况，可以使用try-except语句来捕获异常并采取相应的措施。例如，如果请求超时，可以捕获requests.exceptions.Timeout异常。另外，还可以使用.raise_for_status()方法来检查响应是否成功，如果不成功，则会引发一个异常。