使用Python的Requests库进行HTTP请求是一种简单而强大的方式来与Web服务进行交互。Requests库提供了简洁的API、支持HTTP请求方法如GET、POST、PUT、DELETE、支持会话处理、简化的参数和数据传递。下面将详细介绍如何使用Requests库来进行HTTP请求。
一、安装Requests库
在使用Requests库之前，需要确保它已经安装在你的Python环境中。可以使用以下命令来安装：
pip install requests
二、GET请求
GET请求是最常见的HTTP请求方法之一，用于从服务器获取数据。
1、基本使用
使用Requests库发送GET请求非常简单，只需要调用requests.get()方法并传入URL即可：
import requests
response = requests.get('https://api.example.com/data')
print(response.status_code)
print(response.text)
2、添加查询参数
你可以通过params参数来添加查询参数：
params = {'key1': 'value1', 'key2': 'value2'}
response = requests.get('https://api.example.com/data', params=params)
print(response.url)
3、处理响应
处理GET请求的响应可以通过以下几个方面：
- 状态码：通过
response.status_code获取HTTP状态码。 - 响应内容：通过
response.text获取响应的文本内容，或者通过response.json()获取JSON格式的响应（前提是响应内容是JSON格式）。
三、POST请求
POST请求通常用于向服务器发送数据。
1、基本使用
可以通过requests.post()方法发送POST请求：
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://api.example.com/data', data=data)
print(response.status_code)
print(response.json())
2、发送JSON数据
如果需要发送JSON格式的数据，可以使用json参数：
json_data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://api.example.com/data', json=json_data)
print(response.status_code)
print(response.json())
四、处理请求头
有时候需要设置请求头来发送特定的请求信息，例如User-Agent或者Authorization。
headers = {'User-Agent': 'my-app/0.0.1', 'Authorization': 'Bearer token_value'}
response = requests.get('https://api.example.com/data', headers=headers)
print(response.status_code)
五、处理Cookies
Requests库可以自动处理Cookies，也可以手动设置Cookies。
1、自动处理Cookies
Requests库会自动处理Cookies，保持会话状态：
session = requests.Session()
response = session.get('https://api.example.com/data')
print(response.cookies)
2、手动设置Cookies
你也可以手动设置请求的Cookies：
cookies = {'session_id': '123456'}
response = requests.get('https://api.example.com/data', cookies=cookies)
print(response.text)
六、处理超时和重试
在网络请求中，设置超时和重试机制是非常重要的。
1、设置超时
可以通过timeout参数来设置请求的超时时间：
try:
response = requests.get('https://api.example.com/data', timeout=5)
print(response.text)
except requests.Timeout:
print('The request timed out')
2、实现重试机制
虽然Requests库本身不支持重试机制，但可以通过使用requests.adapters模块来实现：
from requests.adapters import HTTPAdapter
from requests.packages.urllib3.util.retry import Retry
session = requests.Session()
retries = Retry(total=5, backoff_factor=1, status_forcelist=[502, 503, 504])
session.mount('https://', HTTPAdapter(max_retries=retries))
response = session.get('https://api.example.com/data')
print(response.status_code)
七、文件上传
Requests库也支持文件上传功能。
files = {'file': open('report.xls', 'rb')}
response = requests.post('https://api.example.com/upload', files=files)
print(response.status_code)
八、流式请求
对于大文件的下载，可以使用流式请求来避免占用过多内存。
response = requests.get('https://api.example.com/largefile', stream=True)
with open('largefile', 'wb') as f:
for chunk in response.iter_content(chunk_size=1024):
f.write(chunk)
九、SSL证书验证
默认情况下，Requests会验证SSL证书。可以通过verify参数来关闭验证（不推荐）：
response = requests.get('https://api.example.com/data', verify=False)
十、总结
Requests库是Python中进行HTTP请求的强大工具，提供了丰富的功能来处理不同类型的HTTP请求、支持会话处理、请求头设置、Cookies处理、超时和重试机制、文件上传、流式请求等。通过掌握Requests库的这些功能，可以在Python中轻松实现与Web服务的交互。
相关问答FAQs：
如何在Python中使用requests库进行基本的HTTP请求？
在Python中，使用requests库可以轻松发送HTTP请求。首先，确保安装了requests库，可以通过运行pip install requests来进行安装。发送GET请求的基本用法如下：
import requests
response = requests.get('https://api.example.com/data')
print(response.text)
此代码将向指定的URL发送GET请求，并打印响应内容。对于POST请求，可以这样使用：
response = requests.post('https://api.example.com/data', data={'key': 'value'})
print(response.json())
这样会将数据以表单形式发送，并返回JSON格式的响应。
如何处理requests库中的响应数据？
使用requests库后，响应对象包含多种方法和属性来处理响应数据。您可以使用response.status_code获取HTTP状态码，使用response.json()来解析JSON格式的响应内容，或者通过response.text获取原始文本。例如：
if response.status_code == 200:
data = response.json()
print(data)
else:
print(f"请求失败，状态码：{response.status_code}")
这种方式可以帮助您根据不同的状态码处理响应内容。
如何在requests中添加自定义请求头和参数？
在使用requests库时，您可以通过headers参数添加自定义请求头，使用params参数传递查询字符串参数。例如：
headers = {'Authorization': 'Bearer your_token'}
params = {'search': 'keyword'}
response = requests.get('https://api.example.com/search', headers=headers, params=params)
print(response.json())
这种方法使得与API的交互更加灵活，可以根据需要自定义请求的各个方面。
