Python requests 模块

Python requests 是一个常用的 HTTP 请求库，可以方便地向网站发送 HTTP 请求，并获取响应结果。

requests 模块比 urllib 模块更简洁。

使用 requests 发送 HTTP 请求需要先导入 requests 模块：

import requests

导入后就可以发送 HTTP 请求，使用 requests 提供的方法向指定 URL 发送 HTTP 请求，例如：

# 导入 requests 包

import requests



# 发送请求

x = requests.get('https://www.runoob.com/')



# 返回网页内容

print(x.text)

每次调用 requests 请求之后，会返回一个 response 对象，该对象包含了具体的响应信息，如状态码、响应头、响应内容等：

print(response.status_code)  # 获取响应状态码
print(response.headers)  # 获取响应头
print(response.content)  # 获取响应内容

更多响应信息如下：

# 导入 requests 包

import requests



# 发送请求

x = requests.get('https://www.runoob.com/')



# 返回 http 的状态码

print(x.status_code)



# 响应状态的描述

print(x.reason)



# 返回编码

print(x.apparent_encoding)

输出结果如下：

200
OK
utf-8

请求 json 数据文件，返回 json 内容：

# 导入 requests 包

import requests



# 发送请求

x = requests.get('https://www.runoob.com/try/ajax/json_demo.json')



# 返回 json 数据

print(x.json())

输出结果如下：

{'name': '网站', 'num': 3, 'sites': [{'name': 'Google', 'info': ['Android', 'Google 搜索', 'Google 翻译']}, {'name': 'Runoob', 'info': ['菜鸟教程', '菜鸟工具', '菜鸟微信']}, {'name': 'Taobao', 'info': ['淘宝', '网购']}]}

requests 方法

requests 方法如下表：

使用 requests.request() 发送 get 请求：

# 导入 requests 包

import requests



# 发送请求

x = requests.request('get', 'https://www.runoob.com/')



# 返回网页内容

print(x.status_code)

输出结果如下：

200

设置请求头：

# 导入 requests 包

import requests



 

kw = {'s':'python 教程'}



# 设置请求头

headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36"}

 

# params 接收一个字典或者字符串的查询参数，字典类型自动转换为url编码，不需要urlencode()

response = requests.get("https://www.runoob.com/", params = kw, headers = headers)



# 查看响应状态码

print (response.status_code)



# 查看响应头部字符编码

print (response.encoding)



# 查看完整url地址

print (response.url)



# 查看响应内容，response.text 返回的是Unicode格式的数据

print(response.text)

输出结果如下：

200
UTF-8
https://www.runoob.com/?s=python+%E6%95%99%E7%A8%8B

... 其他内容...

post() 方法可以发送 POST 请求到指定 url，一般格式如下：

requests.post(url, data={key: value}, json={key: value}, args)

• url 请求 url。

• data 参数为要发送到指定 url 的字典、元组列表、字节或文件对象。

• json 参数为要发送到指定 url 的 JSON 对象。

• args 为其他参数，比如 cookies、headers、verify等。

# 导入 requests 包

import requests



# 发送请求

x = requests.post('https://www.runoob.com/try/ajax/demo_post.php')



# 返回网页内容

print(x.text)

输出结果如下：

<p style='color:red;'>本内容是使用 POST 方法请求的。</p><p style='color:red;'>请求时间：
2022-05-26 17:30:47</p>

post 请求带参数：

# 导入 requests 包

import requests



# 表单参数，参数名为 fname 和 lname

myobj = {'fname': 'RUNOOB','lname': 'Boy'}



# 发送请求

x = requests.post('https://www.runoob.com/try/ajax/demo_post2.php', data = myobj)



# 返回网页内容

print(x.text)

输出结果如下：

<p style='color:red;'>你好，RUNOOB Boy，今天过得怎么样？</p>

附加请求参数

发送请求我们可以在请求中附加额外的参数，例如请求头、查询参数、请求体等，例如：

headers = {'User-Agent': 'Mozilla/5.0'}  # 设置请求头
params = {'key1': 'value1', 'key2': 'value2'}  # 设置查询参数
data = {'username': 'example', 'password': '123456'}  # 设置请求体
response = requests.post('https://www.runoob.com', headers=headers, params=params, data=data)

上述代码发送一个 POST 请求，并附加了请求头、查询参数和请求体。

除了基本的 GET 和 POST 请求外，requests 还支持其他 HTTP 方法，如 PUT、DELETE、HEAD、OPTIONS 等。