python模块04-requests

2024-08-26 06:44
文章标签 python 模块 04 requests

本文主要是介绍python模块04-requests，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

1 requests模块发送请求

Requests是一个Python HTTP庫

 相关参考资料：

文档：Requests: 让 HTTP 服务人类 — Requests 2.18.1 文档

requests · PyPI：requests · PyPI

requests源码：GitH0ub - psf/requests: A simple, yet elegant, HTTP library.

HTTP协议相关：

HTTP协议相关知识-CSDN博客

鉴权Cookies、授权session、token-CSDN博客

安装：

pip install requests

1.1 发送get 请求

  • 方法：requests.get()
  • 参数传递：使用parmas传递参数
#导入 requess
#requests就是一个客户端，客户端是什么？ 发送请求的一方，不一定有界面 前端、postman,user-agent
#python用requests发送请求其就是一个user-agent
#接收请求：服务端import  requests#发送GET请求，需要传递参数，URL
url = "http://www.baidu.com"
res = requests.get(url)#得到响应数据
"""
通过res获取其响应数据
"""
print(res) #<Response [200]>
print(res.status_code) #200
#获取返回的数据，获取文本
#方式一：返回HTML页面
print(res.text)

打印如图：  

#方式二：二进制格式
#为字节流数据
#特殊情况：图片、视频、音频
print(res.content)

打印如图： 

#打印为JSON格式的数据,返回的格式为字典
#返回的是字典，如果接口返回的不是json格式，res,json()报错
print(res.json())#如果接口不是json的数据
#只能使用res.text,不然会报错

1.2 发送post 请求

  • 方法：requests.post()
  • 参数传递方式：
    • application/x-www-form-urlencoded类型参数（表单类型）：
      • 使用data进行传递
    • application/json类型参数（json类型）：
      • 使用json进行传递

post和get即请求语句不相同，响应数据获取是一致的

res = requests.post(url)print(res)
print(res.text)
print(res.content)
print(res.json())

 1.2.1 常规用法


url = 'http://httpbin.org/post'
data = {'key1':'value1', 'key2':'value2'}
r =requests.post(url, data)
print(r)
print(r.text)
print(r.content)"""结果
<Response [200]>
{"args": {}, "data": "", "files": {}, "form": {"key1": "value1", "key2": "value2"}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "23", "Content-Type": "application/x-www-form-urlencoded", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post"
}b'{\n  "args": {}, \n  "data": "", \n  "files": {}, \n  "form": {\n    "key1": "value1", \n    "key2": "value2"\n  }, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "23", \n    "Content-Type": "application/x-www-form-urlencoded", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post"\n}\n'"""

1.2.2 JSON形式

 查看：python模块05-json-CSDN博客

1.3 发送patch请求

  • 方法：requests.patch()
  • 参数传递方式：
    • application/x-www-form-urlencoded类型参数（表单类型）：
      • 使用data进行传递
    • application/json类型参数（json类型）：
      • 使用json进行传递

请求参数也可以使用字符串,但存在解析慢，存在数据格式不通用的场景，一般是通过字典形式来传递

2 响应数据的获取

  • 方式一：text属性，自动识别编码方式进行编码
    •         data = response.text
  • 方式二：content属性，需要 定要decode方法指定编码方式解码
    •         data = response.content.decode('utf8')
  • 方式三：json方式，返回数据为json格式时，使用该方法来获取
    •          data = response.json()
  • #查看完整的url print(res.url)
  • #查看响应头部的字符编码 print(res.encoding)
  • #查看响应码 print(res.status_code)

3 指定header设置

# 发送post请求
url = "http://httpbin.org/post"
user = {"username": "python","password": "123456"
}#headers不仅放type还可以放其他参数
headers = {"content-type":"application/json"
}# 如何发送query string
# 即使head设置为了json,但params也转换不到body中，params还是在url当中
res = requests.post(url, params=user, headers=headers)#将参数放到body中
res = requests.post(url, data=user, headers=headers)# form表单格式数据
print(res)
print(res.text)
print(res.content)
print(res.json())"""结果
<Response [200]>
{"args": {"password": "123456", "username": "python"}, "data": "", "files": {}, "form": {}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "0", "Content-Type": "application/json", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post?username=python&password=123456"
}b'{\n  "args": {\n    "password": "123456", \n    "username": "python"\n  }, \n  "data": "", \n  "files": {}, \n  "form": {}, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "0", \n    "Content-Type": "application/json", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post?username=python&password=123456"\n}\n'
{'args': {'password': '123456', 'username': 'python'}, 'data': '', 'files': {}, 'form': {}, 'headers': {'Accept': '*/*', 'Accept-Encoding': 'gzip, deflate', 'Content-Length': '0', 'Content-Type': 'application/json', 'Host': 'httpbin.org', 'User-Agent': 'python-requests/2.32.3', 'X-Amzn-Trace-Id': 'Root=1-66cb5487-0a111f6318caef86485e3568'}, 'json': None, 'origin': '172.104.189.197', 'url': 'http://httpbin.org/post?username=python&password=123456'}"""

4 接口有鉴权怎么访问？

案例：请求需要登录才能访问的接口怎么办？

4.1 cookie + session 鉴权的接口处理？

        使用requests.session对象来发送请求

        session对象可以自动传递cookies信息（下一次请求会自动携带上次请求的cookies）

import requests
#创建session对象
sessio = requests.session()

步骤：先发请求登录，然后再请求需要鉴权的接口

import requests
s = requests.Session()r = s.get('http://httpbin.org/cookies', cookies={'from-my':'browser'})
print(r.text)
"""结果
{"cookies": {"from-my": "browser"}
}
"""r = s.get('http://httpbin.org/cookies')
print(r.text)
"""结果
{"cookies": {}
}
"""#如果要手动添加cookie信息，可以属于Cookie Utility来操作
with requests.Session() as s:s.get('http://httpbin.org/cookies/set/sessioncookie/123456789')

httpbin 是一个使用 Python + Flask 编写的 HTTP HTTP Request & Response Service。，是一个开源项目。

主要用于测试 HTTP 库

 httpbin.org

4.2 使用token鉴权的接口处理？

登录之后，提取token，保存起来

请求需要鉴权的接口时，带上登录后提取的token

5 对requests模块进行二次封装

  • 封装目的：
    •  为了使用的时候更方便提高代码的重用率
  • 封装的需求？
    •  逻辑代码进行封装的方法，关键的数据参数化
  • 哪些数据需要参数化？
    • 请求地址、请求方法、请求参数
def simple(url,params=None,data=None,json=None,method='get',**kwargs):"""封装接口:return:字典 res.json()"""url = urlres = requests.request(method,url ,params = params,data=data,json = json,**kwargs)try:return res.json()except Exception as e:logging.error("返回数据不是json格式：{}".format(e))return res.textreturn None

这篇关于python模块04-requests的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/1107838。

相关文章

python: 多模块(.py)中全局变量的导入

python: 多模块(.py)中全局变量的导入

文章目录 global关键字可变类型和不可变类型数据的内存地址单模块(单个py文件)的全局变量示例总结 多模块(多个py文件)的全局变量from x import x导入全局变量示例 import x导入全局变量示例 总结 global关键字 global 的作用范围是模块(.py)级别： 当你在一个模块（文件）中使用 global 声明变量时，这个变量只在该模块的全局命名空
阅读更多...
深入探索协同过滤：从原理到推荐模块案例

深入探索协同过滤：从原理到推荐模块案例

文章目录 前言一、协同过滤1. 基于用户的协同过滤（UserCF）2. 基于物品的协同过滤（ItemCF）3. 相似度计算方法 二、相似度计算方法1. 欧氏距离2. 皮尔逊相关系数3. 杰卡德相似系数4. 余弦相似度 三、推荐模块案例1.基于文章的协同过滤推荐功能2.基于用户的协同过滤推荐功能 前言     在信息过载的时代，推荐系统成为连接用户与内容的桥梁。本文聚焦于
阅读更多...
【Python编程】Linux创建虚拟环境并配置与notebook相连接

【Python编程】Linux创建虚拟环境并配置与notebook相连接

1.创建 使用 venv 创建虚拟环境。例如，在当前目录下创建一个名为 myenv 的虚拟环境： python3 -m venv myenv 2.激活 激活虚拟环境使其成为当前终端会话的活动环境。运行： source myenv/bin/activate 3.与notebook连接 在虚拟环境中，使用 pip 安装 Jupyter 和 ipykernel： pip instal
阅读更多...
【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

引言 高斯过程（Gaussian Process，简称GP）是一种概率模型，用于描述一组随机变量的联合概率分布，其中任何一个有限维度的子集都具有高斯分布 文章目录 引言一、高斯过程1.1 基本定义1.1.1 随机过程1.1.2 高斯分布 1.2 高斯过程的特性1.2.1 联合高斯性1.2.2 均值函数1.2.3 协方差函数（或核函数） 1.3 核函数1.4 高斯过程回归（Gauss
阅读更多...
【学习笔记】 陈强-机器学习-Python-Ch15 人工神经网络（1）sklearn

【学习笔记】 陈强-机器学习-Python-Ch15 人工神经网络（1）sklearn

系列文章目录 监督学习：参数方法 【学习笔记】 陈强-机器学习-Python-Ch4 线性回归 【学习笔记】 陈强-机器学习-Python-Ch5 逻辑回归 【课后题练习】 陈强-机器学习-Python-Ch5 逻辑回归（SAheart.csv） 【学习笔记】 陈强-机器学习-Python-Ch6 多项逻辑回归 【学习笔记 及 课后题练习】 陈强-机器学习-Python-Ch7 判别分析 【学
阅读更多...
nudepy，一个有趣的 Python 库！

nudepy，一个有趣的 Python 库！

更多资料获取 📚 个人网站：ipengtao.com 大家好，今天为大家分享一个有趣的 Python 库 - nudepy。 Github地址：https://github.com/hhatto/nude.py 在图像处理和计算机视觉应用中，检测图像中的不适当内容（例如裸露图像）是一个重要的任务。nudepy 是一个基于 Python 的库，专门用于检测图像中的不适当内容。该
阅读更多...
pip-tools：打造可重复、可控的 Python 开发环境，解决依赖关系，让代码更稳定

pip-tools：打造可重复、可控的 Python 开发环境，解决依赖关系，让代码更稳定

在 Python 开发中，管理依赖关系是一项繁琐且容易出错的任务。手动更新依赖版本、处理冲突、确保一致性等等，都可能让开发者感到头疼。而 pip-tools 为开发者提供了一套稳定可靠的解决方案。 什么是 pip-tools？ pip-tools 是一组命令行工具，旨在简化 Python 依赖关系的管理，确保项目环境的稳定性和可重复性。它主要包含两个核心工具：pip-compile 和 pip
阅读更多...
HTML提交表单给python

HTML提交表单给python

python 代码 from flask import Flask, request, render_template, redirect, url_forapp = Flask(__name__)@app.route('/')def form():# 渲染表单页面return render_template('./index.html')@app.route('/submit_form',
阅读更多...
取得 Git 仓库 —— Git 学习笔记 04

取得 Git 仓库 —— Git 学习笔记 04

取得 Git 仓库 —— Git 学习笔记 04 我认为， Git 的学习分为两大块：一是工作区、索引、本地版本库之间的交互；二是本地版本库和远程版本库之间的交互。第一块是基础，第二块是难点。 下面，我们就围绕着第一部分内容来学习，先不考虑远程仓库，只考虑本地仓库。 怎样取得项目的 Git 仓库？ 有两种取得 Git 项目仓库的方法。第一种是在本地创建一个新的仓库，第二种是把其他地方的某个
阅读更多...
Jenkins构建Maven聚合工程，指定构建子模块

Jenkins构建Maven聚合工程，指定构建子模块

一、设置单独编译构建子模块 配置： 1、Root POM指向父pom.xml 2、Goals and options指定构建模块的参数： mvn -pl project1/project1-son -am clean package 单独构建project1-son项目以及它所依赖的其它项目。 说明： mvn clean package -pl 父级模块名/子模块名 -am参数
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2