讲师中心 微信公众号

工具推荐

视频效率加速
立刻MV
立刻MV

低成本歌曲 MV、视频生成

updream

一键生成高质量推广成片

Laper
Laper

剧本策划到成片协作

Seko
Seko

AI短剧一键生成成片

PythonHTTP请求会话管理_Session复用性能优化【教程】

大磊姑娘_5525

大磊姑娘_5525

发布时间:2025-12-27 23:15:08

|

879人浏览过

|

来源于php中文网

原创

复用 requests.Session 可显著提升 HTTP 性能,因避免重复 TCP/TLS 开销;requests.get() 默认不复用因每次新建临时 Session 并销毁连接池;正确做法是全局持有并调优 Session 实例。

pythonhttp请求会话管理_session复用性能优化【教程】

直接复用 requests.Session 能显著降低 HTTP 请求开销,尤其在高频、多请求、带 Cookie 或认证的场景下——不复用的话,每次 requests.get() 都新建 TCP 连接、重走 TLS 握手、丢弃连接池,性能损失可能达 3–10 倍。

为什么单次 requests.get() 默认不复用连接

因为 requests.get() 内部每次都会创建一个临时 Session 实例,用完即弃。它的底层 HTTPAdapter 虽默认启用了连接池(pool_connections=10, pool_maxsize=10),但这个池子只在该 Session 生命周期内有效。一旦函数返回,Session 销毁,连接池连同其中的 keep-alive 连接一并关闭。

常见误判现象:
- 多次调用 requests.get(url) 仍看到大量 TIME_WAIT 状态连接
- 抓包发现每请求都重新 TCP SYN + TLS handshake
- curl -w "%{time_connect} %{time_starttransfer}\n" -s URL 显示 connect 时间波动大

Session 复用的正确写法与关键配置

必须手动创建并长期持有同一个 Session 对象,而非每次请求都 new 一个。同时建议显式调优连接池参数,尤其在并发或长周期任务中:

  • 复用是跨请求、跨函数、甚至跨线程(需注意线程安全)的,Session 应作为模块级变量或依赖注入对象,避免局部创建
  • session.mount('https://', requests.adapters.HTTPAdapter(pool_connections=20, pool_maxsize=20)) —— 不要只改 pool_maxsize,pool_connections 控制「对不同 host 的最大连接池数」,小了会导致跨域名请求抢池子
  • 若服务端支持 HTTP/2,requests 当前(v2.31+)仍不原生支持;需换 httpx 或 urllib3>=2.0 + 手动配置 h2
  • 超时必须设:不设 timeout 可能卡死整个 Session,建议统一用 session.request(method, url, timeout=(3, 7))(connect, read)
import requests
<h1>✅ 正确:全局复用,显式调优</h1><p>session = requests.Session()
adapter = requests.adapters.HTTPAdapter(
pool_connections=50,
pool_maxsize=50,
max_retries=2
)
session.mount('http://', adapter)
session.mount('https://', adapter)</p><h1>后续所有请求都走这个 session</h1><p>resp1 = session.get('<a href="https://www.php.cn/link/1eb09b1b87507b37457999d05d657ae6">https://www.php.cn/link/1eb09b1b87507b37457999d05d657ae6</a>')
resp2 = session.post('<a href="https://www.php.cn/link/5fdb81013e74b3bb0c0e0ce50249c0ca">https://www.php.cn/link/5fdb81013e74b3bb0c0e0ce50249c0ca</a>', json={'item': 'book'})</p>

Cookie、认证头与 Session 状态的隐式绑定

Session 不只是连接复用容器,它自动管理 Cookies、默认携带 Authorization(如果设过 session.auth)、合并 headers。这点常被忽略,导致「复用了 Session 却没生效」:

Expanso yaml-to-json
Expanso yaml-to-json

使用 Expanso Edge 管道将 YAML 输入转换为 JSON 格式。

下载

立即学习“Python免费学习笔记(深入)”;

  • 登录后调用 session.post('/login', data=...),后续请求自动带上服务端返回的 Set-Cookie,无需手动取 session.cookies
  • session.headers.update({'User-Agent': 'myapp/1.0'}) 是持久的;但 requests.get(url, headers={...}) 会覆盖 Session 级 header,不是追加
  • 若需按请求动态改 header(如不同 token),别用 session.headers,而是在 session.get(url, headers={...}) 中传参
  • 跨子域名(如 a.example.com → b.example.com)默认不共享 Cookie,需手动设置 session.cookies.set(domain='.example.com')

Session 关闭与资源泄漏风险

Session 持有连接池和底层 urllib3.PoolManager,不显式关闭可能导致文件描述符耗尽、连接无法释放,尤其在短生命周期脚本或 serverless 环境中:

  • 长期运行的服务(如 Flask 后端、爬虫主循环)可不关,靠进程退出回收
  • 命令行工具、单元测试、Lambda 函数务必在退出前调用 session.close()
  • with requests.Session() as s: 语法是安全的,但仅适用于单次流程;不能用于「创建一次、多次使用」的场景
  • 调用 session.close() 后再发请求会抛 InvalidSchema 或连接异常,需确保无残留引用

真正容易被绕过的点是:连接池大小和超时策略必须匹配实际负载,而不是照搬示例数字;还有就是误以为「用了 Session 就万事大吉」,结果因 Cookie 域名不匹配或 header 覆盖导致状态丢失——这些都不会报错,只会静默失败。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
flask框架如何搭建
flask框架如何搭建

搭建步骤:1、安装Python和Pip;2、创建虚拟环境;3、安装Flask;4、创建Flask应用;5、运行应用;6、访问应用。想了解更多flask框架的相关内容,可以阅读本专题下面的文章。

4295

2024.06.27

Python Flask框架
Python Flask框架

本专题专注于 Python 轻量级 Web 框架 Flask 的学习与实战,内容涵盖路由与视图、模板渲染、表单处理、数据库集成、用户认证以及RESTful API 开发。通过博客系统、任务管理工具与微服务接口等项目实战,帮助学员掌握 Flask 在快速构建小型到中型 Web 应用中的核心技能。

6644

2025.08.25

Python Flask Web框架与API开发
Python Flask Web框架与API开发

本专题系统介绍 Python Flask Web框架的基础与进阶应用,包括Flask路由、请求与响应、模板渲染、表单处理、安全性加固、数据库集成(SQLAlchemy)、以及使用Flask构建 RESTful API 服务。通过多个实战项目,帮助学习者掌握使用 Flask 开发高效、可扩展的 Web 应用与 API。

336

2025.12.15

cookie
cookie

Cookie 是一种在用户计算机上存储小型文本文件的技术,用于在用户与网站进行交互时收集和存储有关用户的信息。当用户访问一个网站时,网站会将一个包含特定信息的 Cookie 文件发送到用户的浏览器,浏览器会将该 Cookie 存储在用户的计算机上。之后,当用户再次访问该网站时,浏览器会向服务器发送 Cookie,服务器可以根据 Cookie 中的信息来识别用户、跟踪用户行为等。

12799

2023.06.30

document.cookie获取不到怎么解决
document.cookie获取不到怎么解决

document.cookie获取不到的解决办法:1、浏览器的隐私设置;2、Same-origin policy;3、HTTPOnly Cookie;4、JavaScript代码错误;5、Cookie不存在或过期等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1326

2023.11.23

阻止所有cookie什么意思
阻止所有cookie什么意思

阻止所有cookie意味着在浏览器中禁止接受和存储网站发送的cookie。阻止所有cookie可能会影响许多网站的使用体验,因为许多网站使用cookie来提供个性化服务、存储用户信息或跟踪用户行为。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

884

2024.02.23

cookie与session的区别
cookie与session的区别

本专题整合了cookie与session的区别和使用方法等相关内容,阅读专题下面的文章了解更详细的内容。

1966

2025.08.19

session失效的原因
session失效的原因

session失效的原因有会话超时、会话数量限制、会话完整性检查、服务器重启、浏览器或设备问题等等。详细介绍:1、会话超时:服务器为Session设置了一个默认的超时时间,当用户在一段时间内没有与服务器交互时,Session将自动失效;2、会话数量限制:服务器为每个用户的Session数量设置了一个限制,当用户创建的Session数量超过这个限制时,最新的会覆盖最早的等等。

580

2023.10.17

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

60

2026.11.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn