讲师中心 微信公众号
AI工具推荐 视频效率加速

Python Requests 库自动启用 zstd 编码的成因与禁用方案

千萱吖_8025

千萱吖_8025

发布时间:2026-10-15 12:04:07

|

988人浏览过

|

来源于php中文网

原创

Python Requests 库自动启用 zstd 编码的成因与禁用方案

当系统中安装了 zstandard 第三方库时,Requests 会自动在 Accept-Encoding 请求头中加入 zstd,导致服务器返回 zstd 压缩内容但 Requests 默认不处理解压,引发乱码;卸载 zstandard 即可全局禁用该行为。

当系统中安装了 `zstandard` 第三方库时,requests 会自动在 `accept-encoding` 请求头中加入 `zstd`,导致服务器返回 zstd 压缩内容但 requests 默认不处理解压,引发乱码;卸载 `zstandard` 即可全局禁用该行为。

在 Python 生态中,requests 库本身不原生支持 zstd 解压缩——它仅负责发送请求并接收原始响应体。但自 requests v2.31.0(2023年发布)起,其内部引入了一项隐式兼容机制:若检测到已安装第三方压缩库 zstandard(即通过 import zstandard 成功),则会自动将 zstd 添加至默认 Accept-Encoding 头中,形如:

Accept-Encoding: gzip, deflate, br, zstd

这一设计初衷是“按需协商最优压缩”,但带来一个关键矛盾:Requests 不会自动解压 zstd 编码的响应体( unlike gzip 或 deflate,后者由标准库 gzip/zlib 支持且 requests 内置解压逻辑)。结果就是:响应 .content 返回的是未经解压的二进制 zstd 流(如你看到的 \xb5/\xfd\x04X...),直接使用将导致解析失败、乱码或后续处理崩溃。

✅ 根本原因确认方法:
运行以下代码即可验证是否受此影响:

import requests
print("zstandard available:", True if requests.packages.urllib3.util.ssl_.HAS_ZSTD else False)
# 或更直接地:
try:
    import zstandard
    print("zstandard is installed → requests will advertise 'zstd' encoding")
except ImportError:
    print("zstandard not found → no zstd in Accept-Encoding")

? 推荐解决方案(优先级从高到低):

  1. ✅ 卸载 zstandard(最简洁、全局生效)

    Forge — Python Developer
    Forge — Python Developer

    Python开发助手 — 自动化脚本、API封装、命令行工具、数据管道、网页爬虫。经过测试的代码,包含错误处理和文档。当你需要...

    下载

    立即学习“Python免费学习笔记(深入)”;

    pip uninstall zstandard

    ✅ 优点:一劳永逸,所有 requests.get()/.post() 自动回归传统 gzip, deflate, br 协商,无须修改任何业务代码。
    ⚠️ 注意:仅当你不需要在其他地方主动使用 zstd 压缩/解压功能时适用。若项目依赖 zstandard 进行本地数据压缩,请跳至方案 2 或 3。

  2. ✅ 全局禁用 zstd 协商(保留 zstandard 库)
    在程序启动早期(import requests 后、首次发起请求前)执行:

    import requests
    from requests.adapters import HTTPAdapter
    from urllib3.util.retry import Retry
    
    # 强制移除 zstd —— 修改 requests 的默认编码列表
    requests.utils.default_user_agent = lambda: "python-requests/2.31.0"
    # 更可靠的方式: monkey patch urllib3 的编码检测逻辑
    try:
        import urllib3
        urllib3.util.ssl_.HAS_ZSTD = False  # 关键!欺骗 urllib3 认为 zstd 不可用
    except ImportError:
        pass

    此后所有请求将不再携带 zstd。

  3. ⚠️ 逐请求控制(灵活性高,但需代码改造)
    显式覆盖 Accept-Encoding,排除 zstd:

    headers = {"Accept-Encoding": "gzip, deflate, br"}  # 明确指定,不含 zstd
    response = requests.get("https://example.com", headers=headers)

? 重要补充说明:

  • Python 3.14(2025年10月发布)已将 compression.zstd 纳入标准库,但 requests 尚未适配该新模块;当前所有 zstd 行为均源于第三方 zstandard 库的检测逻辑。
  • 若你使用的是 Synology DSM 7 系统,其 Python 环境常预装 zstandard(用于日志或备份模块),故升级后脚本突然异常属典型场景。
  • 切勿使用 verify=False 或 stream=True 等无关参数试图“绕过”——问题本质是编码协商与解压能力不匹配,而非 SSL 或流控。

? 总结:zstandard 是“开关”,不是“解压器”。卸载它是最符合 Python “显式优于隐式”哲学的解决路径。保持环境纯净,让 requests 回归其稳健、可预测的默认行为。

热门AI工具

更多
二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

1751

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

4464

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1709

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

26197

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3187

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3207

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

1183

2023.08.11

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

596

2023.08.10

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn