讲师中心 微信公众号
AI工具推荐 视频效率加速

如何通过 ByteLengthQueuingStrategy 实现基于字节大小的通用流排队策略

秋涛酱_3564

秋涛酱_3564

发布时间:2026-05-26 16:13:35

|

650人浏览过

|

来源于php中文网

原创

ByteLengthQueuingStrategy 是 Web Streams API 中按字节长度而非数量限制流队列容量的背压策略,通过 size 方法返回 chunk.byteLength 或 UTF-8 字节数,配合 highWaterMark(单位字节)控制内存水位,适用于大文件上传、长文本解析等需防 OOM 场景。

如何通过 bytelengthqueuingstrategy 实现基于字节大小的通用流排队策略

ByteLengthQueuingStrategy 是 Web Streams API 中用于控制可读流或可写流内部队列容量的策略之一,它按数据块的字节长度而非数量来限制缓冲区大小,特别适合处理体积差异大的流式内容(如视频分片、大 JSON 响应、文件上传等),避免小请求堆积、大响应阻塞的问题。

核心原理:用字节代替“个数”做水位线

默认情况下,流队列使用 CountQueuingStrategy,每块数据计为 1 单位,不管它是 10 字节还是 10 MB。而 ByteLengthQueuingStrategy 把 size 方法定义为返回 chunk.byteLength(对 ArrayBuffer/Uint8Array)或 chunk.length(对字符串),让流引擎能真实感知内存压力。

  • 构造时传入 highWaterMark,单位是字节,例如 new ByteLengthQueuingStrategy({ highWaterMark: 1_000_000 }) 表示队列最多缓存 1MB 数据
  • 当队列中已缓存字节数 ≥ highWaterMark,流会自动暂停读取(readableStream.getReader() 的 read() 返回 { done: false, value: undefined },且 ready Promise 暂不 resolve)
  • 只有消费者调用 reader.read() 并处理完数据后,字节数才从队列中扣除,流才可能恢复读取

典型应用场景与写法

适用于需要内存可控、防 OOM、或带宽敏感的双向流场景:

  • 接收大文件上传流:服务端用 fetch 接收 ReadableStream,前端通过 ByteLengthQueuingStrategy 控制客户端缓冲上限,防止浏览器内存暴涨
  • 解析长文本流(如日志、CSV):按行或按块读取时,若某块超大(如单行含 50MB 日志),CountQueuingStrategy 会误判为“只占 1 个位置”,而 ByteLengthQueuingStrategy 能立即触发背压
  • 构建自定义转换流(TransformStream):在压缩、加密、分块等中间处理环节,用字节策略确保中间缓冲不过载

示例(读取响应体并限制总缓存为 2MB):

const response = await fetch('/api/large-data');
const reader = response.body
  .pipeThrough(new TextDecoderStream())
  .getReader({ 
    strategy: new ByteLengthQueuingStrategy({ highWaterMark: 2_000_000 }) 
  });

while (true) {
  const { done, value } = await reader.read();
  if (done) break;
  processChunk(value); // 如解析 JSON、写入 IndexedDB
}

注意事项与常见陷阱

该策略依赖你准确提供每个 chunk 的字节长度,否则背压失效:

  • 对 Uint8Array、ArrayBuffer、Blob 等二进制类型,size 方法必须返回 chunk.byteLength
  • 对字符串,需注意编码:UTF-8 下中文字符占 3 字节,直接用 str.length 会严重低估;建议转为 Uint8Array 后计算,或使用 new TextEncoder().encode(str).length
  • 不能混用不同 size 计算逻辑:比如一部分 chunk 按 UTF-16 length 算,另一部分按 UTF-8 byteLength 算,会导致 highWaterMark 失效
  • 它不替代网络层限速,也不影响 TCP 窗口或服务器发送节奏,仅作用于 JS 层流队列的内存水位控制

配合流式响应提升体验

搭配服务端流式输出(如 Node.js 的 res.write() 或 Cloudflare Workers 的 stream.pipeTo()),ByteLengthQueuingStrategy 可实现“边收边处理”,避免等待整个响应完成:

  • 用户上传大文件时,前端可实时显示已接收字节数,并在达到 highWaterMark 时提示“处理中,请稍候”,而不是卡死
  • 视频播放器加载分片时,用该策略控制解码前缓冲量,防止低端设备内存溢出
  • AI 流式响应(SSE 或 text/event-stream)中,按 token 字节数控制 UI 渲染节奏,避免 DOM 过度重排

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

4746

2023.06.20

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

1189

2023.07.04

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

4664

2023.07.04

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

920

2023.09.01

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

1836

2023.09.04

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

3385

2023.09.04

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

4373

2023.09.12

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

2860

2023.09.20

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn