讲师中心 微信公众号
AI工具推荐 视频效率加速

WebSocket 传输大型文件的分块传输逻辑

云丽同学_6203

云丽同学_6203

发布时间:2026-07-16 11:32:38

|

860人浏览过

|

来源于php中文网

原创

WebSocket大文件传输需应用层实现分块机制,核心是字节偏移量(offset)+固定块大小(chunkSize),前端流式切片、后端按offset精准写入,配合幂等校验与最终完整性验证。

websocket 传输大型文件的分块传输逻辑

WebSocket 本身不提供大文件传输能力,所谓“分块传输”必须由应用层自主设计和实现。它不是协议内置功能,而是前端切片、后端按偏移写入、双方协同校验的完整链路。

分块传输的核心是字节偏移量(offset)+ 固定块大小(chunkSize)

只靠 chunkIndex(如第1片、第2片)无法应对乱序、重传或连接中断——因为服务端不知道这一片该写到文件的哪个位置。用 offset 才能精确定位:比如 offset=2097152 就代表从文件第 2MB 处开始写入,无论前面是否丢包、是否重复,只要写对位置,最终拼接就可靠。

前端切片要流式读取,避免内存爆炸

WebSocket 8.18.2
WebSocket 8.18.2

WebSocket 8.18.2 是该协议规范的一个重要迭代版本,主要优化了连接稳定性与数据传输效率。它通过全双工通信机制,允许客户端与服务器在单一长连接上实时交换数据,大幅降低传统 HTTP 轮询的开销。该版本增强了心跳保活、自动重连及二进制帧传输能力,适用于即时通讯、在线游戏及金融行情推送等低延迟场景,为开发者提供更可靠的实时网络交互基础。

下载
  • 不要用 file.arrayBuffer() 一次性加载整个文件
  • 改用 file.slice(offset, offset + chunkSize) 获取 Blob 片段
  • 配合 FileReader.readAsArrayBuffer() 异步读取,每次只持有当前块的 ArrayBuffer
  • 推荐 chunkSize 设为 256KB~1MB(太小增加帧头开销,太大加重内存压力)

每个数据包需携带可解析的元信息

  • 建议结构:4 字节小端 offset + 原始二进制数据
  • 后端用 Buffer.readInt32LE(0) 提取 offset,再用 fs.write(fd, buffer, 0, buffer.length, offset) 直接写入指定位置
  • 不要用 appendFile,否则乱序到达会导致文件错位

服务端必须幂等接收与即时校验

  • 每个分片写入后立即 fsync(fd) 刷盘,防止断电丢失
  • 计算该块哈希(如 xxhash32 或 SHA-256),随响应返回给前端
  • 前端比对本地哈希一致,才更新本地 offset 记录(存于 IndexedDB 或 localStorage)
  • 若重连后服务端返回的 maxOffset > 本地记录值,说明有分片未达,需从该位置重发

上传完成需显式通知与整体验证

  • 前端最后发送一条文本帧:{"type":"complete","fileId":"xxx"}
  • 服务端收到后,按 chunkIndex 或 offset 排序读取所有临时分片,流式合并为目标文件
  • 合并完成后必须校验整个文件的哈希,不能仅靠“收到 N 片”就认为成功

不复杂但容易忽略

热门AI工具

更多
UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2243

2023.08.11

前端如何实现即时通讯
前端如何实现即时通讯

实现即时通讯的方法有WebSocket、Long Polling、Server-Sent Events、WebRTC等等。详细介绍:1、WebSocket,它可以在客户端和服务器之间建立持久连接,实现实时的双向通信,前端可以使用 WebSocket API来创建WebSocket连接,并通过发送和接收消息来实现即时通讯;2、Long Polling,是一种模拟实时通信的技术等等。

4803

2023.10.09

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

5930

2024.03.19

php和前端的关联介绍
php和前端的关联介绍

php既可以作为前端语言,也可以作为后端语言。想了解更多php和前端的相关内容,可以阅读本专题下面的文章。

5398

2024.03.22

前端外包工作内容有哪些
前端外包工作内容有哪些

前端外包工作内容包括:1. 网站和应用程序开发;2. 用户界面和交互设计;3. 用户体验优化;4. 设计和视觉开发;5. 跨浏览器兼容性;6. 性能优化;7. 维护和更新;8. 项目管理和沟通。想了解更多前端的相关内容,可以阅读本专题下面的文章。

763

2024.05.22

Golang WebSocket与实时通信开发
Golang WebSocket与实时通信开发

本专题系统讲解 Golang 在 WebSocket 开发中的应用,涵盖 WebSocket 协议、连接管理、消息推送、心跳机制、群聊功能与广播系统的实现。通过构建实际的聊天应用或实时数据推送系统,帮助开发者掌握 如何使用 Golang 构建高效、可靠的实时通信系统,提高并发处理与系统的可扩展性。

175

2025.12.22

PHP WebSocket 实时通信开发
PHP WebSocket 实时通信开发

本专题系统讲解 PHP 在实时通信与长连接场景中的应用实践,涵盖 WebSocket 协议原理、服务端连接管理、消息推送机制、心跳检测、断线重连以及与前端的实时交互实现。通过聊天系统、实时通知等案例,帮助开发者掌握 使用 PHP 构建实时通信与推送服务的完整开发流程,适用于即时消息与高互动性应用场景。

396

2026.01.19

Python WebSocket实时通信与异步服务开发实践
Python WebSocket实时通信与异步服务开发实践

本专题聚焦 Python 在实时通信场景中的开发实践,系统讲解 WebSocket 协议原理、长连接管理、消息推送机制以及异步服务架构设计。内容包括客户端与服务端通信实现、连接稳定性优化、消息队列集成及高并发处理策略。通过完整案例,帮助开发者构建高效稳定的实时通信系统,适用于聊天应用、实时数据推送等场景。

655

2026.03.18

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

40

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WebSocket手册
WebSocket手册

共0课时 | 0人学习

Webman中文手册
Webman中文手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn