讲师中心 微信公众号

工具推荐

视频效率加速
剧云
剧云

中文短剧剧本制作平台

Laper
Laper

剧本策划到成片协作

Seko
Seko

AI短剧一键生成成片

updream

一键生成高质量推广成片

Java 对象序列化怎么用分片传输大对象

夏敏姑娘_3678

夏敏姑娘_3678

发布时间:2026-11-21 10:56:27

|

775人浏览过

|

来源于php中文网

原创

java 原生序列化不支持分片传输,必须手动将大对象拆分为字节数组片段并逐个发送。具体做法是调用 objectoutputstream 生成完整字节流后,使用 system.arraycopy 按固定大小截取子数组,通过循环或线程池并发发送这些子块,接收端收集所有子块后拼接成完整字节流,再使用 objectinputstream 反序列化恢复对象。

Java 对象序列化怎么用分片传输大对象

如何拆分和发送序列化字节流

拆分过程是将序列化后的字节数组按指定阈值切分。发送时通常结合网络协议(如 TCP)或消息队列,为每个分片添加序号以便排序。以下代码展示了如何将一个包含大量数据的 Java 对象序列化为字节流,并按 1024 字节大小进行分片发送的逻辑模拟。

Java 对象序列化怎么用分片传输大对象

import java.io.*;
import java.util.ArrayList;
import java.util.List;

public class SerializationSplitter {
    public static void main(String[] args) throws Exception {
        // 1. 准备一个大对象
        LargeDataObject obj = new LargeDataObject();
        obj.setData(new byte[10000]); // 模拟 10KB 数据

        // 2. 序列化对象为字节数组
        ByteArrayOutputStream baos = new ByteArrayOutputStream();
        ObjectOutputStream oos = new ObjectOutputStream(baos);
        oos.writeObject(obj);
        oos.close();
        byte[] fullBytes = baos.toByteArray();

        // 3. 定义分片大小
        int chunkSize = 1024;
        List<byte[]> chunks = new ArrayList<>();

        // 4. 拆分字节数组
        for (int i = 0; i < fullBytes.length; i += chunkSize) {
            int end = Math.min(i + chunkSize, fullBytes.length);
            byte[] chunk = new byte[end - i];
            System.arraycopy(fullBytes, i, chunk, 0, end - i);
            chunks.add(chunk);
        }

        // 5. 模拟发送分片(打印大小验证)
        System.out.println("Total chunks: " + chunks.size());
        for (int i = 0; i < chunks.size(); i++) {
            System.out.println("Sending chunk " + i + ", size: " + chunks.get(i).length);
        }
    }
}

class LargeDataObject implements Serializable {
    private byte[] data;
    public void setData(byte[] data) { this.data = data; }
}

运行上述代码,控制台会输出总共有多少个分片以及每个分片的字节数。对于 10KB 的数据,若分片大小为 1024 字节,将产生约 10 个分片。最后一个分片的大小可能小于 1024 字节。这种拆分方式确保了每个分片都是完整的字节序列,便于在网络中独立传输。

立即学习“Java免费学习笔记(深入)”;

FilePond 灵活的 JavaScript 文件上传库
FilePond 灵活的 JavaScript 文件上传库

FilePond 是一个 JavaScript 文件上传库,支持通过拖拽、粘贴和 API 方式处理文件、目录、URL 和 Data URI。它包含内置的图像优化功能、异步分块上传功能,并提供了适用于 React、Vue、Angular 和 Svelte 的适配器。

下载

如何接收并重组序列化字节流

接收端需要维护一个缓冲区或使用列表来存储接收到的分片。由于网络传输可能导致分片乱序,接收端必须根据分片序号对数据进行排序,然后按顺序拼接。拼接完成后,即可使用 ObjectInputStream 进行反序列化。以下代码展示了如何从分片列表中重组字节流并反序列化对象。

Java 对象序列化怎么用分片传输大对象

import java.io.*;
import java.util.*;

public class SerializationReassembler {
    public static void main(String[] args) throws Exception {
        // 模拟接收到的分片列表(实际场景中需处理乱序和丢包)
        List<Chunk> receivedChunks = new ArrayList<>();
        // 假设这里已经通过某种机制接收到了所有分片
        // 为了演示,我们直接复用之前的逻辑生成分片
        LargeDataObject originalObj = new LargeDataObject();
        originalObj.setData(new byte[10000]);
        ByteArrayOutputStream baos = new ByteArrayOutputStream();
        ObjectOutputStream oos = new ObjectOutputStream(baos);
        oos.writeObject(originalObj);
        oos.close();
        byte[] fullBytes = baos.toByteArray();
        int chunkSize = 1024;
        
        // 模拟接收端收集分片
        Map<Integer, byte[]> chunkMap = new HashMap<>();
        for (int i = 0; i < fullBytes.length; i += chunkSize) {
            int end = Math.min(i + chunkSize, fullBytes.length);
            byte[] chunk = Arrays.copyOfRange(fullBytes, i, end);
            chunkMap.put(i / chunkSize, chunk); // 使用索引作为键
        }

        // 按索引排序并拼接
        List<Byte> reassembledBytesList = new ArrayList<>();
        for (int i = 0; i < chunkMap.size(); i++) {
            if (!chunkMap.containsKey(i)) {
                throw new RuntimeException("Missing chunk " + i);
            }
            for (byte b : chunkMap.get(i)) {
                reassembledBytesList.add(b);
            }
        }

        // 转换为字节数组
        byte[] reassembledBytes = new byte[reassembledBytesList.size()];
        for (int i = 0; i < reassembledBytesList.size(); i++) {
            reassembledBytes[i] = reassembledBytesList.get(i);
        }

        // 反序列化
        ByteArrayInputStream bais = new ByteArrayInputStream(reassembledBytes);
        ObjectInputStream ois = new ObjectInputStream(bais);
        LargeDataObject restoredObj = (LargeDataObject) ois.readObject();
        ois.close();

        // 验证
        System.out.println("Restored object data length: " + restoredObj.getData().length);
    }
}

class Chunk {
    int index;
    byte[] data;
}

class LargeDataObject implements Serializable {
    private byte[] data;
    public void setData(byte[] data) { this.data = data; }
    public byte[] getData() { return data; }
}

该程序首先将原始字节流重新组合成一个连续的字节数组,然后通过 ByteArrayInputStream 和 ObjectInputStream 成功还原了原始对象。关键点在于确保所有分片都已到达且顺序正确。在实际网络环境中,通常需要实现更复杂的协议来处理分片丢失、重复和乱序问题,例如使用序列号、确认机制和重传策略。

如果分片在传输过程中丢失怎么办

如果某个分片在传输过程中丢失,接收端将无法重组出完整的字节流,导致反序列化失败。因为 Java 序列化格式是紧密耦合的,缺少任何字节都会破坏整个流的完整性。因此,必须依赖底层传输协议(如 TCP)或应用层的重传机制来保证分片的可靠交付。TCP 协议本身提供了可靠传输,但如果使用的是 UDP 等不可靠协议,则需要在应用层实现类似 ARQ(自动重传请求)的机制。此外,还可以引入校验和(Checksum)或哈希值来检测分片是否损坏。如果检测到损坏或丢失,接收端可以请求发送端重传特定的分片。另一种策略是使用支持断点续传或分片重试的高级序列化库或框架,但 Java 原生 API 不提供此类功能,开发者需自行实现。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

SoundView
SoundView Hot

SoundView是一款面向跨境电商的视频翻译、配音和本地化 AI 创作平台。

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

13077

2023.06.15

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

10142

2023.07.05

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

8592

2023.07.31

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1364

2023.08.01

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1088

2023.08.02

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

1636

2023.08.02

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

3429

2023.08.02

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

20631

2023.08.03

Navicat创建数据库教程
Navicat创建数据库教程

本专题整理Navicat创建数据库相关教程,介绍新建前的准备、基础设置和创建后的检查方法。内容兼顾入门学习及实际使用需求,帮助用户了解不同数据库类型下的操作差异,为后续建表、保存数据和日常管理提供参考。

0

2026.11.20

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn