讲师中心 微信公众号
AI工具推荐 视频效率加速

如何大幅提升Java处理3万行Excel数据的性能

冬芳姑娘_8785

冬芳姑娘_8785

发布时间:2025-12-30 23:28:13

|

392人浏览过

|

来源于php中文网

原创

如何大幅提升Java处理3万行Excel数据的性能

本文针对使用apache poi逐行修改excel单元格导致极慢(每行1秒、总耗时超1小时)的问题,指出核心瓶颈在于**循环内反复打开/关闭文件流和重复调用`workbook.write()`**,并提供高效、安全、可落地的优化方案。

在处理包含30,000+记录的Excel文件(如formatted.xlsx)时,原始Java代码存在严重性能反模式:每次循环都执行FileOutputStream的创建、workbook.write(outFile)的全量写入、以及流关闭操作。由于XSSF(.xlsx)基于ZIP压缩包结构,workbook.write()并非增量更新,而是每次重建整个OPC容器——这意味着每处理1行就重新序列化全部已加载的Sheet、Style、SharedStrings等对象,I/O开销呈线性爆炸式增长,直接导致单行耗时高达1秒以上。

✅ 正确做法是:“读—改—写”三阶段分离,且仅执行一次物理写入。优化后的核心逻辑如下:

public static void main(String[] args) throws IOException {
    String filePath = "formatted.xlsx";

    // 1. 一次性读取(注意:使用 try-with-resources 自动释放)
    try (FileInputStream file = new FileInputStream(filePath);
         XSSFWorkbook workbook = new XSSFWorkbook(file)) {

        XSSFSheet sheet = workbook.getSheetAt(0);
        int rowCount = sheet.getLastRowNum();

        // 2. 内存中批量修改(无I/O)
        for (int i = 1; i <= rowCount; i++) {
            XSSFRow row = sheet.getRow(i);
            if (row == null) continue; // 跳过空行

            Cell descriptionCell = row.getCell(3); // 第4列(索引3)
            if (descriptionCell != null && descriptionCell.getCellType() == CellType.STRING) {
                String original = descriptionCell.getStringCellValue();
                String modified = original.replace("#", "-");
                descriptionCell.setCellValue(modified);
            }
        }

        // 3. 一次性写出(关键!移出循环)
        try (FileOutputStream outFile = new FileOutputStream(filePath)) {
            workbook.write(outFile);
        }

        System.out.println("✅ 更新完成:共处理 " + rowCount + " 行");
    }
}

⚠️ 关键注意事项:

pyspark-to-excel
pyspark-to-excel

将 PySpark .show() 输出转为 Tab 分隔文本,方便粘贴 Excel。触发词:pyspark、数据转excel、表格整理、venus数据、show输出、复制到excel、数据格式化。

下载
  • 绝不循环内写文件:workbook.write() 是重量级操作,必须置于循环外;
  • 显式检查空行与空单元格:避免NullPointerException(如row.getCell(3)返回null);
  • 校验单元格类型:getStringCellValue()仅适用于CellType.STRING,否则抛异常;
  • 使用try-with-resources:确保FileInputStream和FileOutputStream自动关闭,防止资源泄漏;
  • 内存考量:30K行xlsx在内存中约占用50–100MB,现代JVM默认配置可轻松承载;若数据量达百万级,建议切换至SXSSFWorkbook(流式写入)或改用CSV处理。

? 进阶提示:若需更高性能(如并发处理多Sheet、正则替换、跨列逻辑),可结合ExecutorService分片处理,但务必保证Workbook线程不安全——每个线程应操作独立XSSFWorkbook实例。

立即学习“Java免费学习笔记(深入)”;

经此优化,处理30,000行Excel的总耗时通常可从1小时+降至3–10秒内,性能提升超300倍,真正实现高效、健壮的企业级Excel批处理。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5299

2023.08.02

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

529

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1658

2024.03.01

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3578

2023.08.10

excel对比两列数据异同
excel对比两列数据异同

Excel作为数据的小型载体,在日常工作中经常会遇到需要核对两列数据的情况,本专题为大家提供excel对比两列数据异同相关的文章,大家可以免费体验。

4601

2023.07.25

excel重复项筛选标色
excel重复项筛选标色

excel的重复项筛选标色功能使我们能够快速找到和处理数据中的重复值。本专题为大家提供excel重复项筛选标色的相关的文章、下载、课程内容,供大家免费下载体验。

2776

2023.07.31

excel复制表格怎么复制出来和原来一样大
excel复制表格怎么复制出来和原来一样大

本专题为大家带来excel复制表格怎么复制出来和原来一样大相关文章,帮助大家解决问题。

2580

2023.08.02

excel表格斜线一分为二
excel表格斜线一分为二

在Excel表格中,我们可以使用斜线将单元格一分为二。本专题为大家带来excel表格斜线一分为二怎么弄的相关文章,希望可以帮到大家。

1444

2023.08.02

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

120

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Excel 教程
Excel 教程

共162课时 | 43.5万人学习

成为PHP架构师-自制PHP框架
成为PHP架构师-自制PHP框架

共28课时 | 3.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn