0

0

Java POI读取大型Excel文件速度慢如何优化?

聖光之護

聖光之護

发布时间:2025-03-14 08:00:14

|

1318人浏览过

|

来源于php中文网

原创

java poi读取大型excel文件速度慢如何优化?

Java POI处理大型Excel文件效率优化策略

使用Java POI处理大型Excel文件时,常常面临读取速度缓慢的问题,甚至可能导致内存溢出错误。这是因为POI默认将整个文件加载到内存中。本文将介绍两种主流优化方法,有效提升大型Excel文件读取效率。

核心问题:内存占用过高

POI默认加载整个Excel文件到内存,大型文件会导致内存占用过高,严重影响读取速度,甚至引发OutOfMemoryError。因此,需要采用分段读取策略,避免一次性加载整个文件。

立即学习Java免费学习笔记(深入)”;

优化方案:

方案一:使用xlsx-streamer库实现分段读取

xlsx-streamer基于POI,通过分段缓存机制,将数据分批加载到内存,显著降低内存占用。它在创建Workbook对象时使用StreamingReader创建缓冲区,批量读取文件内容。

首先,引入xlsx-streamer和poi-ooxml依赖:

Ajelix
Ajelix

处理Excel和GoogleSheets表格的AI工具

下载

    org.apache.poi
    poi-ooxml
    ${poi.version}


    com.monitorjbl
    xlsx-streamer
    2.1.0

以下代码演示如何使用xlsx-streamer读取大型Excel文件:

public static void readLargeExcel(File file) throws Exception {
    InputStream inputStream = new FileInputStream(file);
    long start = System.currentTimeMillis();
    try (Workbook workbook = StreamingReader.builder()
            .rowCacheSize(10000) // 缓存行数
            .bufferSize(4096)    // 缓冲区大小
            .open(inputStream)) {

        Sheet sheet = workbook.getSheetAt(0);
        log.info("Excel读取完成,耗时:{}毫秒", System.currentTimeMillis() - start);
        for (Row row : sheet) {
            System.out.println("读取第" + row.getRowNum() + "行数据:");
            for (Cell cell : row) {
                System.out.print(cell.getStringCellValue() + " ");
            }
            System.out.println();
        }
        System.out.println("读取结束行数:" + sheet.getLastRowNum());
    }
}

在处理数十万行数据时,此方法能显著缩短读取时间。

方案二:使用EasyExcel库

EasyExcel是阿里巴巴开源的高效Excel处理工具,基于POI进行了优化,有效避免大文件读取内存溢出。它提供简洁的API,方便进行读写操作。

添加EasyExcel依赖:


    com.alibaba
    easyexcel
    3.1.0

以下代码演示如何使用EasyExcel读取Excel文件,提供两种读取方式:对象封装和Map读取:

public static void readExcelByEasyExcel(File file) {
    long start = System.currentTimeMillis();
    List excelDataList = EasyExcel.read(file).head(ExcelData.class).sheet(0).doReadSync();
    excelDataList.forEach(System.out::println);
    log.info("Excel读取完成,耗时:{}毫秒", System.currentTimeMillis() - start);
}

public static void readExcelByEasyExcel1(File file) {
    long start = System.currentTimeMillis();
    List> listMap = EasyExcel.read(file).sheet(0).doReadSync();
    listMap.forEach(x -> System.out.println(JSON.toJSONString(x)));
    log.info("Excel读取完成,耗时:{}毫秒", System.currentTimeMillis() - start);
}

选择哪种方案取决于具体需求和项目环境。xlsx-streamer侧重于POI增强,EasyExcel提供更全面的功能和更友好的API。 根据实际情况选择最合适的方案。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang map内存释放
golang map内存释放

本专题整合了golang map内存相关教程,阅读专题下面的文章了解更多相关内容。

75

2025.09.05

golang map相关教程
golang map相关教程

本专题整合了golang map相关教程,阅读专题下面的文章了解更多详细内容。

36

2025.11.16

golang map原理
golang map原理

本专题整合了golang map相关内容,阅读专题下面的文章了解更多详细内容。

60

2025.11.17

java判断map相关教程
java判断map相关教程

本专题整合了java判断map相关教程,阅读专题下面的文章了解更多详细内容。

42

2025.11.27

excel对比两列数据异同
excel对比两列数据异同

Excel作为数据的小型载体,在日常工作中经常会遇到需要核对两列数据的情况,本专题为大家提供excel对比两列数据异同相关的文章,大家可以免费体验。

1400

2023.07.25

excel重复项筛选标色
excel重复项筛选标色

excel的重复项筛选标色功能使我们能够快速找到和处理数据中的重复值。本专题为大家提供excel重复项筛选标色的相关的文章、下载、课程内容,供大家免费下载体验。

409

2023.07.31

excel复制表格怎么复制出来和原来一样大
excel复制表格怎么复制出来和原来一样大

本专题为大家带来excel复制表格怎么复制出来和原来一样大相关文章,帮助大家解决问题。

562

2023.08.02

excel表格斜线一分为二
excel表格斜线一分为二

在Excel表格中,我们可以使用斜线将单元格一分为二。本专题为大家带来excel表格斜线一分为二怎么弄的相关文章,希望可以帮到大家。

1243

2023.08.02

Golang 网络安全与加密实战
Golang 网络安全与加密实战

本专题系统讲解 Golang 在网络安全与加密技术中的应用,包括对称加密与非对称加密(AES、RSA)、哈希与数字签名、JWT身份认证、SSL/TLS 安全通信、常见网络攻击防范(如SQL注入、XSS、CSRF)及其防护措施。通过实战案例,帮助学习者掌握 如何使用 Go 语言保障网络通信的安全性,保护用户数据与隐私。

2

2026.01.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
RunnerGo从入门到精通
RunnerGo从入门到精通

共22课时 | 1.7万人学习

尚学堂Mahout视频教程
尚学堂Mahout视频教程

共18课时 | 3.2万人学习

Linux优化视频教程
Linux优化视频教程

共14课时 | 3.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号