xl_echo编辑整理,欢迎转载,转载请声明文章来源。欢迎添加echo微信(微信号:t2421499075)交流学习。 百战不败,依不自称常胜,百败不颓,依能奋力前行。——这才是真正的堪称强大!!

---

##### 阅读建议:如果系统没有做过相关导入导出,又需要这个量级的可以直接阅读底部的poi-ooxm的应用

> excel使用poi直接导出最大值是多少?估计很多人不会关注这个问题,因为很少有业务要求excel直接导出上万条数据,更甚者可能没有听过excel直接导出100w条数据。这里给大家介绍一个引用场景和博主采坑的经历。

#### 需求描述
公司要求实现一个银行流水的导出功能,看上去就是一个简单的按钮,但是这个需求有几点要求:
- 导出的文件格式需要为xlsx
- 每次导出最低量为5w条,且为一个表
- 导出的时候需要以文件下载的形式在浏览器下载

> 楼主开发环境:jdk1.8, idea2018.1,springboot1.5x,dubbox

#### 对于poi-3.9的一次尝试
刚开始的时候,没有过多的关注5w条这个数量,直接使用的poi-3.9。在整个开发过程中基本没有碰到问题。在测试的时候,碰到了一个不能满足需求的问题。当我直接下载5w条的时候,程序直接报错。经过不断的测试,发现3.9的直接使用,最高下载值为6000+(这个最高值和电脑性能有一定的关系,不过出入不会很大)。

###### 测试结论poi-3.9的天花板 6000+

> 很明显上面的尝试不能做出与需求相关的功能,经过百度,发现easyexcel是一个不错的解决方案。

#### 对于easyexcel的一次尝试
导入的easyexcel为
```xml

com.alibaba
easyexcel
1.1.1

```

使用该依赖的时候,我参考了以为博主的代码,代码地址为:https://blog.csdn.net/qq_35206261/article/details/88579151。当我将他的百万行级别的解决方案搬到我的项目中的时候,发现一切好像没有问题。但是当我启动的时候发现一直报错java.lang.NoSuchMethodError: org.apache.poi.ss.usermodel.Font.setBold(Z)V。(这里的错误来源于公司项目原有的项目导入依赖冲突,如果没有做过导入导出相关功能的应该不会出现)。经过排查发现,问题出现在依赖上面。公司原本是有导入和导出功能的

引入的依赖如下:
```xml

org.apache.poi
poi-ooxml
3.9

```

冲突如下图所示:
![图1](https://img-blog.csdnimg.cn/20190730172303517.png)

##### 坑一poi-ooxml没有向下兼容
点击进入easyexcel的依赖发现,它的底层是依赖的poi3.17的版本。当我一直以为poi是能够向下兼容的时候,最终每次启动和编译的时候出现的问题都指向了并没有向下兼容。
底层的poi-ooxml版本为3.17,如图所示
![图2](https://img-blog.csdnimg.cn/20190730172314831.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3hsZWNobw==,size_16,color_FFFFFF,t_70)

这个时候我们可以如果还要去使用easyexcel,那我们需要更改版本或者解决poi-ooxml的版本兼容问题。

> 经过不兼容问题之后,看公司原有poi-ooxml的应用于是决定使用poi-ooxml的解决方案。

#### poi-ooxml的应用
经过以上几个坑之后,于是决定使用poi-ooxml的3.9版本能够兼容的解决方案,百度之后发现有一个以3.8版本基础的应用。经过上面的不兼容之后,还是决定试一试。于是采用了该博主文章中的一段代码,文章地址:https://blog.csdn.net/happyljw/article/details/52809244。

这篇文章中描述了一个思路,同时也给出了一段博主提供的实现代码,相对来说,如果作为测试问题不大,最后根据需求进行调整,修改了部分实现的步骤,同时也新增了一些新的实现和限制。代码如下:
```java
@ResponseBody
@RequestMapping(value = "/exportDataMoreThan1000")
public void readMoreThan1000RowBySheet(@RequestParam(value = "start") Integer start,
@RequestParam(value = "limit") Integer limit,
HttpServletResponse response) throws Exception {
//内存中只创建100个对象,写临时文件,当超过100条,就将内存中不用的对象释放。
Workbook wb = new SXSSFWorkbook(100);
//工作表对象
final Sheet[] sheet = {null};
//行对象
final Row[] nRow = {null};
//列对象
final Cell[] nCell = {null};
//总行号
final int[] rowNo = {0};
//页行号
final int[] pageRowNo = {0};

List list = new ArrayList(50000);
//数据源
list = BankServer.getList();
list.forEach(it -> {
if (rowNo[0] % 10001 == 0) {
sheet[0] = wb.createSheet("我的第" + (rowNo[0] / 10001 + 1) + "个工作簿");
sheet[0] = wb.getSheetAt(rowNo[0] / 10001);
//每当新建了工作表就将当前工作表的行号重置为0
pageRowNo[0] = 0;
}
rowNo[0]++;
nRow[0] = sheet[0].createRow(pageRowNo[0]++);
//这一步很关键,如果没有就没有表头。
if (pageRowNo[0] == 1) {
for (int j = 0; j

实现万行级excel导出---poi--ooxm的应用和采坑的更多相关文章

  1. 工具类--Excel 导出poi

    实现功能 --批量导出excel 文件,配置一个sheet多少条数据,根据查询数据量的多少确定生成几个sheet页. pom 文件导入ExcelUtils工具包,依赖于poi包. <!-- ht ...

  2. 基于ABP和Magicodes实现Excel导出操作

      前端使用的vue-element-admin框架,后端使用ABP框架,Excel导出使用的Magicodes.IE.Excel.Abp库.Excel导入和导出操作几乎一样,不再介绍.文本主要介绍E ...

  3. 转:POI操作Excel导出

    package com.rd.lh.util.excel; import java.beans.PropertyDescriptor; import java.io.FileOutputStream; ...

  4. Ireport 报表导出 Poi + ireport 导出pdf, word ,excel ,htm

    Ireport 报表导出 Poi + ireport 导出pdf, doc ,excel ,html 格式 下面是报表导出工具类reportExportUtils 需要导出以上格式的报表 只需要调用本 ...

  5. SpringBoot加Poi仿照EasyPoi实现Excel导出

    POI提供API给Java程序对Microsoft Office格式档案读和写的功能,详细功能可以直接查阅API,因为使用EasyPoi过程中总是缺少依赖,没有搞明白到底是什么坑,索性自己写一个简单工 ...

  6. 基于springboot跟poi封装的最便捷的excel导出

    发布时间:2018-11-15   技术:springboot1.5.6 + maven3.0.5 + jdk1.8   概述 Springboot最便捷的Excel导出,只需要一个配置文件即可搞定 ...

  7. Apache POI实现excel导出

    链接:http://poi.apache.org/ Excel数据导出步骤: 使用poi 完成账户数据的导出功能 导入poi  jar包并添加到classpath中 1.查询数据 2.定义导出头 St ...

  8. java反射学习之二万能EXCEL导出

    一.EXCEL导出的实现过程 假设有一个对象的集合,现在需要将此集合内的所有对象导出到EXCEL中,对象有N个属性:那么我们实现的方式是这样的: 循环这个集合,在循环集合中某个对象的所有属性,将这个对 ...

  9. Atitit.excel导出 功能解决方案 php java C#.net版总集合.doc

    Atitit.excel导出 功能解决方案 php java C#.net版总集合.docx 1.1. Excel的保存格式office2003 office2007/2010格式1 1.2. 类库选 ...

随机推荐

  1. vue 开发webapp 手机返回键 退出问题

    vue 开发webapp 手机返回键 退出问题 mui进行手机物理键的监听 首先安装 vue-awesome-mui npm i vue-awesome-mui 在main.js注册 在index.h ...

  2. Spring 5.x 、Spring Boot 2.x 、Spring Cloud 与常用技术栈整合

    项目 GitHub 地址:https://github.com/heibaiying/spring-samples-for-all 版本说明: Spring: 5.1.3.RELEASE Spring ...

  3. 预习初三物理电学部分的心得体会&知识梳理(持续更新)

    DAY 1 一.摩擦起电 用摩擦的方式使两个不同的物体带电的现象. 二.带电体 如果一个物体能够吸引轻小物体,我们就说这个物体带电或者说带了电荷. (注:吸引轻小物体是作用效果,带电体对任何物体都有吸 ...

  4. 漫谈Redis分布式锁实现

    在Redis上,可以通过对key值的独占来实现分布式锁,表面上看,Redis可以简单快捷通过set key这一独占的方式来实现分布式锁,也有许多重复性轮子,但实际情况并非如此.总得来说,Redis实现 ...

  5. java虚拟机-简介

    一.什么是JVM JVM是Java Virtual Machine(Java虚拟机)的缩写,JVM是一种用于计算设备的规范,它是一个虚构出来的计算机,是通过在实际的计算机上仿真模拟各种计算机功能来实现 ...

  6. 【全网首发】使用vs2017+qt5.12.4编译64位debug和release的qgis3.4.9

    一.摘要: 搜索网络没有发现一篇文章完整的介绍如何编译qgis3.4.x的debug版本,官方的指导也长时间不再更新. 所以前前后后花了4天搞定qgis的debug编译,并成功运行,废话不多说,直接上 ...

  7. python数据库查询转dataframe

    1. 场景描述 python环境下需要从greenplum/postgresql中,获取算法执行的数据,但是从数据库中查询出来是数组格式的,算法无法使用,需要转换为dataframe格式. 2. 解决 ...

  8. 算法导论--最小生成树(Kruskal和Prim算法)

    转载出处:勿在浮沙筑高台http://blog.csdn.net/luoshixian099/article/details/51908175 关于图的几个概念定义: 连通图:在无向图中,若任意两个顶 ...

  9. ASP.NET 前端数据绑定---<%#%>及Eval()的使用

    ASP.NET 前端html代码中会经常出现的<%%>的代码,里面的文本其实就是不能直接输出到客户端浏览器的文本,是需要服务器解释的. 在ASP中,<%%>里面的文本是vbsc ...

  10. Mask-RCNN:教你如何制作自己的数据集进行像素级的目标检测

    概述 Mask-RCNN,是一个处于像素级别的目标检测手段.目标检测的发展主要历程大概是:RCNN,Fast-RCNN,Fster-RCNN,Darknet,YOLO,YOLOv2,YOLO3(参考目 ...