转自https://blog.csdn.net/happyljw/article/details/52809244 谢谢大神指导～！ 用过POI的人都知道，在POI以前的版本中并不支持大数据量的处理，如果数据量过多还会常报OOM错误，这时候调整JVM的配置参数也不是一个好对策（注：jdk ...

前提 这篇文章不是标题党，下文会通过一个仿真例子分析如何优化百万级别数据Excel导出。 笔者负责维护的一个数据查询和数据导出服务是一个相对远古的单点应用，在上一次云迁移之后扩展为双节点部署，但是发现了服务经常因为大数据量的数据导出频繁Full GC，导致应用假死无法响应外部的请求 ...

先看结果吧，这只是测试其中有很多因数影响了性能。 表总数为：7千多万，测试导出100万 表字段有17个字段 最终excel大小有60多兆 总耗时：126165毫秒 差不多2分多钟 其核心简单来说就是分批写入，就是分页 ...

一、思路 Java使用POI导出Excel，采用2万一个Excel，生成后放到服务器某路径文件夹下，循环查询并生成直到数据全部导出到Excel后，打包成Zip压缩包并循环删除已被打包的Excel，打包完成后弹窗下载。 目前的效率如下： 1591550 15分钟 999650 8分钟 ...

百万级别数据表，进行有条件的数据删除，这个时候采用delete from的一次性删除的方法是很不明智的： 1、delete操作会被完整记录到日志里，它需要大量空间和时间 2、如果删除中间发生中断，一切删除会回滚（在一个事务里） 3、同时删除多行，记录上的锁也许会被提升为排它表锁，从而阻碍操作 ...

近日做项目过程中，遇到一个客户要求将每个月产生的交易明细数据快速导出到excel，方便他们财务人员在excel中查找原因和分析结果。现将实现方法共享出来，原来速度导出这么多数据要半小时，现在用这速度提高了一倍，有兴趣的可以自己试下。如果觉得有用，大家帮我点个赞!你们的鼓励是我们更新代码的动力 ...

百万级 字段选择优化 表字段 not null，因为 null 值很难查询优化且占用额外的索引空间，推荐默认数字 0。 数据状态类型的字段，比如 status, type 等等，尽量不要定义负数，如 -1。因为这样可以加上 UNSIGNED，数值容量就会扩大一倍。 可以的话 ...

个人博客网：https://wushaopei.github.io/ (你想要这里多有) 这里先进行造数据，向redis中写入五百万条数据，具体方式有如下三种： 方法一：（Lua 脚本） vim redis_load.lua #!/bin/bash for i ...