百万级数据高效导出EXCEL

一.HSSF，XSSF和SXSSF的区别

HSSF是POI工程对Excel 97-2007  (.xls) 文件操作的纯Java实现
XSSF是POI工程对Excel 2007 OOXML (.xlsx) 文件操作的纯Java实现

从POI 3.8版本开始，提供了一种基于XSSF的低内存占用的API----SXSSF

SXSSF实现了一套自动刷入数据的机制。当数据数量达到一定程度时(用户可以自己设置这个限制)。像文本中刷入部分数据。这样就缓解了程序运行时候的压力。达到高效的目的。

二.百万级数据高效导出EXCEL 方案

1.这种数据量的导出，肯定是异步的方式，将内存数据异步生成excel文件，存储到服务器中（根据特定规则命名）；

  此过程采用 POI 3.8的 SXSSF 进行写excel操作

2.从服务器下载excel文件

 

  异步处理方式：

//根据条件拿到数据集
List orderExportList = orderQueryService.getOrderList(orderSearchBean);
//创建线程池
int size = orderExportList.size();
int count = size / 5;
ExecutorService executorService = Executors.newFixedThreadPool(5);
//future存储器
List>> futureList = new ArrayList>>();
//截取开启5个线程分起任务完善信息
for (int i = 0; i < 5; i++)
{
	int start = count * i;
	int end = count * (i + 1);
	if (i == 5 - 1)
	{
		end = size;
	}
	@SuppressWarnings("unchecked")
	Future> future = executorService.submit(new RunOrderThread(orderQueryService,
			orderExportList.subList(start, end)));
	// 每个异步计算的结果存放在future存储器中
	futureList.add(future);
}
//启动异步计算结果输出线程，该线程扫描异步计算Futrue的状态，如果已经完成，则输出异步计算结果
ExportThread export = new ExportThread(this, futureList, fileName, staffid);
Thread resultThread = new Thread(export);
resultThread.start();

 SXSSF 方式写excel：