最近项目中要使用
进行Excel大数据量写入的功能,以下是alex写的一个简单demo。其中,使用了ThreadPoolExecutor、CountDownLatch。由于POI的sheet中使用TreeMap存储行数据集,所以对Sheet的行创建是非线程安全的,所以进行了同步操作。
package com.alex.frameworkDemo.poi;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.FileOutputStream;
import java.io.IOException;
import java.util.concurrent.CountDownLatch;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;
import org.apache.poi.hssf.usermodel.HSSFCell;
import org.apache.poi.hssf.usermodel.HSSFRow;
import org.apache.poi.hssf.usermodel.HSSFSheet;
import org.apache.poi.hssf.usermodel.HSSFWorkbook;
* 测试POI
* @author alex
public class PoiTest {
public static void main(String[] args) {
multiThreadWrite();
* 使用多线程进行Excel写操作,提高写入效率。
public static void multiThreadWrite() {
* 使用线程池进行线程管理。
ExecutorService es = Executors.newCachedThreadPool();
* 使用计数栅栏
CountDownLatch doneSignal = new CountDownLatch(3);
HSSFWorkbook wb;
try {
wb = new HSSFWorkbook(new FileInputStream("E:\\temp\\poiTest.xls"));
HSSFSheet sheet = wb.getSheetAt(0);
es.submit(new PoiWriter(doneSignal, sheet, 0, 19999));
es.submit(new PoiWriter(doneSignal, sheet, 20000, 39999));
es.submit(new PoiWriter(doneSignal, sheet, 40000, 59999));
* 使用CountDownLatch的await方法,等待所有线程完成sheet操作
doneSignal.await();
es.shutdown();
FileOutputStream os = new FileOutputStream("E:\\temp\\poiTest.xls");
wb.write(os);
os.flush();
os.close();
System.out.println("Excel completed......");
} catch (FileNotFoundException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
} catch (InterruptedException e) {
e.printStackTrace();
* 测试基本的POI写操作
public static void poiBasicWriteTest() {
try {
HSSFWorkbook wb = new HSSFWorkbook(new FileInputStream(
"E:\\temp\\poiTest.xls"));
HSSFSheet sheet = wb.getSheetAt(0);
HSSFRow row = sheet.createRow(0);
HSSFCell contentCell = row.createCell(0);
contentCell.setCellValue("abc");
FileOutputStream os = new FileOutputStream("E:\\temp\\poiTest.xls");
wb.write(os);
os.flush();
} catch (FileNotFoundException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
* sheet的row使用treeMap存储的,是非线程安全的,所以在创建row时需要进行同步操作。
* @param sheet
* @param rownum
* @return
private static synchronized HSSFRow getRow(HSSFSheet sheet, int rownum) {
return sheet.createRow(rownum);
* 进行sheet写操作的sheet。
* @author alex
protected static class PoiWriter implements Runnable {
private final CountDownLatch doneSignal;
private HSSFSheet sheet;
private int start;
private int end;
public PoiWriter(CountDownLatch doneSignal, HSSFSheet sheet, int start,
int end) {
this.doneSignal = doneSignal;
this.sheet = sheet;
this.start = start;
this.end = end;
public void run() {
int i = start;
try {
while (i <= end) {
HSSFRow row = getRow(sheet, i);
HSSFCell contentCell = row.getCell(0);
if (contentCell == null) {
contentCell = row.createCell(0);
contentCell.setCellValue(i + 1);
} catch (Exception e) {
e.printStackTrace();
} finally {
doneSignal.countDown();
System.out.println("start: " + start + " end: " + end
+ " Count: " + doneSignal.getCount());
你需要选择你的Excel题目文件
然后指定生成的Sheet名称或者编号(编号是从下标0开始)
接下来你需要选择一个单选框,指明你上面那个输入框的Sheet是否是根据名称输入的,yes表示是根据Sheet名称,no表示是根据下标生成的
什么都不选择默认,读取第一个Sheet,由于里面模板固定,所以只支持下面这个格式(包括Excel头标题的每一个字符必须完全一致)
然后就是生成存放Word的一个目录,文件名默认根据Excel文件的名称生成,格式为
.docx
因为该项目是基于java编写的,首先需要java
jdk支持,然后下载jar包,进入同级目录,打开cmd,执行
jar包名称
回车即可,下载源码放入Idea里面,启动Main方法即可,另外测试的excel文件和本人自己再项目打成的jar包在下面链接
Excel源文件图片
Word生成图片
由于种种原因,该项目没有很完善,比如说,当路径,sheet等信息输错,仅仅是窗口显
今天是2018.03.22,已经很久没有更新博客了。。这段时间一直挺忙的,也收获很多。最近一个excel导出的任务让我搞了好久,想想踩过的坑,就想上来小结一番。
------------------------------------------------------分割线------------------------------------------------------
最近项目中要使用POI进行Excel大数据量写入的功能,以下是alex写的一个简单demo。其中,使用了ThreadPoolExecutor、CountDownLatch。由于POI的sheet中使用TreeMap存储行数据集,所以对Sheet的行创建是非线程安全的,所以进行了同步操作。
<dependency>
<groupId>cn.afterturn</groupId>
<artifactId>easypoi-spring-boot-starter</artifactId>
<version>4.1.3</ve
import com.learn.entity.Student;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import java
HSSFWorkbook在多线程导出报表时报错的情况处理。
错误情况:本打算5W每条在每个sheet界面异步写入但总是出现线程阻塞。
打开excel ,在写入sheet阻塞界面的最后一个单元格内出现了表头的值。
线程一直在running没有停止。
通过cmd查找出阻塞的具体位置,发现是cell写入时阻塞。
进入方法内一直进入,发现是HahMap.get时导致的死循环。(HashMap 在put会碰到扩容时,会把旧的存储结构转移到新的上面导致死循环)。
想到的3种解决方法,1.采用ConcurrentHas
一、Poi工具类开发心得
1、这几天在做一个excel上传的功能,原有一个jxl,虽然轻便但是只满足了基本功能,只兼容03版本等等,然后这个功能需要对数据进行解析,需要可以配置的那种。大致需求明白了,先实现,然后在想办法优化。
先引入依赖
<dependency>
<groupId>org.apache.poi</groupId>
<artifactId>poi-ooxml</artif
private String prefix = "G:/JAVA资料/";
private String readFilename = prefix + "curblock-笔试-1504_人口、人口密度统计年鉴_20191113.xlsx";
private String writeFilename = prefix + "new.xlsx";