POI和EasyExcel

根据以下学习视频,个人整理的笔记

https://www.bilibili.com/video/BV1Ua4y1x7BK?spm_id_from=333.999.0.0&vd_source=7a8946d22777450e46486d5fd60d8d4d

POI和EasyExcel讲解

常用场景

1、将用户信息导出为Excel表格(导出数据…)

2、将Excel表中的信息录入到网站数据库(习题上传…),大大减轻网站录入量!

开发中经常会涉及到excel的处理,如导出Excel,导入Excel到数据库中!

操作Excel目前比较流行的就是 Apache POI 和阿里巴巴的 EasyExcel

Apache POI

Apache POI 官网:https://poi.apache.org/

Apache POI 比较麻烦

POI和EasyExcel_第1张图片

POI和EasyExcel_第2张图片

easyExcel

easyExcel 官网:https://github.com/alibaba/easyexcel

POI和EasyExcel_第3张图片

EasyExcel 是阿里巴巴开源的一个excel处理框架、以使用简单、节省内存著称

EasyExcel 能大大减少占用内存的主要原因是在解析Excel时没有将文件数据一次性全部加载到内存中,而是从磁盘上一行行读取数据,逐个解析。

下图是EasyExcel和POI在解析Excel时的对比图

POI和EasyExcel_第4张图片

官方文档:https://www.yuque.com/easyexcel/doc/easyexcel

POI-Excel写

03版本和07版的Excel表的生成

新建一个空项目,设置好项目结构,新建一个module(普通maven项目),注意新建的module文件路径是否在这个空项目路径下

导入依赖


<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0modelVersion>

    <groupId>com.kuanggroupId>
    <artifactId>kuang-poiartifactId>
    <version>1.0-SNAPSHOTversion>

    <properties>
        <maven.compiler.source>8maven.compiler.source>
        <maven.compiler.target>8maven.compiler.target>
    properties>

    
    <dependencies>
        
        <dependency>
            <groupId>org.apache.poigroupId>
            <artifactId>poiartifactId>
            <version>3.9version>
        dependency>

        
        <dependency>
            <groupId>org.apache.poigroupId>
            <artifactId>poi-ooxmlartifactId>
            <version>3.9version>
        dependency>

        
        <dependency>
            <groupId>joda-timegroupId>
            <artifactId>joda-timeartifactId>
            <version>2.10.1version>
        dependency>

        
        <dependency>
            <groupId>junitgroupId>
            <artifactId>junitartifactId>
            <version>4.12version>
        dependency>
    dependencies>

project>

03版本和07版的Excel的生成

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileOutputStream;


public class ExcelWriteTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testWrite03() throws Exception {
        // 创建一个03版本的工作簿
        Workbook workbook = new HSSFWorkbook();
        // 创建一个工作表
        Sheet sheet = workbook.createSheet("狂神观众统计表");// "狂神观众统计表" 表名
        // 创建一个行
        Row row1 = sheet.createRow(0);
        // 创建一个单元格
        Cell cell11 = row1.createCell(0);// 第一行第1列
        cell11.setCellValue("今日新增观众");

        Cell cell12 = row1.createCell(1);// 第一行第2列
        cell12.setCellValue(666);

        // 创建第二行
        Row row2 = sheet.createRow(1);
        Cell cell21 = row2.createCell(0);// 第二行第1列
        cell21.setCellValue("统计时间");

        Cell cell22 = row2.createCell(1);// 第二行第2列
        String time = new DateTime().toString("yyyy-MM-dd HH:mm:ss");
        cell22.setCellValue(time);

        // 生成一张表,本质是IO操作
        FileOutputStream fileOutputStream = new FileOutputStream(PATH + "狂神观众统计表03.xls");

        // 输出
        workbook.write(fileOutputStream);

        //关闭流
        fileOutputStream.close();

        System.out.println("狂神观众统计表03.xls 生成完毕!");
    }

    @Test
    public void testWrite07() throws Exception {
        // 创建一个07版本的工作簿
        Workbook workbook = new XSSFWorkbook();
        // 创建一个工作表
        Sheet sheet = workbook.createSheet("狂神观众统计表");// "狂神观众统计表" 表名
        // 创建一个行
        Row row1 = sheet.createRow(0);
        // 创建一个单元格
        Cell cell11 = row1.createCell(0);// 第一行第1列
        cell11.setCellValue("今日新增观众");

        Cell cell12 = row1.createCell(1);// 第一行第2列
        cell12.setCellValue(666);

        // 创建第二行
        Row row2 = sheet.createRow(1);
        Cell cell21 = row2.createCell(0);// 第二行第1列
        cell21.setCellValue("统计时间");

        Cell cell22 = row2.createCell(1);// 第二行第2列
        String time = new DateTime().toString("yyyy-MM-dd HH:mm:ss");
        cell22.setCellValue(time);

        // 生成一张表,本质是IO操作 07版本后缀是xlsx
        FileOutputStream fileOutputStream = new FileOutputStream(PATH + "狂神观众统计表07.xlsx");

        // 输出
        workbook.write(fileOutputStream);

        //关闭流
        fileOutputStream.close();

        System.out.println("狂神观众统计表07.xls 生成完毕!");

    }

}

POI和EasyExcel_第5张图片

POI和EasyExcel_第6张图片

大文件写HSSF(03版本)

缺点:最多只能处理65536行,超过会抛出异常:java.lang.IllegalArgumentException: Invalid row number (65536) outside allowable range (0…65535)

优点:过程中写入缓存,不操作磁盘,最后一次性写入磁盘,速度快

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileNotFoundException;
import java.io.FileOutputStream;


public class ExcelWriteTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testWrite03BigData() throws Exception {

        long begin = System.currentTimeMillis();

        // 创建一个工作簿
        Workbook workbook = new HSSFWorkbook();
        // 创建一张表
        Sheet sheet = workbook.createSheet();
        // 写入数据
        for (int rowNum = 0; rowNum < 65536; rowNum++) {
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum < 10; cellNum++) {
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }

        System.out.println("over");
        FileOutputStream fileOutputStream = new FileOutputStream(PATH + "testWrite03BigData.xls");

        workbook.write(fileOutputStream);

        fileOutputStream.close();

        long end = System.currentTimeMillis();

        System.out.println((double) (end-begin)/1000);// 看看花了多少秒

    }
}

大文件写XSSF(07版本)

缺点:写数据时速度非常慢,非常耗内存,也会发生内存溢出,如100万条

优点:可以写较大的数据量,如20万条

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileNotFoundException;
import java.io.FileOutputStream;


public class ExcelWriteTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    // 耗时较长
    @Test
    public void testWrite07BigData() throws Exception {

        long begin = System.currentTimeMillis();

        // 创建一个工作簿
        Workbook workbook = new XSSFWorkbook();
        // 创建一张表
        Sheet sheet = workbook.createSheet();
        // 写入数据
        for (int rowNum = 0; rowNum < 65537; rowNum++) {
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum < 10; cellNum++) {
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }

        System.out.println("over");
        FileOutputStream fileOutputStream = new FileOutputStream(PATH + "testWrite07BigData.xlsx");

        workbook.write(fileOutputStream);

        fileOutputStream.close();

        long end = System.currentTimeMillis();

        System.out.println((double) (end-begin)/1000);

    }
}

大文件写SXSSF

优点:可以写非常大的数据量,如100万条甚至更多条,写数据速度快,占用更少的内存

注意:

  • 过程中可能会产生临时文件,需要清理临时文件
  • 默认有100条记录被保存在内存中,如果超过这数量,则最前面的数据被写入临时文件
  • 如果想自定义内存中数据的数量,可以使用new SXSSFWorkbook(数量)
package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.streaming.SXSSFWorkbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileOutputStream;


public class ExcelWriteTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testWrite07BigDataS() throws Exception {

        long begin = System.currentTimeMillis();

        // 创建一个工作簿
        Workbook workbook = new SXSSFWorkbook();
        // 创建一张表
        Sheet sheet = workbook.createSheet();
        // 写入数据
        for (int rowNum = 0; rowNum < 100000; rowNum++) {
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum < 10; cellNum++) {
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }

        System.out.println("over");
        FileOutputStream fileOutputStream = new FileOutputStream(PATH + "testWrite07BigDataS.xlsx");

        workbook.write(fileOutputStream);

        fileOutputStream.close();

        // 清除临时文件!
        ((SXSSFWorkbook)workbook).dispose();

        long end = System.currentTimeMillis();

        System.out.println((double) (end-begin)/1000);

    }
}

SXSSFWorkbook 来自官方的解释:实现“BigGridDemo”策略的流式XSSFWorkbook版本。这允许写入非常大的文件而不会耗尽内存,因为任何时候只有可配置的行部分被保存在内存中。

请注意,仍然可能会消耗大量内存,这些内存基于您正在使用的功能,例如合并区域,注释…仍然只存储在内存中,因为如果广泛使用,可能需要大量内存

POI-Excel读

03版本Excel表的读取

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileInputStream;
import java.io.FileOutputStream;

public class ExcelReadTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testRead03() throws Exception {

        // 获取文件流
        FileInputStream fileInputStream = new FileInputStream(PATH + "\\kuang-poi狂神观众统计表03.xls");

        // 读取工作簿
        Workbook workbook = new HSSFWorkbook(fileInputStream);

        // 拿到表
        Sheet sheet = workbook.getSheetAt(0);// 获取第0张表

        // 拿到行
        Row row = sheet.getRow(0);

        // 拿到列
        Cell cell = row.getCell(1);

        // 注意:读取表中的值时,一定要注意表数据的类型
        // cell.getStringCellValue() 单元格数据必须是字符串类型
        // System.out.println(cell.getStringCellValue());// cell.getStringCellValue()得到表格数据

        // cell.getNumericCellValue() 单元格数据必须是数字
        System.out.println(cell.getNumericCellValue());


        fileInputStream.close();

    }
}

07版本Excel表的读取

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileInputStream;
import java.io.FileOutputStream;

public class ExcelReadTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testRead07() throws Exception {

        // 获取文件流
        FileInputStream fileInputStream = new FileInputStream(PATH + "\\kuang-poi狂神观众统计表07.xlsx");

        // 读取工作簿
        Workbook workbook = new XSSFWorkbook(fileInputStream);

        // 拿到表
        Sheet sheet = workbook.getSheetAt(0);// 获取第0张表

        // 拿到行
        Row row = sheet.getRow(0);

        // 拿到列
        Cell cell = row.getCell(1);

        // 注意:读取表中的值时,一定要注意表数据的类型
        // cell.getStringCellValue() 单元格数据必须是字符串类型
        // System.out.println(cell.getStringCellValue());// cell.getStringCellValue()得到表格数据

        // cell.getNumericCellValue() 单元格数据必须是数字
        System.out.println(cell.getNumericCellValue());


        fileInputStream.close();

    }
}

读取不同的数据类型(难点)

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFCell;
import org.apache.poi.hssf.usermodel.HSSFDateUtil;
import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.util.Date;

public class ExcelReadTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testCellType() throws Exception {

        // 获取文件流
        FileInputStream fileInputStream = new FileInputStream(PATH + "\\明细表.xls");

        // 读取工作簿
        Workbook workbook = new HSSFWorkbook(fileInputStream);

        // 拿到表
        Sheet sheet = workbook.getSheetAt(0);

        // 获取标题行内容
        Row rowTitle = sheet.getRow(0);

        if (rowTitle!=null) {
            // 获取这行有多少列
            int cellCount = rowTitle.getPhysicalNumberOfCells();
            // 循环得到这一行的所有数据
            for (int cellNum = 0; cellNum < cellCount; cellNum++) {

                Cell cell = rowTitle.getCell(cellNum);
                if (cell!=null) {
                    int cellType = cell.getCellType();
                    String stringCellValue = cell.getStringCellValue();// 这里标题行数据的类型全部为字符串
                    System.out.print(stringCellValue+" | ");
                }
            }
            System.out.println();
        }

        // 获取表中的内容,即获取除了第一行的内容
        int physicalNumberOfRows = sheet.getPhysicalNumberOfRows();// 获取表中总共有多少行
        for (int rowNum = 1; rowNum < physicalNumberOfRows; rowNum++) {// 从第二行开始循环,即获取除了第一行的内容

            Row rowData = sheet.getRow(rowNum);

            if (rowData!=null) {

                // 根据标题行获取多少列
                int cellCount = rowTitle.getPhysicalNumberOfCells();

                // 循环得到这一行的所有数据
                for (int cellNum = 0; cellNum < cellCount; cellNum++) {

                    Cell cell = rowData.getCell(cellNum);

                    if (cell!=null) {

                        int cellType = cell.getCellType();

                        String cellValue = "";

                        switch (cellType) {// 匹配列的数据类型
                            case HSSFCell.CELL_TYPE_STRING:// 字符串
                                cellValue = cell.getStringCellValue();
                                break;
                            case HSSFCell.CELL_TYPE_BOOLEAN:// 布尔值
                                cellValue = String.valueOf(cell.getBooleanCellValue());
                                break;
                            case HSSFCell.CELL_TYPE_BLANK://break;
                            case HSSFCell.CELL_TYPE_NUMERIC:// 数字(数字又分为日期和普通数字)
                                if (HSSFDateUtil.isCellDateFormatted(cell)){// 如果为日期
                                    Date date = cell.getDateCellValue();
                                    cellValue = new DateTime(date).toString("yyyy-MM-dd");
                                } else {
                                    // 不是日期格式的话,需要防止数字过长
                                    cell.setCellType(HSSFCell.CELL_TYPE_STRING);// 转换为字符串输出
                                    cellValue = cell.toString();
                                }
                                break;
                            case HSSFCell.CELL_TYPE_ERROR:// 错误的数据类型
                                break;

                        }
                        System.out.print(cellValue+" | ");
                    }
                }

                System.out.println();
            }
        }

        fileInputStream.close();
    }
}

POI和EasyExcel_第7张图片

需要注意类型转换问题;

以上代码可以自己提取成工具类,把文件流作为参数即可!

计算公式

package com.kuang;

import org.apache.poi.hssf.usermodel.HSSFCell;
import org.apache.poi.hssf.usermodel.HSSFDateUtil;
import org.apache.poi.hssf.usermodel.HSSFFormulaEvaluator;
import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.ss.usermodel.*;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;
import org.joda.time.DateTime;
import org.junit.Test;

import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.util.Date;

public class ExcelReadTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    @Test
    public void testFormula() throws Exception {
        // 获取文件流
        FileInputStream fileInputStream = new FileInputStream(PATH + "\\公式.xls");
        // 读取工作簿
        Workbook workbook = new HSSFWorkbook(fileInputStream);

        Sheet sheet = workbook.getSheetAt(0);

        Row row = sheet.getRow(4);
        Cell cell = row.getCell(0);

        // 拿到计算公式
        FormulaEvaluator formulaEvaluator = new HSSFFormulaEvaluator((HSSFWorkbook) workbook);

        // 输出单元格的内容
        int cellType = cell.getCellType();
        switch (cellType){
            case Cell.CELL_TYPE_FORMULA:// 公式类型

                String cellFormula = cell.getCellFormula();// 得到计算公式
                System.out.println(cellFormula);

                // 计算
                CellValue evaluate = formulaEvaluator.evaluate(cell);// 得到计算结果

                String cellValue = evaluate.formatAsString();
                System.out.println(cellValue);
                break;
        }

    }
}

POI和EasyExcel_第8张图片

EasyExcel操作

导入easyexcel依赖

<dependency>
    <groupId>com.alibabagroupId>
    <artifactId>easyexcelartifactId>
    <version>3.1.0version>
dependency>

pom.xml的代码


<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0modelVersion>

    <groupId>com.kuanggroupId>
    <artifactId>kuang-poiartifactId>
    <version>1.0-SNAPSHOTversion>

    <properties>
        <maven.compiler.source>8maven.compiler.source>
        <maven.compiler.target>8maven.compiler.target>
    properties>

    
    <dependencies>
        
    	
        <dependency>
            <groupId>com.alibabagroupId>
            <artifactId>easyexcelartifactId>
            <version>3.1.0version>
        dependency>


        
        
        
        
        
        

        
        
        
        
        
        

        
        <dependency>
            <groupId>joda-timegroupId>
            <artifactId>joda-timeartifactId>
            <version>2.10.1version>
        dependency>

        
        <dependency>
            <groupId>junitgroupId>
            <artifactId>junitartifactId>
            <version>4.12version>
        dependency>

        <dependency>
            <groupId>org.projectlombokgroupId>
            <artifactId>lombokartifactId>
            <version>1.18.22version>
        dependency>

        <dependency>
            <groupId>com.alibabagroupId>
            <artifactId>fastjsonartifactId>
            <version>1.2.80version>
        dependency>
    dependencies>

project>

实体类

package com.kuang.easy;

import com.alibaba.excel.annotation.ExcelIgnore;
import com.alibaba.excel.annotation.ExcelProperty;

import lombok.Data;
import java.util.Date;

// 自己导入lombok依赖
@Data
public class DemoData {
    @ExcelProperty("字符串标题")
    private String string;
    @ExcelProperty("日期标题")
    private Date date;
    @ExcelProperty("数字标题")
    private Double doubleData;
    /**
     * 忽略这个字段
     */
    @ExcelIgnore
    private String ignore;
}
package com.kuang.easy;

import com.alibaba.excel.EasyExcel;
import com.alibaba.excel.util.ListUtils;
import org.junit.Test;

import java.util.Date;
import java.util.List;

public class EasyTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    private List<DemoData> data() {
        List<DemoData> list = ListUtils.newArrayList();
        for (int i = 0; i < 10; i++) {
            DemoData data = new DemoData();
            data.setString("字符串" + i);
            data.setDate(new Date());
            data.setDoubleData(0.56);
            list.add(data);
        }
        return list;
    }

    // 根据list的数据,写入Excel
    /**
     * 最简单的写
     * 

* 1. 创建excel对应的实体对象 参照{@link DemoData} *

* 2. 直接写即可 */ @Test public void simpleWrite() { // 注意 simpleWrite在数据量不大的情况下可以使用(5000以内,具体也要看实际情况),数据量大参照 重复多次写入 // 写法1 JDK8+ // since: 3.0.0-beta1 String fileName = PATH + "EasyTest.xlsx"; // 这里 需要指定写用哪个class去写,然后写到第一个sheet,名字为模板 然后文件流会自动关闭 // 如果这里想使用03 则 传入excelType参数即可 EasyExcel.write(fileName, DemoData.class) .sheet("模板")// 表名 .doWrite(() -> {// 写数据 // 分页查询数据 return data(); }); } }

package com.kuang.easy;

import com.alibaba.excel.annotation.ExcelIgnore;
import com.alibaba.excel.annotation.ExcelProperty;

import lombok.Data;
import java.util.Date;

// 自己导入lombok依赖
@Data
public class DemoData {
    @ExcelProperty("字符串标题")
    private String string;
    @ExcelProperty("日期标题")
    private Date date;
    @ExcelProperty("数字标题")
    private Double doubleData;
    /**
     * 忽略这个字段
     */
    @ExcelIgnore
    private String ignore;
}
package com.kuang.easy;

import java.util.List;

/**
 * 假设这个是你的DAO存储。当然还要这个类让spring管理,当然你不用需要存储,也不需要这个类。
 **/
public class DemoDAO {
    public void save(List<DemoData> list) {
        // 持久化操作
        // 如果是mybatis,尽量别直接调用多次insert,自己写一个mapper里面新增一个方法batchInsert,所有数据一次性插入
    }
}
package com.kuang.easy;

import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.read.listener.ReadListener;
import com.alibaba.excel.util.ListUtils;
import com.alibaba.fastjson.JSON;
import lombok.extern.slf4j.Slf4j;

import java.util.List;

// 有个很重要的点 DemoDataListener 不能被spring管理,要每次读取excel都要new,然后里面用到spring可以构造方法传进去
@Slf4j
public class DemoDataListener implements ReadListener<DemoData> {

    /**
     * 每隔5条存储数据库,实际使用中可以100条,然后清理list ,方便内存回收
     */
    private static final int BATCH_COUNT = 100;
    /**
     * 缓存的数据
     */
    private List<DemoData> cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
    /**
     * 假设这个是一个DAO,当然有业务逻辑这个也可以是一个service。当然如果不用存储这个对象没用。
     */
    private DemoDAO demoDAO;

    public DemoDataListener() {
        // 这里是demo,所以随便new一个。实际使用如果到了spring,请使用下面的有参构造函数
        demoDAO = new DemoDAO();
    }

    /**
     * 如果使用了spring,请使用这个构造方法。每次创建Listener的时候需要把spring管理的类传进来
     *
     * @param demoDAO
     */
    public DemoDataListener(DemoDAO demoDAO) {
        this.demoDAO = demoDAO;
    }

    /**
     * 这个每一条数据解析都会来调用
     *
     * @param data    one row value. Is is same as {@link AnalysisContext#readRowHolder()}
     * @param context
     */
    // 读取数据会执行这个invoke方法
    // DemoData 类型
    // AnalysisContext 分析上下文
    @Override
    public void invoke(DemoData data, AnalysisContext context) {

        System.out.println(JSON.toJSONString(data));

        log.info("解析到一条数据:{}", JSON.toJSONString(data));
        cachedDataList.add(data);
        // 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
        if (cachedDataList.size() >= BATCH_COUNT) {
            saveData();// 持久化操作
            // 存储完成清理 list
            cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
        }
    }

    /**
     * 所有数据解析完成了 都会来调用
     *
     * @param context
     */
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
        // 这里也要保存数据,确保最后遗留的数据也存储到数据库
        saveData();
        log.info("所有数据解析完成!");
    }

    /**
     * 加上存储数据库
     */
    private void saveData() {
        log.info("{}条数据,开始存储数据库!", cachedDataList.size());
        demoDAO.save(cachedDataList);
        log.info("存储数据库成功!");
    }


}
package com.kuang.easy;

import com.alibaba.excel.EasyExcel;
import com.alibaba.excel.read.listener.PageReadListener;
import com.alibaba.excel.util.ListUtils;
import com.alibaba.fastjson.JSON;
import org.junit.Test;

import java.util.Date;
import java.util.List;

public class EasyTest {

    String PATH = "D:\\ideaProjects\\POI和EasyExcel\\kuang-poi";

    /**
     * 最简单的读
     * 

* 1. 创建excel对应的实体对象 参照{@link DemoData} *

* 2. 由于默认一行行的读取excel,所以需要创建excel一行一行的回调监听器,参照{@link DemoDataListener} *

* 3. 直接读即可 */ @Test public void simpleRead() { // 写法1:JDK8+ ,不用额外写一个DemoDataListener // since: 3.0.0-beta1 String fileName = PATH + "EasyTest.xlsx"; // 这里 需要指定读用哪个class去读,然后读取第一个sheet 文件流会自动关闭 // 这里每次会读取3000条数据 然后返回过来 直接调用使用数据就行 EasyExcel.read(fileName, DemoData.class, new DemoDataListener()).sheet().doRead(); } }

总结

固定套路:

1、写入,固定类格式进行写入

2、读取,根据监听器设置的规则进行读取

多看官方文档!官方文档写得很清楚!

小结-学习方式

了解,面向对象的思想,学会面向接口编程!

理解使用API

你可能感兴趣的:(Computer,apache)