使用EasyExcel读取excel文件

108 阅读2分钟

1. 引入pom包

<dependency>
	<groupId>com.alibaba</groupId>
	<artifactId>easyexcel</artifactId>
	<version>3.3.2</version>
</dependency>

2. 创建对应数据接收实体类

/**
 * @author ml
 * @date 2023年08月20日 16:12
 */
@Data
public class EasyExcelData implements Serializable {
    private static final long serialVersionUID = 5737618998359421293L;

    private String title;

    private String name;

    private String age;

    private int sex;
}

2. 读取数据

2.1 基础读取方式

@Test
    public void invoke() {
        // 写法1:JDK8+ ,不用额外写一个DemoDataListener
        String fileName = "C:\\Users\\muluo\\Downloads\\easyExcelDemo.xlsx";
        // 这里默认每次会读取100条数据 然后返回过来 直接调用使用数据就行
        // 具体需要返回多少行可以在`PageReadListener`的构造函数设置
        AtomicInteger size = new AtomicInteger();
        EasyExcel.read(fileName, EasyExcelData.class, new PageReadListener<EasyExcelData>(dataList -> {
            for (EasyExcelData demoData : dataList) {
                try {
                    log.info("{} 读取到一条数据{}", size.getAndIncrement(), mapper.writeValueAsString(demoData));
                } catch (JsonProcessingException e) {
                    e.printStackTrace();
                }
            }
        },10)).sheet().doRead();
    }

2.2 自定义Listener 处理

创建Listener 文件

package com.ml.toolkit.excel;

import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.read.listener.ReadListener;
import com.alibaba.excel.util.ListUtils;
import com.fasterxml.jackson.databind.ObjectMapper;
import lombok.SneakyThrows;
import lombok.extern.slf4j.Slf4j;

import java.util.List;

/**
 * @author hxd
 * @date 2023年08月20日 16:16
 */
@Slf4j
public class DemoDataListener implements ReadListener<EasyExcelData> {

    /**
     * 每隔5条存储数据库,实际使用中可以100条,然后清理list ,方便内存回收
     */
    private static final int BATCH_COUNT = 100;

    /**
     * 缓存的数据
     */
    private List<EasyExcelData> cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);

    private ObjectMapper mapper = new ObjectMapper();

    @SneakyThrows
    @Override
    public void invoke(EasyExcelData data, AnalysisContext analysisContext) {
        log.info(" invoke 解析到一条数据:{}", mapper.writeValueAsString(data));
        cachedDataList.add(data);
        // 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
        if (cachedDataList.size() >= BATCH_COUNT) {
            saveData();
            // 存储完成清理 list
            cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
        }
    }

    /**
     * 所有数据解析完成了 都会来调用
     *
     * @param context 参数
     */
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
        // 这里也要保存数据,确保最后遗留的数据也存储到数据库
        saveData();
        log.info("所有数据解析完成!");
    }

    /**
     * 加上存储数据库
     */
    private void saveData() {
        log.info("{}条数据,开始存储数据库!", cachedDataList.size());
        log.info("存储数据库成功!");
    }
}

调用使用

    @Test
    public void invoke1() {
        String fileName = "C:\\Users\\muluo\\Downloads\\easyExcelDemo.xlsx";
        // 这里默认每次会读取100条数据 然后返回过来 直接调用使用数据就行
        // 具体需要返回多少行可以在`PageReadListener`的构造函数设置
        AtomicInteger size = new AtomicInteger();
        EasyExcel.read(fileName, EasyExcelData.class, new DemoDataListener()).sheet().doRead();
    }