1. 引入pom包
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>easyexcel</artifactId>
<version>3.3.2</version>
</dependency>
2. 创建对应数据接收实体类
/**
* @author ml
* @date 2023年08月20日 16:12
*/
@Data
public class EasyExcelData implements Serializable {
private static final long serialVersionUID = 5737618998359421293L;
private String title;
private String name;
private String age;
private int sex;
}
2. 读取数据
2.1 基础读取方式
@Test
public void invoke() {
// 写法1:JDK8+ ,不用额外写一个DemoDataListener
String fileName = "C:\\Users\\muluo\\Downloads\\easyExcelDemo.xlsx";
// 这里默认每次会读取100条数据 然后返回过来 直接调用使用数据就行
// 具体需要返回多少行可以在`PageReadListener`的构造函数设置
AtomicInteger size = new AtomicInteger();
EasyExcel.read(fileName, EasyExcelData.class, new PageReadListener<EasyExcelData>(dataList -> {
for (EasyExcelData demoData : dataList) {
try {
log.info("{} 读取到一条数据{}", size.getAndIncrement(), mapper.writeValueAsString(demoData));
} catch (JsonProcessingException e) {
e.printStackTrace();
}
}
},10)).sheet().doRead();
}
2.2 自定义Listener 处理
创建Listener 文件
package com.ml.toolkit.excel;
import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.read.listener.ReadListener;
import com.alibaba.excel.util.ListUtils;
import com.fasterxml.jackson.databind.ObjectMapper;
import lombok.SneakyThrows;
import lombok.extern.slf4j.Slf4j;
import java.util.List;
/**
* @author hxd
* @date 2023年08月20日 16:16
*/
@Slf4j
public class DemoDataListener implements ReadListener<EasyExcelData> {
/**
* 每隔5条存储数据库,实际使用中可以100条,然后清理list ,方便内存回收
*/
private static final int BATCH_COUNT = 100;
/**
* 缓存的数据
*/
private List<EasyExcelData> cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
private ObjectMapper mapper = new ObjectMapper();
@SneakyThrows
@Override
public void invoke(EasyExcelData data, AnalysisContext analysisContext) {
log.info(" invoke 解析到一条数据:{}", mapper.writeValueAsString(data));
cachedDataList.add(data);
// 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
if (cachedDataList.size() >= BATCH_COUNT) {
saveData();
// 存储完成清理 list
cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
}
}
/**
* 所有数据解析完成了 都会来调用
*
* @param context 参数
*/
@Override
public void doAfterAllAnalysed(AnalysisContext context) {
// 这里也要保存数据,确保最后遗留的数据也存储到数据库
saveData();
log.info("所有数据解析完成!");
}
/**
* 加上存储数据库
*/
private void saveData() {
log.info("{}条数据,开始存储数据库!", cachedDataList.size());
log.info("存储数据库成功!");
}
}
调用使用
@Test
public void invoke1() {
String fileName = "C:\\Users\\muluo\\Downloads\\easyExcelDemo.xlsx";
// 这里默认每次会读取100条数据 然后返回过来 直接调用使用数据就行
// 具体需要返回多少行可以在`PageReadListener`的构造函数设置
AtomicInteger size = new AtomicInteger();
EasyExcel.read(fileName, EasyExcelData.class, new DemoDataListener()).sheet().doRead();
}