POI 和 easyExcel 講解

轉(zhuǎn)自狂神老師，僅作為個人筆記使用

一、POI

常用進(jìn)程

1、將用戶信息導(dǎo)出為excel表格(導(dǎo)出數(shù)據(jù)....)

2、將Excel表中的信息錄入到網(wǎng)站數(shù)據(jù)庫(習(xí)題上傳....)

開發(fā)中經(jīng)常會設(shè)計(jì)到excel的處理，如導(dǎo)出Excel，導(dǎo)入Excel到數(shù)據(jù)庫中！

操作Excel目前比較流行的就是 Apache POI 和 阿里巴巴的 easyExcel ！

Apache POI

easyExcel

EasyExcel 是阿里巴巴開源的一個excel處理框架，以使用簡單、節(jié)省內(nèi)存著稱。

EasyExcel 能大大減少占用內(nèi)存的主要原因是在解析 Excel 時沒有將文件數(shù)據(jù)一次性全部加載到內(nèi)存中，而是從磁盤上一行行讀取數(shù)據(jù)，逐個解析。

下圖是 EasyExcel 和 POI 在解析Excel時的對比圖。

1、POI-Excel寫

創(chuàng)建項(xiàng)目

1、建立一個空項(xiàng)目 Bilibili-狂神說java，創(chuàng)建普通Maven的Moudle kuang-poi

2、引入pom依賴

org.apache.poi

poi

3.9

org.apache.poi

poi-ooxml

3.9

joda-time

joda-time

2.10.1

junit

junit

4.12

03 | 07 版本的寫，就是對象不同，方法一樣的！

需要注意：2003 版本和 2007 版本存在兼容性的問題！03最多只有 65535 行！

1、工作簿：

2、工作表：

3、行：

4、列：

03版本：

@Test

public void testWrite03() throws Exception {

// 1、創(chuàng)建一個工作簿

Workbook workbook = new HSSFWorkbook();

// 2、創(chuàng)建一個工作表

Sheet sheet = workbook.createSheet("狂神觀眾統(tǒng)計(jì)表");

// 3、創(chuàng)建一個行 (1,1)

Row row1 = sheet.createRow(0);

// 4、創(chuàng)建一個單元格

Cell cell11 = row1.createCell(0);

cell11.setCellValue("今日新增觀眾");

// (1,2)

Cell cell12 = row1.createCell(1);

cell12.setCellValue(666);

// 第二行 (2,1)

Row row2 = sheet.createRow(1);

Cell cell21 = row2.createCell(0);

cell21.setCellValue("統(tǒng)計(jì)時間");

// (2,2)

Cell cell22 = row2.createCell(1);

String time = new DateTime().toString("yyyy-MM-dd HH:mm:ss");

cell22.setCellValue(time);

// 生成一張表(IO 流) 03 版本就是使用 xls結(jié)尾！

FileOutputStream fileOutputStream = new FileOutputStream(PATH + "狂神觀眾統(tǒng)計(jì)表03.xls");

// 輸出

workbook.write(fileOutputStream);

// 關(guān)閉流

fileOutputStream.close();

System.out.println("狂神觀眾統(tǒng)計(jì)表03 生成完畢！");

}

07版本：

@Test

public void testWrite07() throws Exception {

// 1、創(chuàng)建一個工作簿 07

Workbook workbook = new XSSFWorkbook();

// 2、創(chuàng)建一個工作表

Sheet sheet = workbook.createSheet("狂神觀眾統(tǒng)計(jì)表");

// 3、創(chuàng)建一個行 (1,1)

Row row1 = sheet.createRow(0);

// 4、創(chuàng)建一個單元格

Cell cell11 = row1.createCell(0);

cell11.setCellValue("今日新增觀眾");

// (1,2)

Cell cell12 = row1.createCell(1);

cell12.setCellValue(666);

// 第二行 (2,1)

Row row2 = sheet.createRow(1);

Cell cell21 = row2.createCell(0);

cell21.setCellValue("統(tǒng)計(jì)時間");

// (2,2)

Cell cell22 = row2.createCell(1);

String time = new DateTime().toString("yyyy-MM-dd HH:mm:ss");

cell22.setCellValue(time);

// 生成一張表(IO 流) 03 版本就是使用 xlsx結(jié)尾！

FileOutputStream fileOutputStream = new FileOutputStream(PATH + "狂神觀眾統(tǒng)計(jì)表07.xlsx");

// 輸出

workbook.write(fileOutputStream);

// 關(guān)閉流

fileOutputStream.close();

System.out.println("狂神觀眾統(tǒng)計(jì)表03 生成完畢！");

}

注意對象的一個區(qū)別，文件后綴！

數(shù)據(jù)批量導(dǎo)入！

大文件寫HSSF

缺點(diǎn)：最多只能處理65536行，否則會拋出異常

java.lang.IllegalArgumentException: Invalid row number (65536) outside allowable range (0..65535)

優(yōu)點(diǎn)：過程中寫入緩存，不操作磁盤，最后一次性寫入磁盤，速度快

@Test

public void testWrite03BigData() throws IOException {

// 時間

long begin = System.currentTimeMillis();

// 創(chuàng)建一個薄

Workbook workbook = new HSSFWorkbook();

// 創(chuàng)建表

Sheet sheet = workbook.createSheet();

// 寫入數(shù)據(jù)

for (int rowNum = 0; rowNum < 65537; rowNum++) {

Row row = sheet.createRow(rowNum);

for (int cellNum = 0; cellNum < 10 ; cellNum++) {

Cell cell = row.createCell(cellNum);

cell.setCellValue(cellNum);

}

}

System.out.println("over");

FileOutputStream outputStream = new FileOutputStream(PATH + "testWrite03BigData.xls");

workbook.write(outputStream);

outputStream.close();

long end = System.currentTimeMillis();

System.out.println((double) (end-begin)/1000);

}

大文件寫XSSF

缺點(diǎn)：寫數(shù)據(jù)時速度非常慢，非常耗內(nèi)存，也會發(fā)生內(nèi)存溢出，如100萬條

優(yōu)點(diǎn)：可以寫較大的數(shù)據(jù)量，如20萬條

@Test

public void testWrite07BigData() throws IOException {

// 時間

long begin = System.currentTimeMillis();

// 創(chuàng)建一個薄

Workbook workbook = new XSSFWorkbook();

// 創(chuàng)建表

Sheet sheet = workbook.createSheet();

// 寫入數(shù)據(jù)

for (int rowNum = 0; rowNum < 100000; rowNum++) {

Row row = sheet.createRow(rowNum);

for (int cellNum = 0; cellNum < 10 ; cellNum++) {

Cell cell = row.createCell(cellNum);

cell.setCellValue(cellNum);

}

}

System.out.println("over");

FileOutputStream outputStream = new FileOutputStream(PATH + "testWrite07BigData.xlsx");

workbook.write(outputStream);

outputStream.close();

long end = System.currentTimeMillis();

System.out.println((double) (end-begin)/1000);

}

大文件寫SXSSF

優(yōu)點(diǎn)：可以寫非常大的數(shù)據(jù)量，如100萬條甚至更多條，寫數(shù)據(jù)速度快，占用更少的內(nèi)存

注意：

過程中會產(chǎn)生臨時文件，需要清理臨時文件

默認(rèn)由100條記錄被保存在內(nèi)存中，如果超過這數(shù)量，則最前面的數(shù)據(jù)被寫入臨時文件

如果想自定義內(nèi)存中數(shù)據(jù)的數(shù)量，可以使用new SXSSFWorkbook ( 數(shù)量 )

@Test

public void testWrite07BigDataS() throws IOException {

// 時間

long begin = System.currentTimeMillis();

// 創(chuàng)建一個薄

Workbook workbook = new SXSSFWorkbook();

// 創(chuàng)建表

Sheet sheet = workbook.createSheet();

// 寫入數(shù)據(jù)

for (int rowNum = 0; rowNum < 100000; rowNum++) {

Row row = sheet.createRow(rowNum);

for (int cellNum = 0; cellNum < 10 ; cellNum++) {

Cell cell = row.createCell(cellNum);

cell.setCellValue(cellNum);

}

}

System.out.println("over");

FileOutputStream outputStream = new FileOutputStream(PATH + "testWrite07BigDataS.xlsx");

workbook.write(outputStream);

outputStream.close();

// 清除臨時文件！

((SXSSFWorkbook) workbook).dispose();

long end = System.currentTimeMillis();

System.out.println((double) (end-begin)/1000);

}

SXSSFWorkbook-來至官方的解釋：實(shí)現(xiàn)“BigGridDemo”策略的流式XSSFWorkbook版本。這允許寫入非常大的文件而不會耗盡內(nèi)存，因?yàn)槿魏螘r候只有可配置的行部分被保存在內(nèi)存中。

請注意，仍然可能會消耗大量內(nèi)存，這些內(nèi)存基于您正在使用的功能，例如合并區(qū)域，注釋......仍然只存儲在內(nèi)存中，因此如果廣泛使用，可能需要大量內(nèi)存。

再使用 POI的時候！內(nèi)存問題 Jprofile！

2、POI-Excel讀

03|07

03版本

@Test

public void testRead03() throws Exception {

// 獲取文件流

FileInputStream inputStream = new FileInputStream(PATH + "kuang-poi狂神觀眾統(tǒng)計(jì)表03.xls");

// 1、創(chuàng)建一個工作簿。 使用excel能操作的這邊他都可以操作！

Workbook workbook = new HSSFWorkbook(inputStream);

// 2、得到表

Sheet sheet = workbook.getSheetAt(0);

// 3、得到行

Row row = sheet.getRow(0);

// 4、得到列

Cell cell = row.getCell(1);

// 讀取值的時候，一定需要注意類型！

// getStringCellValue 字符串類型

// System.out.println(cell.getStringCellValue());

System.out.println(cell.getNumericCellValue());

inputStream.close();

}

07版本

@Test

public void testRead07() throws Exception {

// 獲取文件流

FileInputStream inputStream = new FileInputStream(PATH + "kuang-poi狂神觀眾統(tǒng)計(jì)表07.xlsx");

// 1、創(chuàng)建一個工作簿。 使用excel能操作的這邊他都可以操作！

Workbook workbook = new XSSFWorkbook(inputStream);

// 2、得到表

Sheet sheet = workbook.getSheetAt(0);

// 3、得到行

Row row = sheet.getRow(0);

// 4、得到列

Cell cell = row.getCell(1);

// 讀取值的時候，一定需要注意類型！

// getStringCellValue 字符串類型

// System.out.println(cell.getStringCellValue());

System.out.println(cell.getNumericCellValue());

inputStream.close();

}

注意獲取值的類型即可

讀取不同的數(shù)據(jù)類型(最麻煩的就是這里了！)

@Test

public void testCellType() throws Exception {

// 獲取文件流

FileInputStream inputStream = new FileInputStream(PATH + "明細(xì)表.xls");

// 創(chuàng)建一個工作簿。 使用excel能操作的這邊他都可以操作！

Workbook workbook = new HSSFWorkbook(inputStream);

Sheet sheet = workbook.getSheetAt(0);

// 獲取標(biāo)題內(nèi)容

Row rowTitle = sheet.getRow(0);

if (rowTitle!=null) {

// 一定要掌握

int cellCount = rowTitle.getPhysicalNumberOfCells();

for (int cellNum = 0; cellNum < cellCount; cellNum++) {

Cell cell = rowTitle.getCell(cellNum);

if (cell!=null){

int cellType = cell.getCellType();

String cellValue = cell.getStringCellValue();

System.out.print(cellValue + " | ");

}

}

System.out.println();

}

// 獲取表中的內(nèi)容

int rowCount = sheet.getPhysicalNumberOfRows();

for (int rowNum = 1; rowNum < rowCount ; rowNum++) {

Row rowData = sheet.getRow(rowNum);

if (rowData!=null){

// 讀取列

int cellCount = rowTitle.getPhysicalNumberOfCells();

for (int cellNum = 0; cellNum < cellCount ; cellNum++) {

System.out.print("[" +(rowNum+1) + "-" + (cellNum+1) + "]");

Cell cell = rowData.getCell(cellNum);

// 匹配列的數(shù)據(jù)類型

if (cell!=null) {

int cellType = cell.getCellType();

String cellValue = "";

switch (cellType) {

case HSSFCell.CELL_TYPE_STRING: // 字符串

System.out.print("【String】");

cellValue = cell.getStringCellValue();

break;

case HSSFCell.CELL_TYPE_BOOLEAN: // 布爾

System.out.print("【BOOLEAN】");

cellValue = String.valueOf(cell.getBooleanCellValue());

break;

case HSSFCell.CELL_TYPE_BLANK: // 空

System.out.print("【BLANK】");

break;

case HSSFCell.CELL_TYPE_NUMERIC: // 數(shù)字(日期、普通數(shù)字)

System.out.print("【NUMERIC】");

if (HSSFDateUtil.isCellDateFormatted(cell)){ // 日期

System.out.print("【日期】");

Date date = cell.getDateCellValue();

cellValue = new DateTime(date).toString("yyyy-MM-dd");

}else {

// 不是日期格式，防止數(shù)字過長！

System.out.print("【轉(zhuǎn)換為字符串輸出】");

cell.setCellType(HSSFCell.CELL_TYPE_STRING);

cellValue = cell.toString();

}

break;

case HSSFCell.CELL_TYPE_ERROR:

System.out.print("【數(shù)據(jù)類型錯誤】");

break;

}

System.out.println(cellValue);

}

}

}

}

inputStream.close();

}

注意，類型轉(zhuǎn)換問題；

計(jì)算公式 (了解即可！)

@Test

public void testFormula() throws Exception {

FileInputStream inputStream = new FileInputStream(PATH + "公式.xls");

Workbook workbook = new HSSFWorkbook(inputStream);

Sheet sheet = workbook.getSheetAt(0);

Row row = sheet.getRow(4);

Cell cell = row.getCell(0);

// 拿到計(jì)算公司 eval

FormulaEvaluator FormulaEvaluator = new HSSFFormulaEvaluator((HSSFWorkbook)workbook);

// 輸出單元格的內(nèi)容

int cellType = cell.getCellType();

switch (cellType){

case Cell.CELL_TYPE_FORMULA: // 公式

String formula = cell.getCellFormula();

System.out.println(formula);

// 計(jì)算

CellValue evaluate = FormulaEvaluator.evaluate(cell);

String cellValue = evaluate.formatAsString();

System.out.println(cellValue);

break;

}

}

二、EasyExcel操作

導(dǎo)入依賴

com.alibaba

easyexcel

2.2.0-beta2

1、寫入測試

1.1、創(chuàng)建對象

@Data

public class DemoData {

@ExcelProperty("字符串標(biāo)題")

private String string;

@ExcelProperty("日期標(biāo)題")

private Date date;

@ExcelProperty("數(shù)字標(biāo)題")

private Double doubleData;

/**

* 忽略這個字段

*/

@ExcelIgnore

private String ignore;

}

1.2、拿到實(shí)體類里的值

String PATH ="D:\\Project\\IdeaProject\\Bilibili-狂神說java\\";

private List data() {

List list = new ArrayList();

for (int i = 0; i < 10; i++) {

DemoData data = new DemoData();

data.setString("字符串" + i);

data.setDate(new Date());

data.setDoubleData(0.56);

list.add(data);

}

return list;

}

1.3、將list寫入Excel

// 根據(jù)list 寫入excel

@Test

public void simpleWrite() {

// 寫法1

String fileName = PATH + "EasyTest.xlsx";

// 這里 需要指定寫用哪個class去寫，然后寫到第一個sheet，名字為模板 然后文件流會自動關(guān)閉

// write (fileName, 格式類)

// sheet (表明)

// doWrite (數(shù)據(jù))

EasyExcel.write(fileName, DemoData.class).sheet("模板").doWrite(data());

}

2、讀取測試

2.1、對象

2.2、監(jiān)聽器

// 有個很重要的點(diǎn) DemoDataListener 不能被spring管理，要每次讀取excel都要new,然后里面用到spring可以構(gòu)造方法傳進(jìn)去

public class DemoDataListener extends AnalysisEventListener {

private static final Logger LOGGER = LoggerFactory.getLogger(DemoDataListener.class);

private static final int BATCH_COUNT = 5;

List list = new ArrayList();

private DemoDAO demoDAO;

public DemoDataListener() {

// 這里是demo，所以隨便new一個。實(shí)際使用如果到了spring,請使用下面的有參構(gòu)造函數(shù)

demoDAO = new DemoDAO();

}

public DemoDataListener(DemoDAO demoDAO) {

this.demoDAO = demoDAO;

}

// 讀取數(shù)據(jù)會執(zhí)行 invoke 方法

// DemoData 類型

// AnalysisContext 分析上問

@Override

public void invoke(DemoData data, AnalysisContext context) {

System.out.println(JSON.toJSONString(data));

list.add(data);

// 達(dá)到BATCH_COUNT了，需要去存儲一次數(shù)據(jù)庫，防止數(shù)據(jù)幾萬條數(shù)據(jù)在內(nèi)存，容易OOM

if (list.size() >= BATCH_COUNT) {

saveData(); // 持久化邏輯!

// 存儲完成清理 list

list.clear();

}

}

/**

* 所有數(shù)據(jù)解析完成了 都會來調(diào)用

*

* @param context

*/

@Override

public void doAfterAllAnalysed(AnalysisContext context) {

// 這里也要保存數(shù)據(jù)，確保最后遺留的數(shù)據(jù)也存儲到數(shù)據(jù)庫

saveData();

LOGGER.info("所有數(shù)據(jù)解析完成！");

}

/**

* 加上存儲數(shù)據(jù)庫

*/

private void saveData() {

LOGGER.info("{}條數(shù)據(jù)，開始存儲數(shù)據(jù)庫！", list.size());

demoDAO.save(list);

LOGGER.info("存儲數(shù)據(jù)庫成功！");

}

}

2.3、持久層

/**

* 假設(shè)這個是你的DAO存儲。當(dāng)然還要這個類讓spring管理，當(dāng)然你不用需要存儲，也不需要這個類。

**/

public class DemoDAO {

public void save(List list) {

// 持久化操作！

// 如果是mybatis,盡量別直接調(diào)用多次insert,自己寫一個mapper里面新增一個方法batchInsert,所有數(shù)據(jù)一次性插入

}

}

2.4、測試代碼

@Test

public void simpleRead() {

// 有個很重要的點(diǎn) DemoDataListener 不能被spring管理，要每次讀取excel都要new,然后里面用到spring可以構(gòu)造方法傳進(jìn)去

// 寫法1：

String fileName = PATH + "EasyTest.xlsx";

// 這里 需要指定讀用哪個class去讀，然后讀取第一個sheet 文件流會自動關(guān)閉

// 重點(diǎn)注意讀取的邏輯 DemoDataListener

EasyExcel.read(fileName, DemoData.class, new DemoDataListener()).sheet().doRead();

}

固定套路：

1、寫入，固定類格式進(jìn)行寫入

2、讀取，根據(jù)監(jiān)聽器設(shè)置的規(guī)則進(jìn)行讀取！

小結(jié)-學(xué)習(xí)方式

了解，面向?qū)ο蟮乃枷?#xff0c;學(xué)會面向接口編程！

理解使用測試API！

作業(yè)：把EasyExcel 的所有api都測試一下(2~3小時！)

總結(jié)

以上是生活随笔為你收集整理的easyexcel和poi对比_POI 和 EasyExcel的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。