百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程字典 > 正文

Excel 导入导出解决方案 Easy-POI

toyiye 2024-06-23 18:42 18 浏览 0 评论

Easy-POI是一款Excel导入导出解决方案组成的轻量级开源组件。

功能简介

  1. 浏览器导出Excel文件(支持单/多sheet)
  2. 浏览器导出Excel模板文件
  3. 指定路径生成Excel文件(支持单/多sheet)
  4. 返回Excel文件(支持单/多sheet)的OutputStream, 一般用于将Excel文件上传到远程, 例如FTP
  5. 导入Excel文件(支持单/多sheet)

解决的问题

1.解决导出大量数据造成的内存溢出问题(支持分页查询数据库、采用poi官方推荐api(SXSSFWorkbook), 实现指定行数刷新到磁盘)

2.解决导入大量数据造成的内存溢出问题(分页插入数据库、采用poi官方推荐api(XSSF and SAX),采用SAX模式一行行读取到内存当中去)

3.解决含有占位符的空假行造成的读空值问题

4.解决Long类型或者BigDecimal的精度不准问题

组件特色

1.导入可以自定义解析成功或失败的处理逻辑

2.导出支持分页查询、全量查询, 自定义每条数据的处理逻辑

3.内置缓存,3万条11列数据,第一次导出2.2s左右、第二次导出在1.4s左右;第一次导入3.5s左右、第二次导入2.5s左右

4.注解操作, 轻量且便捷

5.内置常用正则表达式类RegexConst(身份证号、手机号、金额、邮件)

6.适配单元格宽度(单元格内容最长不得超过20个汉字)

7.假如出现异常,Sheet、行、列位置也都一并打印

8.注解中的用户自定义字符串信息以及Excel信息已全部trim,不用担心存在前后空格的风险

9.Excel样式简洁、大方、美观

10.导出的单条数据假如全部属性都为null或0或0.0或0.00或空字符串者null字符串,自动忽略,此特性也可让用户自定义忽略规则

组件需知

导入和导出只支持尾缀为xlsx的Excel文件、标注注解的属性顺序即Excel列的排列顺序、时间转化格式(dateFormat)默认为“yyyy-MM-dd HHss“.

导入

1.当导入Excel, 读取到空行, 则停止读取当前Sheet的后面数据行

2.导入Excel文件, 单元格格式使用文本或者常规, 防止出现不可预测异常

3.导入字段类型支持:Date、Short(short)、Integer(int)、Double(double)、Long(long)、Float(float)、BigDecimal、String类型

4.导入BigDecimal字段精度默认为2, roundingMode默认为BigDecimal.ROUND_HALF_EVEN

5.第一行有效单元格内必须包含内容并且以第一行为依据, 导入Excel文件列数必须等于标注注解的属性数量

6.Date类型字段,Excel与时间转化格式(dateFormat)相比,格式要保持一致(反例:2018/12/31和“yyyy-MM-dd“)并且长度要一致或更长(反例:"2018-12-31"和yyyy-MM-dd HHss"),否则SimpleDateFormat将解析失败,报 “Unparseable date:”

导出

1.导出BigDecimal字段默认不进行精度格式化

2.分页查询默认从第一页开始, 每页3000条

3.Excel每超过2000条数据, 将内存中的数据刷新到磁盘当中去

4.使用分Sheet导出方法, 每8万行数据分Sheet

5.当使用(exportResponse、exportStream、generateExcelStream)方法时, 当单个Sheet超过100万条则会分Sheet

6.标注属性类型要与数据库类型保持一致

扩展

继承EasyPoi类, 可以使用子类构造器覆盖以下默认参数

//Excel自动刷新到磁盘的数量
 public static final int DEFAULT_ROW_ACCESS_WINDOW_SIZE = 2000;
 //分页条数
 public static final int DEFAULT_PAGE_SIZE = 3000;
 //分Sheet条数
 public static final int DEFAULT_RECORD_COUNT_PEER_SHEET = 80000;

版本

当前为2.0版本,新版本正在开发

使用手册

1.引入Maven依赖

2.将需要导出或者导入的实体属性上标注@ExportField或@ImportField注解

3.直接调用导出或导入API即可

POM.xml

io.github.magic-coreeasy-poi2.0

@ExportField

/**
* 导出注解功能介绍
*/
public @interface ExportField {
 /**
 * excel列名称
 */
 String columnName();
 /**
 * 默认单元格值
 */
 String defaultCellValue() default "";
 /**
 * 日期格式 默认 yyyy-MM-dd HHss
 */
 String dateFormat() default "yyyy-MM-dd HHss";
 /**
 * BigDecimal精度 默认:-1(默认不开启BigDecimal格式化)
 */
 int scale() default -1;
 /**
 * BigDecimal 舍入规则 默认:BigDecimal.ROUND_HALF_EVEN
 */
 int roundingMode() default BigDecimal.ROUND_HALF_EVEN;
}
/**
* 导出注解Demo
*/
public class ExportFielddemo {
@ExportField(columnName = "ID", defaultCellValue = "1")
 private Integer id;
@ExportField(columnName = "姓名", defaultCellValue = "张三")
 private String name;
 
@ExportField(columnName = "收入金额", defaultCellValue = "100", scale = 2, roundingMode=BigDecimal.ROUND_HALF_EVEN)
 private BigDecimal money;
@ExportField(columnName = "创建时间", dateFormat="yyyy-MM-dd", defaultCellValue = "2019-01-01")
 private Date createTime;
}

@ImportField

/**
* 导入注解功能介绍
*/
public @interface ImportField {
 /**
 * @return 是否必填
 */
 boolean required() default false;
 /**
 * 日期格式 默认 yyyy-MM-dd HHss
 */
 String dateFormat() default "yyyy-MM-dd HHss";
 /**
 * 正则表达式校验
 */
 String regex() default "";
 /**
 * 正则表达式校验失败返回的错误信息, regex配置后生效
 */
 String regexMessage() default "正则表达式验证失败";
 /**
 * BigDecimal精度 默认:2
 */
 int scale() default 2;
 /**
 * BigDecimal 舍入规则 默认:BigDecimal.ROUND_HALF_EVEN
 */
 int roundingMode() default BigDecimal.ROUND_HALF_EVEN;
}
/**
* 导入注解Demo
*/
public class ImportField {
@ImportField(required = true)
 private Integer id;
@ImportField(regex = IDCARD_REGEX, regexMessage="身份证校验失败")
 private String idCard;
 
@ImportField(scale = 2, roundingMode=BigDecimal.ROUND_HALF_EVEN)
 private BigDecimal money;
@ImportField(dateFormat="yyyy-MM-dd")
 private Date createTime;
}

导出Demo

/**
 * 导出Demo
 */
public class ExportDemo {
 /**
 * 浏览器导出Excel
 *
 * @param httpServletResponse
 */
 public void exportResponse(HttpServletResponse httpServletResponse) {
 ParamEntity queryQaram = new ParamEntity();
 EasyPoi.ExportBuilder(httpServletResponse, "Excel文件名", AnnotationEntity.class).exportResponse(queryQaram,
 new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public AnnotationEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 浏览器多sheet导出Excel
 *
 * @param httpServletResponse
 */
 public void exportMultiSheetResponse(HttpServletResponse httpServletResponse) {
 ParamEntity queryQaram = new ParamEntity();
 EasyPoi.ExportBuilder(httpServletResponse, "Excel文件名", AnnotationEntity.class).exportMultiSheetStream(queryQaram,
 new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public AnnotationEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 导出Excel到指定路径
 */
 public void exportStream() throws FileNotFoundException {
 ParamEntity queryQaram = new ParamEntity();
 EasyPoi.ExportBuilder(new FileOutputStream(new File("C:\\Users\\Excel文件.xlsx")), "Sheet名", AnnotationEntity.class)
 .exportStream(queryQaram, new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public ResultEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 导出多sheet Excel到指定路径
 */
 @RequestMapping(value = "exportResponse")
 public void exportMultiSheetStream() throws FileNotFoundException {
 ParamEntity queryQaram = new ParamEntity();
 EasyPoi.ExportBuilder(new FileOutputStream(new File("C:\\Users\\Excel文件.xlsx")), "Sheet名", AnnotationEntity.class)
 .exportMultiSheetStream(queryQaram, new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public AnnotationEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 生成Excel OutputStream对象
 */
 public void generateExcelStream() throws FileNotFoundException {
 ParamEntity queryQaram = new ParamEntity();
 OutputStream outputStream = EasyPoi.ExportBuilder(new FileOutputStream(new File("C:\\Users\\Excel文件.xlsx")), "Sheet名", AnnotationEntity.class)
 .generateExcelStream(queryQaram, new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public AnnotationEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 生成多Sheet Excel OutputStream对象
 */
 public void generateMultiSheetExcelStream() throws FileNotFoundException {
 ParamEntity queryQaram = new ParamEntity();
 OutputStream outputStream = EasyPoi.ExportBuilder(new FileOutputStream(new File("C:\\Users\\Excel文件.xlsx")), "Sheet名", AnnotationEntity.class)
 .generateMultiSheetExcelStream(queryQaram, new ExportFunction() {
 /**
 * @param queryQaram 查询条件对象
 * @param pageNum 当前页数,从1开始
 * @param pageSize 每页条数,默认3000
 * @return
 */
 @Override
 public ListpageQuery(ParamEntity queryQaram, int pageNum, int pageSize) {
 //分页查询操作
 return new ArrayList();
 }
 /**
 * 将查询出来的每条数据进行转换
 *
 * @param o
 */
 @Override
 public AnnotationEntity convert(ResultEntity o) {
 //转换操作
 }
 });
 }
 /**
 * 导出Excel模板
 */
 public void exportTemplate(HttpServletResponse httpServletResponse) {
 EasyPoi.ExportBuilder(httpServletResponse, "Excel模板名称", AnnotationEntity.class).exportTemplate();
 }
}

导入Demo

/**
 * 导入Demo
 */
public class ImportDemo {
 public void importExcel() throws IOException {
 EasyPoi.ImportBuilder(new FileInputStream(new File("C:\\Users\\导入Excel文件.xlsx")), AnnotationEntity.class)
 .importExcel(new ExcelImportFunction() {
 /**
 * @param sheetIndex 当前执行的Sheet的索引, 从1开始
 * @param rowIndex 当前执行的行数, 从1开始
 * @param resultEntity Excel行数据的实体
 */
 @Override
 public void onProcess(int sheetIndex, int rowIndex, AnnotationEntity resultEntity) {
 //对每条数据自定义校验以及操作
 //分页插入:当读取行数到达用户自定义条数执行插入数据库操作
 }
 /**
 * @param errorEntity 错误信息实体
 */
 @Override
 public void onError(ErrorEntity errorEntity) {
 //操作每条数据非空和正则校验后的错误信息
 }
 });
 }
}

相关推荐

为何越来越多的编程语言使用JSON(为什么编程)

JSON是JavascriptObjectNotation的缩写,意思是Javascript对象表示法,是一种易于人类阅读和对编程友好的文本数据传递方法,是JavaScript语言规范定义的一个子...

何时在数据库中使用 JSON(数据库用json格式存储)

在本文中,您将了解何时应考虑将JSON数据类型添加到表中以及何时应避免使用它们。每天?分享?最新?软件?开发?,Devops,敏捷?,测试?以及?项目?管理?最新?,最热门?的?文章?,每天?花?...

MySQL 从零开始:05 数据类型(mysql数据类型有哪些,并举例)

前面的讲解中已经接触到了表的创建,表的创建是对字段的声明,比如:上述语句声明了字段的名称、类型、所占空间、默认值和是否可以为空等信息。其中的int、varchar、char和decimal都...

JSON对象花样进阶(json格式对象)

一、引言在现代Web开发中,JSON(JavaScriptObjectNotation)已经成为数据交换的标准格式。无论是从前端向后端发送数据,还是从后端接收数据,JSON都是不可或缺的一部分。...

深入理解 JSON 和 Form-data(json和formdata提交区别)

在讨论现代网络开发与API设计的语境下,理解客户端和服务器间如何有效且可靠地交换数据变得尤为关键。这里,特别值得关注的是两种主流数据格式:...

JSON 语法(json 语法 priority)

JSON语法是JavaScript语法的子集。JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔花括号保存对象方括号保存数组JS...

JSON语法详解(json的语法规则)

JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔大括号保存对象中括号保存数组注意:json的key是字符串,且必须是双引号,不能是单引号...

MySQL JSON数据类型操作(mysql的json)

概述mysql自5.7.8版本开始,就支持了json结构的数据存储和查询,这表明了mysql也在不断的学习和增加nosql数据库的有点。但mysql毕竟是关系型数据库,在处理json这种非结构化的数据...

JSON的数据模式(json数据格式示例)

像XML模式一样,JSON数据格式也有Schema,这是一个基于JSON格式的规范。JSON模式也以JSON格式编写。它用于验证JSON数据。JSON模式示例以下代码显示了基本的JSON模式。{"...

前端学习——JSON格式详解(后端json格式)

JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式。易于人阅读和编写。同时也易于机器解析和生成。它基于JavaScriptProgrammingLa...

什么是 JSON:详解 JSON 及其优势(什么叫json)

现在程序员还有谁不知道JSON吗?无论对于前端还是后端,JSON都是一种常见的数据格式。那么JSON到底是什么呢?JSON的定义...

PostgreSQL JSON 类型:处理结构化数据

PostgreSQL提供JSON类型,以存储结构化数据。JSON是一种开放的数据格式,可用于存储各种类型的值。什么是JSON类型?JSON类型表示JSON(JavaScriptO...

JavaScript:JSON、三种包装类(javascript 包)

JOSN:我们希望可以将一个对象在不同的语言中进行传递,以达到通信的目的,最佳方式就是将一个对象转换为字符串的形式JSON(JavaScriptObjectNotation)-JS的对象表示法...

Python数据分析 只要1分钟 教你玩转JSON 全程干货

Json简介:Json,全名JavaScriptObjectNotation,JSON(JavaScriptObjectNotation(记号、标记))是一种轻量级的数据交换格式。它基于J...

比较一下JSON与XML两种数据格式?(json和xml哪个好)

JSON(JavaScriptObjectNotation)和XML(eXtensibleMarkupLanguage)是在日常开发中比较常用的两种数据格式,它们主要的作用就是用来进行数据的传...

取消回复欢迎 发表评论:

请填写验证码