使用easyExcel读取excel全表数据并筛选出所有的模板变量{}

当我们希望在任意一个excel模板中填充数据时,我们要先读取这个文件中有多少种模板变量{xxx...},计算出这些变量对应的实际值后再填充到模板中。例如我的模板:

因为用户随时会修改模板,在不知道文件内容情况下,我们可以先读取全表的数据再过滤出我们需要的模板变量{xxx...}。这是我的主类:

public class test {

    @Test
    public void testRead() {
        //模板文件的绝对路径
        String fileName = "C:\\Users\\zhuangzhoudedayu\\Desktop\\TestTamplate.xlsx";
        // 这里默认读取第一个sheet
        EasyExcel.read(fileName,new DemoDataListener()).sheet().doRead();
    }

}

这是我主类中用到的监听器类,在这个监听器ReadListener中,我们使用Map<Integer,Object>作为泛型,可以在不确定excel文件的数据结构时,读取全部数据而不会出现类型转换错误。在 invoke()方法中,我们遍历每一行的每一列数据,并使用正则表达式检查是否存在匹配的 {xxx...} 格式的字符串,将匹配的字符串添加到cachedDataList集合中,让集合中的元素是唯一的:

public class DemoDataListener implements ReadListener<Map<Integer,Object>> {
    //每隔5条存储数据库,实际使用中可以100条,然后清理list ,方便内存回收
    private static final int BATCH_COUNT = 100;
    //缓存的数据,设置为Set类型使存储的模板字符串不重复
    private Set<String> cachedDataList = new HashSet<>(BATCH_COUNT);
    //匹配读取的excel表中模板字符串{XXX...}的正则表达式
    private Pattern pattern = Pattern.compile("\\{.*?\\}");
    //假设这个是一个DAO,当然有业务逻辑这个也可以是一个service。当然如果不用存储这个对象没用。
    private DemoDAO demoDAO;

    public DemoDataListener() {
        // 这里是demo,所以随便new一个。实际使用如果到了spring,请使用下面的有参构造函数
        demoDAO = new DemoDAO();
    }

    //如果使用了spring,请使用这个构造方法。每次创建Listener的时候需要把spring管理的类传进来
    public DemoDataListener(DemoDAO demoDAO) {
        this.demoDAO = demoDAO;
    }

    //这个每一条数据解析都会来调用
    @Override
    public void invoke(Map<Integer,Object> data, AnalysisContext context) {
        log.info("解析到一条数据:{}");
        for(Object value : data.values()){
            if(value instanceof String){
                String stringValue = (String) value;
                //使用正则表达式检查字符串是否匹配{XXX}格式
                if(pattern.matcher(stringValue).find()){
                    cachedDataList.add(stringValue);
                }
            }
        }
        // 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
        if (cachedDataList.size() >= BATCH_COUNT) {
            saveData();
            // 存储完成清理 list
            cachedDataList = new HashSet<>(BATCH_COUNT);
        }
    }

    //所有数据解析完成了 都会来调用
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
        // 这里也要保存数据,确保最后遗留的数据也存储到数据库
        saveData();
        log.info("所有数据解析完成!",cachedDataList);
    }

    //加上存储数据库
    private void saveData() {
        log.info("{}条数据,开始存储数据库!", cachedDataList.size());
        demoDAO.save(cachedDataList);
        log.info("存储数据库成功!");
    }
}

这是数据存储用到的DemoDAO类,具体实现代码自己写:

/**
 * 假设这个是你的DAO存储。当然还要这个类让spring管理,当然你不用需要存储,也不需要这个类。
 **/
public class DemoDAO {
    public void save(Set<String> list) {
        // 如果是mybatis,尽量别直接调用多次insert,自己写一个mapper里面新增一个方法batchInsert,所有数据一次性插入
    }
}

最后cachedDataList集合中就存储了这个模板文件中所有种模板变量{}:

相关推荐

  1. springboot中使用easyExcel读取excel内容

    2024-01-12 13:24:01       57 阅读
  2. EasyExcel读取数据发送请求

    2024-01-12 13:24:01       40 阅读
  3. python 读取pcap文件筛选数据包

    2024-01-12 13:24:01       22 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-01-12 13:24:01       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-01-12 13:24:01       101 阅读
  3. 在Django里面运行非项目文件

    2024-01-12 13:24:01       82 阅读
  4. Python语言-面向对象

    2024-01-12 13:24:01       91 阅读

热门阅读

  1. 数据结构实验5:二叉树的应用

    2024-01-12 13:24:01       38 阅读
  2. libzmq ZMQ_SERVER and ZMQ_CLIENT was not declared in this scope

    2024-01-12 13:24:01       53 阅读
  3. 如何通过 Python 进行服务器监控和故障排查?

    2024-01-12 13:24:01       68 阅读
  4. mysql 优化工具 EXPLAIN详解

    2024-01-12 13:24:01       57 阅读
  5. 127. 单词接龙

    2024-01-12 13:24:01       55 阅读
  6. Jenkins

    Jenkins

    2024-01-12 13:24:01      35 阅读
  7. 基于昇腾910B搭建多节点K8s集群

    2024-01-12 13:24:01       54 阅读
  8. docker搭建镜像仓库并设置账密登录

    2024-01-12 13:24:01       58 阅读