一种可定制的业务批量导入方法技术

本发明专利技术涉及数据采集领域，具体提供了一种可定制的业务批量导入方法，使用开源中间件Redis和RocketMQ，自动生成Excel的模板文件，Excel解析使用的是Apache开源项目Apache POI，各业务应用单点登录进入导入数据的页面。与现有技术相比，本发明专利技术的一种可定制的业务批量导入方法，将导入功能标准化，减少与各业务应用耦合，同时实现在大量数据导入。同时实现在大量数据导入。同时实现在大量数据导入。

【技术实现步骤摘要】
一种可定制的业务批量导入方法


[0001]本专利技术涉及数据采集领域，具体提供一种可定制的业务批量导入方法。

技术介绍

[0002]在政务服务领域的各种应用都会面临批量数据导入的场景,以往的做法常常是设置一个导入模板,导入人员将数据整理到Excel表格中之后，在本应用系统对应的上传模块进行上传和数据处理。
[0003]以上描述的导入装置模型的实现是在各个应用中的。这样的缺点是很明显的：
[0004]1、各个应用都有多个类似的功能，标准不统一，有时同一份数据要在多个应用中导入时，数据要整理成多份，工作重复且复杂，浪费人力成本。
[0005]2、模板无法定制内容字段，以及各字段的验证规则。各应用只有在程序中设置校验规则，有的甚至缺少规则，既导致了重复的开发工作，同时当需要修改的时候，先改模板，再去改代码逻辑，极其不方便。当缺少规则的时候更是无法保证数据的质量，导入了各种垃圾数据会导致后序步骤中面临各种困难。
[0006]3、由于程序是同步处理导入的数据，当上传海量数据时，各应用本身无法处理突然增加的导入数据量；与各应本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种可定制的业务批量导入方法，其特征在于，使用开源中间件Redis和RocketMQ，自动生成Excel的模板文件，Excel解析使用的是Apache开源项目Apache POI，各业务应用单点登录进入导入数据的页面。2.根据权利要求1所述的一种可定制的业务批量导入方法，其特征在于，将中间件Redis和RocketMQ进行集群部署，并提供对应的中间件集群服务，利用Nginx统一代理所有的接口请求，负载均衡到每个微应用，并使用Redis作为session共享的载体。3.根据权利要求2所述的一种可定制的业务批量导入方法，其特征在于，将字段信息记忆字段校验规则更新到Redis缓存服务中，当需要生成模板或者进行字段校验时，从Redis中获取校验规则进行校验。4.根据权利要求3所述的一种可定制的业务批量导入方法，其特征在于，字段验证后可根据配置增加额外信息，将整条业务信息写入到消息队列服务中，所有订阅了应用的能够收到本批次的消息。5.根据权利要求4所述的一种可定制的业务批量导入方法，其特征在于，字段验证设...

【专利技术属性】
技术研发人员：于春晓，宁方刚，孙刚友，
申请(专利权)人：浪潮软件股份有限公司，
类型：发明
国别省市：