本发明专利技术涉及大数据技术,揭露了一种软件系统数据处理方法,包括:从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集,并将所述结构化数据集存入关系型数据库中;将所述结构化数据集执行合并抽取操作,得到所述软件系统可识别的文件集,并将所述可识别的文件集上传到所述软件系统中;接收所述用户输入的操作指令,对所述操作指令进行解析处理后得到调度任务;根据所述调度任务,并利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载,从而实现所述软件系统的数据自动化处理。本发明专利技术还提出一种软件系统数据处理装置以及一种计算机可读存储介质。本发明专利技术实现了软件系统的数据高效处理。
【技术实现步骤摘要】
软件系统数据处理方法、装置及计算机可读存储介质
本专利技术涉及大数据
,尤其涉及一种基于软件系统的数据处理方法、装置及计算机可读存储介质。
技术介绍
现有的精算软件系统,如prophet软件系统,需要人工的调度和操作,跟外界的系统无法直接对接和融合,犹如一个数据孤岛,数据进不去,也出不来,都需要通过人工的方式下载成txt或者csv格式数据,然后进行数据的上传和下载。另外如果遇到数据量大的情况,需要人工一直盯着和查看软件运行模型的进度,十分的不灵活且效率低下。
技术实现思路
本专利技术提供一种软件系统数据处理方法、装置及计算机可读存储介质,其主要目的在于给用户提供一种软件系统的数据处理的技术方案。为实现上述目的,本专利技术提供的一种软件系统数据处理方法,包括:从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集后存入关系型数据库中;将所述结构化数据集执行合并抽取操作,得到所述软件系统可识别的文件集,并将所述可识别的文件集上传到所述软件系统中;接收所述用户输入的操作指令,对所述操作指令进行解析处理后得到调度任务;根据所述调度任务,并利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载,从而实现所述软件系统的数据自动化处理。可选地,所述将所述原始文件集转换成结构化数据集包括:通过预设的工具将所述原始文件集转换成需求文档集,对所述需求文档集进行预处理操作得到文档配置表集,将所述文档配置表集进行数据映射得到所述结构化数据集。可选地,所述对所述需求文档集进行预处理操作得到文档配置表集包括:根据所述需求文档集中的需求文档的交易类型对所述需求文档集进行模糊查找,得到相同类型的需求文档集,利用暴力匹配算法对所述相同类型的需求文档集进行去重操作,将去重后的所述需求文档集按数据表的形式进行配置得到所述文档配置表集。可选地,所述合并抽取操作包括:对所述结构化数据集进行汇总处理后得到汇总数据集,通过位数取余法对所述汇总数据集进行多线程任务拆分,得到拆分任务数据集,采用数据仓库工具将所述拆分任务数据集转换成所述软件系统可识别的文件集。可选地,所述解析处理包括:对所述用户输入的操作指令进行指令类别识别,并对类别识别后的所述操作指令进行指令还原,得到密文数据域,获取所述密文数据域中指令的操作对象和处理方式,从而得到所述调度任务,完成所述解析处理。此外,为实现上述目的,本专利技术还提供一种软件系统数据处理装置,该装置包括存储器和处理器,所述存储器中存储有可在所述处理器上运行的软件系统数据处理程序,所述软件系统数据处理程序被所述处理器执行时实现如下步骤:从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集后存入关系型数据库中;将所述结构化数据集执行合并抽取操作,得到所述软件系统可识别的文件集,并将所述可识别的文件集上传到所述软件系统中;接收所述用户输入的操作指令,对所述操作指令进行解析处理后得到调度任务;根据所述调度任务,利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载,从而实现所述软件系统的数据自动化处理。可选地,所述将所述原始文件集转换成结构化数据集包括:通过预设的工具将所述原始文件集转换成需求文档集,对所述需求文档集进行预处理操作得到文档配置表集,将所述文档配置表集进行数据映射得到所述结构化数据集。可选地,所述对所述需求文档集进行预处理操作得到文档配置表集包括:根据所述需求文档集中的需求文档的交易类型对所述需求文档集进行模糊查找,得到相同类型的需求文档集,利用暴力匹配算法对所述相同类型的需求文档集进行去重操作,将去重后的所述需求文档集按数据表的形式进行配置得到所述文档配置表集。可选地,所述合并抽取操作包括:对所述结构化数据集进行汇总处理后得到汇总数据集,通过位数取余法对所述汇总数据集进行多线程任务拆分,得到拆分任务数据集,采用数据仓库工具将所述拆分任务数据集转换成所述软件系统可识别的文件集。此外,为实现上述目的,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有软件系统数据处理程序,所述软件系统数据处理程序可被一个或者多个处理器执行,以实现如上所述的软件系统数据处理方法的步骤。本专利技术提出的软件系统数据处理方法、装置及计算机可读存储介质,在用户进行软件系统数据处理时,对获取的原始数据进行预处理操作后得到所述软件系统可识别的文件集,将所述文件集上传到所述软件系统中,并结合预先构建的应用调度任务平台,及根据用户的操作指令从所述软件系统中进行所述文件集的上传和/或下载,打开了所述软件系统与外界的数据传输通道,从而可以给用户呈现出高效的数据处理结果。附图说明图1为本专利技术一实施例提供的软件系统数据处理方法的流程示意图;图2为本专利技术一实施例提供的软件系统数据处理装置的内部结构示意图;图3为本专利技术一实施例提供的软件系统数据处理装置中软件系统数据处理程序的模块示意图。本专利技术目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。具体实施方式应当理解,此处所描述的具体实施例仅仅用以解释本专利技术,并不用于限定本专利技术。本专利技术提供一种软件系统数据处理方法。参照图1所示,为本专利技术一实施例提供的软件系统数据处理方法的流程示意图。该方法可以由一个装置执行,该装置可以由软件和/或硬件实现。在本实施例中,软件系统数据处理方法包括:S1、从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集后存入关系型数据库中。本专利技术较佳实施例中,所述预设的软件系统可以是prophet软件系统。所述prophet软件系统是一套综合的精算操作系统,包括寿险,非寿险以及其他部分,可以为金融服务业提供诸如利润测试、资产评估、业务模型设置等系列服务功能,从而满足了包括保险公司在内的金融服务公司的大量技术上的要求。其中,所述原始文件集包括:寿险保单交易数据集、投保人身份信息数据集以及寿险产品交易类型数据集等。所述将所述原始文件集转换成结构化数据集包括:通过预设的工具,如PRD(ProductRequirementDocument,产品需求文档)工具,将所述原始文件集转换成需求文档集,对所述需求文档集进行预处理操作得到文档配置表集,将所述文档配置表集进行数据映射得到所述结构化数据集。其中,所述需求文档集包括商业需求文档和市场需求文档。进一步地,本专利技术较佳实施例中,所述对所述需求文档集进行预处理操作得到文档配置表集包括:根据所述需求文档集中每个需求文档的交易类型对所述需求文档集进行模糊查找,得到相同类型的需求文档集,利用暴力匹配算法对所述相同类型的需求文档集进行去重操作,将去重后的所述需求文档集按数据表的形式进行配置得到所述文档配置表集。进一步地,本专利技术较佳实施例中,将结构化数据集存入本文档来自技高网...
【技术保护点】
1.一种软件系统数据处理方法,其特征在于,所述方法包括:/n从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集后存入关系型数据库中;/n将所述结构化数据集执行合并抽取操作,得到所述软件系统可识别的文件集,并将所述可识别的文件集上传到所述软件系统中;/n接收所述用户输入的操作指令,对所述操作指令进行解析处理后得到调度任务;/n根据所述调度任务,利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载,从而实现所述软件系统的数据自动化处理。/n
【技术特征摘要】
1.一种软件系统数据处理方法,其特征在于,所述方法包括:
从预设的软件系统中获取原始文件集,将所述原始文件集转换成结构化数据集后存入关系型数据库中;
将所述结构化数据集执行合并抽取操作,得到所述软件系统可识别的文件集,并将所述可识别的文件集上传到所述软件系统中;
接收所述用户输入的操作指令,对所述操作指令进行解析处理后得到调度任务;
根据所述调度任务,利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载,从而实现所述软件系统的数据自动化处理。
2.如权利要求1所述的软件系统数据处理方法,其特征在于,所述将所述原始文件集转换成结构化数据集包括:
通过预设的工具将所述原始文件集转换成需求文档集,对所述需求文档集进行预处理操作得到文档配置表集,将所述文档配置表集进行数据映射得到所述结构化数据集。
3.如权利要求2所述的软件系统数据处理方法,其特征在于,所述对所述需求文档集进行预处理操作得到文档配置表集包括:
根据所述需求文档集中的需求文档的交易类型对所述需求文档集进行模糊查找,得到相同类型的需求文档集,利用暴力匹配算法对所述相同类型的需求文档集进行去重操作,将去重后的所述需求文档集按数据表的形式进行配置得到所述文档配置表集。
4.如权利要求1所述的软件系统数据处理方法,其特征在于,所述合并抽取操作包括:
对所述结构化数据集进行汇总处理后得到汇总数据集,通过位数取余法对所述汇总数据集进行多线程任务拆分,得到拆分任务数据集,采用数据仓库工具将所述拆分任务数据集转换成所述软件系统可识别的文件集。
5.如权利要求1至4中任意一项所述的软件系统数据处理方法,其特征在于,所述解析处理包括:
对所述用户输入的操作指令进行指令类别识别,并对类别识别后的所述操作指令进行指令还原,得到密文数据域,获取所述密文数据域中指令的操作对象和处理方式,从而得到所述调度任务,完成所述解析处理。
6.一种软件系统数...
【专利技术属性】
技术研发人员:王海平,
申请(专利权)人:中国平安人寿保险股份有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。