【技术实现步骤摘要】
一种异构数据的共享方法及智能共享系统
本专利技术属于异构数据的共享
,尤其涉及一种异构数据的共享方法及智能共享系统方法。
技术介绍
目前,异构数据库系统是相关的多个数据库系统的集合,可以实现数据的共享和透明访问,几个数据库系统在加入异构数据库系统之前本身就已经存在,拥有自己的数据库管理系统、外构数据库的各个组成部分具有自身的自治性,实现数据共享的同时,每个数据库系统仍有自己的应用特性、完整性控制和安全性控制。然而,现有对异构数据进行人工计算与验证,容易出错;同时,现有的异构数据质量评估在技术和实现上有一定的局限性;采用传统机器学习技术,结合神经网络算法来评估数据质量。这种方法需要准备样本数据集来训练神经网络,形成数据质量评估模型,当数据质量规则发生变化时,就需要重新训练新模型,过程比较繁杂。综上所述,现有技术存在的问题是:现有对异构数据进行人工计算与验证,容易出错;同时,现有的异构数据质量评估在技术和实现上有一定的局限性;采用传统机器学习技术,结合神经网络算法来评估数据质量。这种方法需要准备样本数据集来训练神经 ...
【技术保护点】
1.一种异构数据的共享方法,其特征在于,所述异构数据的共享方法包括以下步骤:/n步骤一,通过数据源获取模块利用网络设备获取数据源;通过数据库构建模块利用数据库构建程序构建异构数据库;通过中央控制模块利用中央处理器协调控制所述异构数据的智能共享系统各个模块的正常工作;通过数据加密模块利用加密算法对异构数据进行加密处理;/n步骤二,通过异构数据整合模块利用整合程序对异构数据进行整合处理;通过异构数据验证模块利用检索程序检索异构数据,确定用于生成配置数据的计算模板格式,结合设计异构数据文档内容,确定计算模板公式;利用验证程序对计算模板公式与设计异构数据文档内容的一致性进行验证,得 ...
【技术特征摘要】
1.一种异构数据的共享方法,其特征在于,所述异构数据的共享方法包括以下步骤:
步骤一,通过数据源获取模块利用网络设备获取数据源;通过数据库构建模块利用数据库构建程序构建异构数据库;通过中央控制模块利用中央处理器协调控制所述异构数据的智能共享系统各个模块的正常工作;通过数据加密模块利用加密算法对异构数据进行加密处理;
步骤二,通过异构数据整合模块利用整合程序对异构数据进行整合处理;通过异构数据验证模块利用检索程序检索异构数据,确定用于生成配置数据的计算模板格式,结合设计异构数据文档内容,确定计算模板公式;利用验证程序对计算模板公式与设计异构数据文档内容的一致性进行验证,得到验证结果,基于验证结果生成验证报告;
步骤三,获取特定项目的样本原始异构数据,对样本原始异构数据进行验证,将验证通过后的样本原始异构数据按计算模板格式添加到计算模板公式,根据计算模板公式得到配置结果,基于配置结果以及样本原始异构数据构建配置异构数据文件;根据设计异构数据文档内容和计算模板格式,获取验证公式;将样本原始异构数据导入验证公式,得到验证公式结果,结合配置异构数据文件以及验证报告,生成二次验证结果;
步骤四,通过异构数据同步模块利用同步程序对异构数据库数据进行同步;通过异构数据共享模块利用共享程序对异构数据进行共享;通过质量评估模块利用校准程序对多源数据进行校准,获取多源异构海量数据作为待评估异构数据集;针对所述待评估异构数据集的特点、关联业务以及数据归属,预设多维度参数的异构数据质量规则,并对每条异构数据质量规则的每个维度参数,预设评定的分值范围;
步骤五,利用评估程序根据预设的所述异构数据质量规则的维度参数分值和重要性权重,构建异构数据质量规则的权重矩阵;通过计算异构数据质量规则的通过率,从异构数据的完整性、准确性、一致性、时效性以及规范性多个维度,分别计算异构数据质量评估得分,结合异构数据质量规则的权重矩阵,对全部异构数据质量规则的通过率进行加权求和,得出待评估的异构数据集的综合评估结果;
步骤六,通过数据存储模块利用存储器存储获取的数据源、异构数据加密处理结果、异构数据整合结果、异构数据验证结果、异构数据同步信息、共享数据以及质量评估结果;通过更新显示模块利用显示器对获取的数据源、异构数据加密处理结果、异构数据整合结果、异构数据验证结果、异构数据同步信息、共享数据以及质量评估结果的实时数据进行更新显示。
2.如权利要求1所述的异构数据的智能共享方法,其特征在于,步骤二中,所述设计异构数据文档内容包括信号系统的系统参数以及计算方式。
3.如权利要求1所述的异构数据的智能共享方法,其特征在于,步骤三中,所述验证公式如下:
其中,H2,H3为哈希函数,name||i为异构数据文档标识符,所述异构数据文档内容包含m′,m′=H3(e(σ,c1)·c2u),vi∈Zp,c1=gρ,c2=Zρ和Z=e(sk,gα),mi∈Zp,Zp={0,1,....p-1};ρ为所述随机数据,ρ∈Zp。
4.如权利要求1所述异构数据的智能共享方法,其特征在于,步骤四中,所述通过校准程序对多源数据进行校准,获取多源异构海量数据作为待评估异构数据集,包括:
(1)获取多源异构海量数据包括以标准化采集任务模板来快速接入各类数据;针对多源异构实时数据,采用消息队列技术获取;
(2)针对多源异构海量历史数据,采用数据总线技术获取;所述多源异构数据存储至内存数据库或并行数据库,形成待评估异构数据集。
5.如权利要求...
【专利技术属性】
技术研发人员:马金,王秀英,
申请(专利权)人:中通服公众信息产业股份有限公司,
类型:发明
国别省市:新疆;65
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。