异构系统节点信息汇总方法、数据库生成方法、数据生成方法和装置制造方法及图纸

本发明专利技术公开了一种异构系统节点信息汇总方法和装置，采集来自异构系统不同节点的交互动作信息，经统一编码后，对每一条信息进行克隆，即将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息，然后对所有信息进行合并和补全形成数据库。合并和补全时，如果两条数据不完全相同，按字段处理，字段内容相等选其一，不等选大者；对于仅有一条的交互动作信息不做处理；本发明专利技术还提供了全球贸易数据库生成方法和装置，无数据节点的数据生成方法和装置，以及无数据报道国家的贸易数据库生成方法和装置。采用本发明专利技术能够较准确、全面的推算无数据节点的相关数据，且在一定程度修正数据误差。

Methods of node information aggregation, database generation, data generation and devices in heterogeneous systems

The invention discloses a method and device for collecting node information of heterogeneous system, which collects interactive action information from different nodes of heterogeneous system. After unified coding, each piece of information is cloned, that is, the two sides of the interaction are exchanged, and the direction of the interaction is exchanged, forming an interactive action information with the opposite direction of the interaction, and then all the information is combined and completed to form a database. When merging and complementing, if two pieces of data are not identical, one of them shall be selected equally according to the field content, and the larger one shall be selected unequally; the interactive action information with only one piece shall not be processed; the invention also provides the generation method and device of Global trade database, the generation method and device of data without data nodes, and the generation method of trade database of countries without data report And device. The invention can accurately and comprehensively calculate the relevant data without data nodes and correct the data error to a certain extent.

【技术实现步骤摘要】
异构系统节点信息汇总方法、数据库生成方法、数据生成方法和装置
本专利技术属于信息
，尤其涉及一种异构系统节点信息汇总方法和装置、全球贸易数据库生成方法和装置、无数据节点的数据生成方法和装置，以及无数据报道国家的贸易数据库生成方法和装置。
技术介绍
大数据时代，如何快速准确识别所需要的数据信息和高效使用这些数据信息，是影响研究、分析、决策等工作效率和效果的关键环节。但是大数据通常来自异构系统，其不仅存在格式不统一，无法进行对比和汇总的问题，还存在数据缺失的问题。举两个常见的例子：例1：异构系统的信息汇总当需要对异构系统进行基于汇总信息的控制时，例如智能体任务分配、车辆的路径规划、网络单元的资源占用、全球金融系统的资金流动等均需要从异构的系统节点中汇总信息。由于节点的异构性，需要对不同节点的信息进行统一化；此外，对与交互信息的汇总，其难点在于，交互双方获得了交互动作，但是其中一方或者双方因为某种原因，没有记录在案，因此缺少了完整、全面的交互信息，导致汇总数据不够清晰。例2：全球贸易大数据的汇总目前的全球贸易大数据系统最多能查询160多个国家地区的相关数据，且基本没有较复杂的数据分析功能。如，我国国家信息中心2018年1月最新建立的全球贸易大数据系统是目前最先进的，有129个国家地区的数据，但数据系统仅供129个国家的数据查询和简单的对比分析(如年增长率等)。主要原因是许多小国没有相关数据统计或报道，且数据量过大(如一个国家每年的海关数据就过亿)，很难让数据按照分析使用需要的条件编排。因此，需要设计一种数据处理方法，不仅可以在一定程度修正数据误差，而且可以较准确、全面的推算无数据节点的相关数据，具有统一编码的数据编排也更容易支持复杂的后续智能分析的需求。
技术实现思路
有鉴于此，本专利技术提供了一种异构系统节点信息汇总方法，能够较准确、全面的推算无数据节点的相关数据，且在一定程度修正数据误差。该方法包括：步骤一、采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；步骤二、对采用不同编码体系的交互动作信息进行统一编码：针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理：a、如果数据来源的编码方式相同，则沿用该编码方式；b、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；c、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；d、如果数据来源的编码方式不同，且没有计算关系，则将字段X针对同一对象的所有不同编码按照设定顺序首尾相连，形成新的编码方式，作为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，从交互动作信息中提取编码体系字段和字段X的当前编码Mx，根据编码体系字段确定字段X在新编码方式中的位置，然后采用Mx在新编码方式中进行匹配，获得对应的新编码Yx，采用Yx代替Mx，形成字段X的统一编码；步骤三、针对经编码统一处理的每一条交互动作信息，将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息；步骤四、对步骤三处理后的交互动作信息进行合并、补全处理：找到交互双方、交互内容和交互方向均相同的两条数据，如果两条数据的各段参数均相同，则删除其中一条；如果两条数据不完全相同，则进行合并；合并时，如果某个字段的内容相等，则选其一；如果某个字段的内容不相等，则取数据较大者；如果出现单个数据，则取该数据；对于仅有一条的交互动作信息不做处理；步骤五、经合并、补全处理的交互动作信息形成数据库。本专利技术还提供了一种异构系统节点信息汇总装置，能够较准确、全面的推算无数据节点的相关数据，且在一定程度修正数据误差。该异构系统节点信息汇总装置包括：信息采集装置、信息汇总装置和数据库；信息汇总装置包括编码统一模块、信息反向克隆模块、信息合并模块；信息采集装置，用于采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；编码统一模块，用于对采用不同编码体系的交互动作信息进行统一编码：针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理，然后发送给信息反向克隆模块；所述统一处理为：a、如果数据来源的编码方式相同，则沿用该编码方式；b、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；c、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；d、如果数据来源的编码方式不同，且没有计算关系，则将字段X针对同一对象的所有不同编码按照设定顺序首尾相连，形成新的编码方式，作为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，从交互动作信息中提取编码体系字段和字段X的当前编码Mx，根据编码体系字段确定字段X在新编码方式中的位置，然后采用Mx在新编码方式中进行匹配，获得对应的新编码Yx，采用Yx代替Mx，形成字段X的统一编码；信息反向克隆模块，用于针对经编码统一处理的每一条交互动作信息，将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息；信息合并模块，用于对信息反向克隆模块处理后的交互动作信息进行合并、补全处理，包括：找到交互双方、交互内容和交互方向均相同的两条数据，如果两条数据的各段参数均相同，则删除其中一条；如果两条数据不完全相同，则进行合并；合并时，如果某个字段的内容相等，则选其一；如果某个字段的内容不相等，则取数据较大者；如果出现单个数据，则取该数据；对于仅有一条的交互动作信息不做处理；经合并、补全处理的交互动作信息发送到所述数据库存储。本专利技术还提供了一种全球贸易数据库生成方法，能够较准确、全面的推算无数据报道国的相关数据，且在一定程度修正数据误差。该方法包括：步骤一、收集各贸易主体报道的贸易数据；步骤二、对采用不同编码方式的贸易数据进行统一编码；步骤三、针对每一条贸易数据，将贸易伙伴双方对调，进出口类型对调，形成一条贸易方向相反的新贸易数据；步骤四、将每个贸易主体报道的贸易数据与步骤三形成的与该报道主体相关的新贸易数据进行对比改进；对于仅有一条的贸易数据不做处理；所述对比改进为：如果两条贸易数据完全相同，则删除其中一条；如果两条贸易数据不同，则进行合并，合并时对于本文档来自技高网...

【技术保护点】
1.一种异构系统节点信息汇总方法，其特征在于，包括：/n步骤一、采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；/n步骤二、对采用不同编码体系的交互动作信息进行统一编码：/n针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理：/na、如果数据来源的编码方式相同，则沿用该编码方式；/nb、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；/nc、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；/nd、如果数据来源的编码方式不同，且没有计算关系，则将字段X针对同一对象的所有不同编码按照设定顺序首尾相连，形成新的编码方式，作为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，从交互动作信息中提取编码体系字段和字段X的当前编码Mx，根据编码体系字段确定字段X在新编码方式中的位置，然后采用Mx在新编码方式中进行匹配，获得对应的新编码Yx，采用Yx代替Mx，形成字段X的统一编码；/n步骤三、针对经编码统一处理的每一条交互动作信息，将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息；/n步骤四、对步骤三处理后的交互动作信息进行合并、补全处理：/n找到交互双方、交互内容和交互方向均相同的两条数据，如果两条数据的各段参数均相同，则删除其中一条；如果两条数据不完全相同，则进行合并；合并时，如果某个字段的内容相等，则选其一；如果某个字段的内容不相等，则取数据较大者；如果出现单个数据，则取该数据；对于仅有一条的交互动作信息不做处理；/n步骤五、经合并、补全处理的交互动作信息形成数据库。/n...

【技术特征摘要】
20190121 CN 20191004793051.一种异构系统节点信息汇总方法，其特征在于，包括：
步骤一、采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；
步骤二、对采用不同编码体系的交互动作信息进行统一编码：
针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理：
a、如果数据来源的编码方式相同，则沿用该编码方式；
b、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；
c、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；
d、如果数据来源的编码方式不同，且没有计算关系，则将字段X针对同一对象的所有不同编码按照设定顺序首尾相连，形成新的编码方式，作为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，从交互动作信息中提取编码体系字段和字段X的当前编码Mx，根据编码体系字段确定字段X在新编码方式中的位置，然后采用Mx在新编码方式中进行匹配，获得对应的新编码Yx，采用Yx代替Mx，形成字段X的统一编码；
步骤三、针对经编码统一处理的每一条交互动作信息，将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息；
步骤四、对步骤三处理后的交互动作信息进行合并、补全处理：
找到交互双方、交互内容和交互方向均相同的两条数据，如果两条数据的各段参数均相同，则删除其中一条；如果两条数据不完全相同，则进行合并；合并时，如果某个字段的内容相等，则选其一；如果某个字段的内容不相等，则取数据较大者；如果出现单个数据，则取该数据；对于仅有一条的交互动作信息不做处理；
步骤五、经合并、补全处理的交互动作信息形成数据库。


2.一种异构系统节点信息汇总装置，其特征在于，包括：信息采集装置、信息汇总装置和数据库；信息汇总装置包括编码统一模块、信息反向克隆模块、信息合并模块；
信息采集装置，用于采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；
编码统一模块，用于对采用不同编码体系的交互动作信息进行统一编码：
针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理，然后发送给信息反向克隆模块；所述统一处理为：
a、如果数据来源的编码方式相同，则沿用该编码方式；
b、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；
c、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；
d、如果数据来源的编码方式不同，且没有计算关系，则将字段X针对同一对象的所有不同编码按照设定顺序首尾相连，形成新的编码方式，作为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，从交互动作信息中提取编码体系字段和字段X的当前编码Mx，根据编码体系字段确定字段X在新编码方式中的位置，然后采用Mx在新编码方式中进行匹配，获得对应的新编码Yx，采用Yx代替Mx，形成字段X的统一编码；
信息反向克隆模块，用于针对经编码统一处理的每一条交互动作信息，将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息；
信息合并模块，用于对信息反向克隆模块处理后的交互动作信息进行合并、补全处理，包括：找到交互双方、交互内容和交互方向均相同的两条数据，如果两条数据的各段参数均相同，则删除其中一条；如果两条数据不完全相同，则进行合并；合并时，如果某个字段的内容相等，则选其一；如果某个字段的内容不相等，则取数据较大者；如果出现单个数据，则取该数据；对于仅有一条的交互动作信息不做处理；
经合并、补全处理的交互动作信息发送到所述数据库存储。


3.一种全球贸易数据库生成方法，其特征在于，包括：
步骤一、收集各贸易主体报道的贸易数据；
步骤二、对采用不同编码方式的贸易数据进行统一编码；
步骤三、针对每一条贸易数据，将贸易伙伴双方对调，进出口类型对调，形成一条贸易方向相反的新贸易数据；
步骤四、将每个贸易主体报道的贸易数据与步骤三形成的与该报道主体相关的新贸易数据进行对比改进；对于仅有一条的贸易数据不做处理；
所述对比改进为：如果两条贸易数据完全相同，则删除其中一条；如果两条贸易数据不同，则进行合并，合并时对于同一字段的数据，内容相等时选其一，不相等时取数据较大者；如果其中一条贸易数据出现了某个字段，而另一条贸易数据中没有，则取该字段内容；
步骤五、步骤四处理后的贸易数据形成数据库。


4.如权利要求3所述的方法，其特征在于...

【专利技术属性】
技术研发人员：罗斌，罗暘洋，
申请(专利权)人：罗斌，罗暘洋，
类型：发明
国别省市：北京;11