一种数据交换方法和装置制造方法及图纸

本发明专利技术提供一种数据交换方法和装置。其中数据提供方与数据需求方采用相同的领域模型，基于相同的领域模型，数据提供方对数据需求方欲获取的目标数据进行编目，并将编目信息向数据需求方予以发布。方法包括：数据提供方接收数据需求方发送的获取目标数据的交换请求；在依据数据需求方的用户信息验证数据需求方合法时，确定目标kettle server；在目标kettle server上，依据目标数据的数据资源信息、目标数据库资源信息和数据转换信息创建任务；依据任务调度信息执行所述任务，从而获得目标数据；将获得的目标数据发送至数据需求方。本发明专利技术解决了现有跨领域数据交换方法存在的数据异构和平台异构问题。

【技术实现步骤摘要】
一种数据交换方法和装置
本专利技术涉及数据交换
，尤其涉及一种基于Kettle和编目技术实现的跨领域的数据交换方法和装置。
技术介绍
在跨领域数据交换的业务场景中(一般是异构系统之间)，不同的业务单元常常需要通过一个数据平台进行数据交换和共享。由于各业务领域的系统由不同单位采用各自的数据标准进行开发，数据标准之间并未考虑协同，因此不可避免地造成数据异构，特别表现在数据的语义、格式、编码方式的不同，导致两个异构系统之间很难直接进行数据交换。同时，各业务单元采用不同的基础环境，比如不同的数据库、操作系统、网络环境等，因此数据交换难免遭遇平台异构带来的问题。因此，目前的跨领域数据交换方法存在数据异构和平台异构的问题。
技术实现思路
有鉴于此，本专利技术提供一种数据交换方法和装置，以解决现有跨领域数据交换方法存在的数据异构和平台异构问题。技术方案如下：基于本专利技术的一方面，本专利技术提供一种数据交换方法，应用于数据提供方，所述数据提供方与数据需求方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；方法包括：接收所述数据需求方发送的获取目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；在依据所述数据需求方的用户信息验证所述数据需求方合法时，确定目标kettleserver；在所述目标kettleserver上，依据所述目标数据的数据资源信息、所述目标数据库资源信息和所述数据转换信息创建任务；依据所述任务调度信息执行所述任务，从而获得所述目标数据；将获得的所述目标数据发送至所述数据需求方。可选地，所述领域模型由参与数据交换的业务单元进行定制。可选地，所述数据提供方包括kettleserver集群；所述确定目标kettleserver包括：依据所述kettleserver集群中各节点的负载能力，从所述kettleserver集群中确定出所述目标kettleserver。基于本专利技术的另一方面，本专利技术提供一种数据交换方法，应用于数据需求方，所述数据需求方与数据提供方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；方法包括：在检测到基于所述编目信息确定获取所述目标数据的触发请求后，封装所述目标数据的数据资源信息以及目标数据库资源信息；在验证所述目标数据的数据资源信息以及所述目标数据库资源信息合法后，封装数据转换信息以及任务调度信息；在验证所述数据转换信息以及所述任务调度信息合法后，封装所述数据需求方的用户信息；在依据所述数据需求方的用户信息验证所述数据需求方合法后，向所述数据提供方发送获取所述目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；接收所述数据提供方返回的所述目标数据。可选地，所述交换请求为http请求。基于本专利技术的再一方面，本专利技术提供一种数据交换装置，应用于数据提供方，所述数据提供方与数据需求方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；装置包括：交换请求接收单元，用于接收所述数据需求方发送的获取目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；用户合法性验证单元，用于依据所述数据需求方的用户信息验证所述数据需求方是否合法；目标节点确定单元，用于在所述用户合法性验证单元依据所述数据需求方的用户信息验证所述数据需求方合法时，确定目标kettleserver；任务创建单元，用于在所述目标kettleserver上，依据所述目标数据的数据资源信息、所述目标数据库资源信息和所述数据转换信息创建任务；任务执行单元，用于依据所述任务调度信息执行所述任务，从而获得所述目标数据；数据发送单元，用于将获得的所述目标数据发送至所述数据需求方。可选地，所述领域模型由参与数据交换的业务单元进行定制。可选地，所述数据提供方包括kettleserver集群；所述目标节点确定单元具体用于：依据所述kettleserver集群中各节点的负载能力，从所述kettleserver集群中确定出所述目标kettleserver。基于本专利技术的再一方面，本专利技术提供一种数据交换装置，应用于数据需求方，所述数据需求方与数据提供方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；装置包括：检测单元，用于检测基于所述编目信息确定获取所述目标数据的触发请求；第一封装单元，用于在所述检测单元检测到基于所述编目信息确定获取所述目标数据的触发请求后，封装所述目标数据的数据资源信息以及目标数据库资源信息；第一合法性验证单元，用于验证所述目标数据的数据资源信息以及所述目标数据库资源信息是否合法；第二封装单元，用于在所述第一合法性验证单元验证所述目标数据的数据资源信息以及所述目标数据库资源信息合法后，封装数据转换信息以及任务调度信息；第二合法性验证单元，用于验证所述数据转换信息以及所述任务调度信息是否合法；第三封装单元，用于在所述第二合法性验证单元验证所述数据转换信息以及所述任务调度信息合法后，封装所述数据需求方的用户信息；第三合法性验证单元，用于依据所述数据需求方的用户信息验证所述数据需求方是否合法；请求发送单元，用于在所述第三合法性验证单元依据所述数据需求方的用户信息验证所述数据需求方合法后，向所述数据提供方发送获取所述目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；数据接收单元，用于接收所述数据提供方返回的所述目标数据。可选地，所述交换请求为http请求。本专利技术提供的数据交换方法和装置中，数据提供方与数据需求方采用相同的领域模型，基于该相同的领域模型，数据提供方对数据需求方欲获取的目标数据进行编目，并将编目信息向数据需求方予以发布，使得编目信息对数据需求方可见。本专利技术在数据进行交换之前，数据提供方与数据需求方采用相同的领域模型来描述和读取数据资源，使得数据资源统一，解决了数据异构问题。在数据进行交换时，数据提供方依据数据需求方发送的获取目标数据的交换请求，基于kettle调用目标kettleserver来创建、执行任务，从而获得目标数据，并将获得的目标数据发送至数据需求方。本专利技术提供的数据传输方式能够应用于不同平台的不同基础环境中，在跨平台中被不同的基础环境所接受，解决了平台异构问题。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本专利技术提供的一种数本文档来自技高网...

【技术保护点】
1.一种数据交换方法，应用于数据提供方，其特征在于，所述数据提供方与数据需求方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；方法包括：接收所述数据需求方发送的获取目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；在依据所述数据需求方的用户信息验证所述数据需求方合法时，确定目标kettle server；在所述目标kettle server上，依据所述目标数据的数据资源信息、所述目标数据库资源信息和所述数据转换信息创建任务；依据所述任务调度信息执行所述任务，从而获得所述目标数据；将获得的所述目标数据发送至所述数据需求方。

【技术特征摘要】
1.一种数据交换方法，应用于数据提供方，其特征在于，所述数据提供方与数据需求方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；方法包括：接收所述数据需求方发送的获取目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；在依据所述数据需求方的用户信息验证所述数据需求方合法时，确定目标kettleserver；在所述目标kettleserver上，依据所述目标数据的数据资源信息、所述目标数据库资源信息和所述数据转换信息创建任务；依据所述任务调度信息执行所述任务，从而获得所述目标数据；将获得的所述目标数据发送至所述数据需求方。2.根据权利要求1所述的方法，其特征在于，所述领域模型由参与数据交换的业务单元进行定制。3.根据权利要求1或2所述的方法，其特征在于，所述数据提供方包括kettleserver集群；所述确定目标kettleserver包括：依据所述kettleserver集群中各节点的负载能力，从所述kettleserver集群中确定出所述目标kettleserver。4.一种数据交换方法，应用于数据需求方，其特征在于，所述数据需求方与数据提供方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；方法包括：在检测到基于所述编目信息确定获取所述目标数据的触发请求后，封装所述目标数据的数据资源信息以及目标数据库资源信息；在验证所述目标数据的数据资源信息以及所述目标数据库资源信息合法后，封装数据转换信息以及任务调度信息；在验证所述数据转换信息以及所述任务调度信息合法后，封装所述数据需求方的用户信息；在依据所述数据需求方的用户信息验证所述数据需求方合法后，向所述数据提供方发送获取所述目标数据的交换请求，所述交换请求包括所述目标数据的数据资源信息、目标数据库资源信息、数据转换信息、任务调度信息、所述数据需求方的用户信息；接收所述数据提供方返回的所述目标数据。5.根据权利要求4所述的方法，其特征在于，所述交换请求为http请求。6.一种数据交换装置，应用于数据提供方，其特征在于，所述数据提供方与数据需求方采用相同的领域模型；基于所述相同的领域模型，所述数据提供方对所述数据需求方欲获取的目标数据进行编目，并将编目信息向所述数据需求方予以发布；装置包括：交换请求接收单元，用于接收所述数据需求方发送的获取目标数据的交换请求，所述交换请求包括所述目标数据的数据资源...

【专利技术属性】
技术研发人员：王帅，
申请(专利权)人：北京搜狐新媒体信息技术有限公司，
类型：发明
国别省市：北京,11