数据调用处理方法及其装置、设备、介质、产品制造方法及图纸

本申请公开一种数据调用处理方法及其装置、设备、介质、产品，所述方法包括：经第一协议层接收电商平台的多个独立站点采集的目标数据，所述目标数据为电商平台消费者用户对应产生的活动数据；由工作于第二协议层的数据优化模块根据第三协议层所需的数据格式对所述目标数据进行数据预处理并持久化至数据库；由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据；响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出。本申请可实现对电商平台海量的用户活动数据的集中统一数据挖掘。动数据的集中统一数据挖掘。动数据的集中统一数据挖掘。

【技术实现步骤摘要】
数据调用处理方法及其装置、设备、介质、产品


[0001]本申请涉及电商信息
，尤其涉及一种数据调用处理方法及其相应的装置、计算机设备、计算机可读存储介质，以及计算机程序产品。

技术介绍

[0002]跨境电商平台不同于普通的电商平台，其为每个线上店铺提供一个独立站点，多独立站点分布式运营，因此需要跨境电商平台一般通过集群服务器对海量的独立站点所需的应用服务实现集中统一的管控。
[0003]众所周知的，电商平台日常产生的各种用户活动数据，依赖于电商平台的消费者用户在各个线上店铺活动产生，包括但不限于用户的行为数据、用户所在的终端设备中的运行性能相关的数据、用户注册数据、用户交易数据、用户交互数据等，均属于用户的活动数据的范畴，此类活动数据类型多样而且散见分布，然而海量的活动数据本身蕴藏着丰富的数据价值，对这些活动数据进行有效的数据挖掘，获得有价值的加工信息，能够为电商平台改善和提升服务品质添砖加瓦。
[0004]现有技术中，对跨境电商平台的用户活动数据的利用，通常基于某一具体的业务需求而调用，不同的业务需求采用其自身固有的业务逻辑对平台内产生的某些类别的活动数据进行利用，最终导致电商平台的数据的熵增，导致产生各种各样的垃圾数据，降低电商平台的运行效率和服务体验。
[0005]本申请人长期从事跨境电商平台相关技术的研发，因此，尝试对现有技术中存在的问题做出行之有效的探索。

技术实现思路

[0006]本申请的首要目的在于解决上述问题至少之一而提供一种数据调用处理方法及其相应的装置、计算机设备、计算机可读存储介质、计算机程序产品。
[0007]为满足本申请的各个目的，本申请采用如下技术方案：
[0008]适应本申请的目的之一而提供的一种数据调用处理方法，包括如下步骤：
[0009]接收电商平台的多个独立站点采集的目标数据，所述目标数据为电商平台消费者用户对应产生的活动数据，由电商平台的集群服务器分发至各个所述的独立站点中运行的数据采集插件负责采集，该数据采集插件工作于第一协议层；
[0010]由工作于第二协议层的数据优化模块根据第三协议层所需的数据格式对所述目标数据进行数据预处理并持久化至数据库，以供第三协议层的数据封装模块调用；
[0011]由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据；
[0012]响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出，使所述预设应用服务根据电商平台中的独立站点产生的消费者用户的活动数据而确定其画像标签，而实现预设的下游任务。
[0013]扩展的实施例中，接收电商平台的多个独立站点采集的目标数据的步骤之前，包括如下步骤：
[0014]响应所述电商平台中的任意独立站点的数据采集插件配置请求，向该独立站点分发相应的数据采集插件，将其配置于该独立站点的后台中运行；
[0015]将该配置了数据采集插件的独立站点注册至配置信息库中；
[0016]获取该配置了数据采集插件的独立站点发送的目标数据接入请求，查询所述配置信息库是否存在该独立站点，若存在该独立站点，向该独立站点发送目标数据传输令牌，以在该独立站点传输其目标数据时根据该目标数据携带的所述数据传输令牌而接收该目标数据。
[0017]深化的实施例中，由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据，包括如下步骤：
[0018]由所述数据封装模块中的数据建模子模块对所述目标数据进行数据抽象，将所述目标数据处理为标准格式规范，使每个目标数据包括多个属性数据；
[0019]由所述数据封装模块中的数据画像子模块对所述目标数据进行数据聚合，以获得所述目标数据相对应的画像标签，构成画像标签集；
[0020]根据所述画像标签集中的画像标签与所述目标数据中的属性数据的对应关系构造出映射关系数据集，以供预设应用服务调用。
[0021]扩展的实施例中，响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出的步骤之后，包括如下步骤：
[0022]由所述预设应用服务调用所述画像标签及其属性数据构成训练样本，对神经网络分类模型实施训练，将其训练至收敛状态，其中，所述画像标签用作该神经网络分类模型对所述属性数据进行分类预测的监督标签；
[0023]由所述预设应用服务启用已被训练至收敛状态的所述神经网络分类模型使其适于对输入其中的加工数据进行推理以确定相应的画像标签；
[0024]由所述预设应用服务接收任意独立站点提交的消费者用户的活动数据，调用所述数据优化模块进行数据预处理后进行分词获得分词集，构造出该分词集相对应的编码信息；
[0025]由所述预设应用服务调用所述神经网络分类模型对所述编码信息进行表示学习并分类，获得该编码信息相对应的画像标签并向提交该活动数据的独立站点返回。
[0026]变通扩展的一种实施例中，获得该编码信息相对应的画像标签并向提交该活动数据的独立站点返回的步骤之后，包括如下步骤：
[0027]由所述独立站点根据预设应用服务所返回的画像标签搜索相应的商品项，获得由该些商品项构成的商品列表；
[0028]将所述商品列表输出至产生据以确定该画像标签的活动数据的消费者用户的图形用户界面显示。
[0029]变通扩展的另一实施例中，获得该编码信息相对应的画像标签并向提交该活动数据的独立站点返回的步骤之后，包括如下步骤：
[0030]由所述独立站点判断预设应用服务所返回的画像标签是否属于预设的违规标签，若属于违规标签，阻断产生据以确定该画像标签的活动数据的消费者用户的访问事件。
[0031]适应本申请的目的之一而提供的一种数据调用处理装置，包括：数据采集单元、数据优化单元、数据画像单元，以及数据调用单元，其中，所述数据采集单元，用于接收电商平台的多个独立站点采集的目标数据，所述目标数据为电商平台消费者用户对应产生的活动数据，由电商平台的集群服务器分发至各个所述的独立站点中运行的数据采集插件负责采集，该数据采集插件工作于第一协议层；所述数据优化单元，用于由工作于第二协议层的数据优化模块根据第三协议层所需的数据格式对所述目标数据进行数据预处理并持久化至数据库，以供第三协议层的数据封装模块调用；所述数据画像单元，用于由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据；所述数据调用单元，用于响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出，使所述预设应用服务根据电商平台中的独立站点产生的消费者用户的活动数据而本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据调用处理方法，其特征在于，包括如下步骤：接收电商平台的多个独立站点采集的目标数据，所述目标数据为电商平台消费者用户对应产生的活动数据，由电商平台的集群服务器分发至各个所述的独立站点中运行的数据采集插件负责采集，该数据采集插件工作于第一协议层；由工作于第二协议层的数据优化模块根据第三协议层所需的数据格式对所述目标数据进行数据预处理并持久化至数据库，以供第三协议层的数据封装模块调用；由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据；响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出，使所述预设应用服务根据电商平台中的独立站点产生的消费者用户的活动数据而确定其画像标签，而实现预设的下游任务。2.根据权利要求1所述的数据调用处理方法，其特征在于，接收电商平台的多个独立站点采集的目标数据的步骤之前，包括如下步骤：响应所述电商平台中的任意独立站点的数据采集插件配置请求，向该独立站点分发相应的数据采集插件，将其配置于该独立站点的后台中运行；将该配置了数据采集插件的独立站点注册至配置信息库中；获取该配置了数据采集插件的独立站点发送的目标数据接入请求，查询所述配置信息库是否存在该独立站点，若存在该独立站点，向该独立站点发送目标数据传输令牌，以在该独立站点传输其目标数据时根据该目标数据携带的所述数据传输令牌而接收该目标数据。3.根据权利要求1所述的数据调用处理方法，其特征在于，由工作于第三协议层的数据封装模块对所述数据库中的目标数据进行数据挖掘，以根据所述目标数据中生成适配电商平台的消费者用户的画像标签及其对应的属性数据，包括如下步骤：由所述数据封装模块中的数据建模子模块对所述目标数据进行数据抽象，将所述目标数据处理为标准格式规范，使每个目标数据包括多个属性数据；由所述数据封装模块中的数据画像子模块对所述目标数据进行数据聚合，以获得所述目标数据相对应的画像标签，构成画像标签集；根据所述画像标签集中的画像标签与所述目标数据中的属性数据的对应关系构造出映射关系数据集，以供预设应用服务调用。4.根据权利要求1所述的数据调用处理方法，其特征在于，响应工作于第四协议层的预设应用服务的调用指令，为该预设应用服务执行对所述画像标签及其对应的属性数据的调用输出的步骤之后，包括如下步骤：由所述预设应用服务调用所述画像标签及其属性数据构成训练样本，对神经网络分类模型实施训练，将其训练至收敛状态，其中，所述画像标签用作该神经网络分类模型对所述属性数据进行分类预测的监督标签；由所述预设应用服务启用已被训练至收敛状态的所述神经网络分类模...

【专利技术属性】
技术研发人员：徐进添，
申请(专利权)人：广州华多网络科技有限公司，
类型：发明
国别省市：