【技术实现步骤摘要】
多系统数据融合方法、装置、计算机设备和存储介质
本申请涉及数据处理
,特别是涉及一种多系统数据融合方法、装置、计算机设备和存储介质。
技术介绍
随着互联网技术的不断发展,足不出户便可购到所需物品的网络购物方式变得越来越流行,而电商网站是网络购物的载体,其上承载了大量商品的相关信息,人们的网购活动主要在电商网站上完成。而现有的电商网站也多种多样,在不同的电商网站上可能出现同一商品用不同参数进行描述的现象,即便是同一商家的同一商品在不同电商网站的参数描述方式很多时候也是不同的。对于一些大型商家,商品种类繁多,常会因部分人员对店铺后台操作有误,导致电商网站的日常商品维护中出现较多错误,例如,编辑错误、关联错误/未关联、上错商品、误删商品或者库存数量有误等等。因此,有必要对电商网站的商品数据进行质量检测,然而,由于不同电商网站的参数描述方式,会加大商品数据质量检测难度,商品数据质量检测效率较低。
技术实现思路
基于此,有必要针对上述技术问题,提供一种能够降低商品数据质量检测难度以及提升商品数据质量检测效率的多系统数据融合方法、装置、计算机设备和存储介质。一种多系统数据融 ...
【技术保护点】
1.一种多系统数据融合方法,其特征在于,所述方法包括:根据第一系统和第二系统间的商品关联信息,获取第二系统的商品数据,将获取到的商品数据存储于本地的第二系统商品基本信息表;建立所述第一系统和所述第二系统的商品参数描述信息对应关系;根据所述第一系统的商品信息和所述商品参数描述信息对应关系,建立所述第一系统和所述第二系统的商品对应关系;根据所述第二系统商品基本信息表和所述商品对应关系,对所述第二系统的商品数据进行质量检测。
【技术特征摘要】
1.一种多系统数据融合方法,其特征在于,所述方法包括:根据第一系统和第二系统间的商品关联信息,获取第二系统的商品数据,将获取到的商品数据存储于本地的第二系统商品基本信息表;建立所述第一系统和所述第二系统的商品参数描述信息对应关系;根据所述第一系统的商品信息和所述商品参数描述信息对应关系,建立所述第一系统和所述第二系统的商品对应关系;根据所述第二系统商品基本信息表和所述商品对应关系,对所述第二系统的商品数据进行质量检测。2.根据权利要求1所述的方法,其特征在于,所述根据第一系统和第二系统间的商品关联信息,获取第二系统的商品数据,包括:获取所述第二系统的商品更新时间片,根据所述商品更新时间片确定时间分片参数;根据所述时间分片参数,并采用多线程并发方式调用预设的拉取第二系统商品数据接口,所述拉取第二系统商品数据接口根据所述分片参数和所述商品关联信息,获取第二系统的商品数据。3.根据权利要求2所述的方法,其特征在于,根据所述商品更新时间片确定时间分片参数,包括:将所述商品更新时间片划分成多个子时间片,将所述子时间片的分片参数作为所述确定时间分片参数,其中,不同子时间片对应不同的线程。4.根据权利要求2所述的方法,其特征在于,所述根据所述时间分片参数,并采用多线程并发方式调用预设的拉取第二系统商品数据接口,包括:获取所述第二系统的当前时间片内的商品总数,根据所述商品总数确定总分页数;按照所述总分页数,循环调用商品分页查询接口,所述商品分页查询接口分页获取第二系统的商品数据;分别解析各页的商品数据,得到各数据条目,将各所述数据条目存储于所述第二系统商品基本信息表中。5.根据权利要求1所述的方法,其特征在于,所述商品参数描述信息对应关系包括商品类目对应关系、商品品牌对应关系和商品种类信息对应关系。6.根据权利要求5所述的方法,其特征在于,所述建立所述第一系统和所述第二系统的商品参数描述信息对应关系,包括:定时同步所述第一系统的商品类目,定时拉取所述第二系统的商品类目,获取所述第一系统的商品类目和所述第二系统的商品类目的第一关联操作信息,根据第一关联操作信息生成所述商品类目对应关系;定时同步所述第一系统的商品品牌,定时拉取所述第二系统的商品品牌,获取所述第一系统的商品品牌的所述第二系统的商品品牌的第二关联操作信息,根据第二关联操作信息生成所述商品品牌对应关系;定时同步所述第一系统的商品种类信息,定时拉取所述第二系统的商品种类信息,获取所述第一系统的商品种类信息的所述第二系统的商品种类信息的第三关联操作信息,根据第三关联操作信息生成所述商品种类信息对应关系。7.根据权利要求1所述的方法,其特征在于,所述方法还包括:根据所述质量检测的检测...
【专利技术属性】
技术研发人员:刘建洋,杨程成,李飞,殷晓莹,
申请(专利权)人:苏宁易购集团股份有限公司,
类型:发明
国别省市:江苏,32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。