数据融合方法、搜索方法、装置、电子设备及存储介质制造方法及图纸

技术编号:33396826 阅读:51 留言:0更新日期:2022-05-11 23:16
本公开提供了一种数据融合方法、搜索方法、装置、电子设备及存储介质,涉及计算机技术领域,尤其涉及数据处理、云计算、智能搜索等领域。具体实现方案为:从不同数据源获取待融合数据,所述待融合数据包括数据格式不统一的异构数据;对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据;对所述属性数据进行属性分级处理,得到属性分级数据;根据所述属性分级数据进行数据融合处理,得到数据融合结果。采用本公开,可以对海量的多源异构数据进行数据融合,以提高数据处理速度。处理速度。处理速度。

【技术实现步骤摘要】
数据融合方法、搜索方法、装置、电子设备及存储介质


[0001]本公开涉及计算机
,尤其涉及数据处理、云计算、智能搜索等领域。

技术介绍

[0002]大数据的时代,来自不同数据源的海量数据存在异构数据(比如数据格式不同的数据),海量的多源异构数据,其数据量巨大,且各自采用不同的数据格式,势必影响数据处理速度。然而,现有的数据融合方法大多是针对小规模数据,目前针对海量的多源异构数据,为了提高数据处理速度,迫切需要一种高效的数据融合方法。

技术实现思路

[0003]本公开提供了一种数据融合方法、装置、电子设备以及存储介质。
[0004]根据本公开的一方面,提供了一种数据融合方法,包括:
[0005]从不同数据源获取待融合数据,所述待融合数据包括数据格式不统一的异构数据;
[0006]对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据;
[0007]对所述属性数据进行属性分级处理,得到属性分级数据;
[0008]根据所述属性分级数据进行数据融合处理,得到数据融合结果。
[0009]根据本公开的一方面,提供了一种搜索方法,包括:
[0010]从获取的搜索请求中提取出搜索关键词;
[0011]将所述搜索关键词发送给后台服务器,其中,所述后台服务器存储有根据上述数据融合方法得到的数据融合结果;
[0012]接收根据所述搜索关键词匹配所述数据融合结果得到的搜索结果。
[0013]根据本公开的另一方面,提供了一种数据融合装置,包括:
[0014]数据获取单元,用于从不同数据源获取待融合数据,所述待融合数据包括数据格式不统一的异构数据;
[0015]数据转换单元,用于对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据;
[0016]数据分级单元,用于对所述属性数据进行属性分级处理,得到属性分级数据;
[0017]数据融合单元,用于根据所述属性分级数据进行数据融合处理,得到数据融合结果。
[0018]根据本公开的另一方面,提供了一种搜索装置,包括:
[0019]关键词提取单元,用于从获取的搜索请求中提取出搜索关键词;
[0020]关键词发送单元,用于将所述搜索关键词发送给后台服务器,其中,所述后台服务器存储有根据上述数据融合方法得到的数据融合结果;
[0021]搜索结果接收单元,用于接收根据所述搜索关键词匹配所述数据融合结果得到的
搜索结果。
[0022]根据本公开的另一方面,提供了一种电子设备,包括:
[0023]至少一个处理器;以及
[0024]与该至少一个处理器通信连接的存储器;其中,
[0025]该存储器存储有可被该至少一个处理器执行的指令,该指令被该至少一个处理器执行,以使该至少一个处理器能够执行本公开任意一实施例所提供的方法。
[0026]根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,该计算机指令用于使该计算机执行本公开任意一项实施例所提供的方法。
[0027]根据本公开的另一方面,提供了一种计算机程序产品,包括计算机指令,该计算机指令被处理器执行时实现本公开任意一项实施例所提供的方法。
[0028]采用本公开,可以从不同数据源获取待融合数据,该待融合数据包括数据格式不统一的异构数据,对该待融合数据的属性字段进行数据格式的转换处理,可以得到数据格式统一的属性数据。对该属性数据进行属性分级处理,可以得到属性分级数据,根据该属性分级数据进行数据融合处理,得到数据融合结果,从而可以对海量的多源异构数据进行数据融合,以提高数据处理速度。
[0029]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0030]附图用于更好地理解本方案,不构成对本公开的限定。其中:
[0031]图1是根据本公开实施例的一应用场景的示意图;
[0032]图2是根据本公开实施例的数据融合方法的流程示意图;
[0033]图3是根据本公开实施例的搜索方法的流程示意图;
[0034]图4是根据本公开实施例的应用示例中分级融合的示意图;
[0035]图5是根据本公开实施例的应用示例中对搜索请求进行解析的示意图;
[0036]图6是根据本公开实施例的应用示例中搜索场景的示意图;
[0037]图7

图8是根据本公开实施例的应用示例中显示搜索结果的示意图;
[0038]图9是根据本公开实施例的数据融合装置的组成结构示意图;
[0039]图10是根据本公开实施例的搜索装置的组成结构示意图;
[0040]图11是用来实现本公开实施例的数据融合方法或搜索方法的电子设备的框图。
具体实施方式
[0041]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0042]本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中
的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。本文中术语“第一”、“第二”表示指代多个类似的技术用语并对其进行区分,并不是限定顺序的意思,或者限定只有两个的意思,例如,第一特征和第二特征,是指代有两类/两个特征,第一特征可以为一个或多个,第二特征也可以为一个或多个。
[0043]另外,为了更好的说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
[0044]图1是根据本公开实施例的一应用场景的示意图,如图1所示,包括:后台服务器101执行的数据融合处理,以及客户端105执行的搜索处理两部分。客户端105执行的搜索处理仅为数据操作的一个示例,客户端也可以基于后台服务器执行的数据融合处理进行其他数据操作。其中,该数据融合处理的过程中,后台服务器101可以从不同数据源(如多家平台)获取待融合数据,对该待融合数据进行诸如数据格式标准化的数据预处理102后进行数据融合处理103,以得到数据融合结果,将该数据融合结果入库到数据库105中,该数据库105支持在线或离线搜索。该搜索处理的过程中,用户可以在客户本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据融合方法,包括:从不同数据源获取待融合数据,所述待融合数据包括数据格式不统一的异构数据;对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据;对所述属性数据进行属性分级处理,得到属性分级数据;根据所述属性分级数据进行数据融合处理,得到数据融合结果。2.根据权利要求1所述的方法,其中,所述对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据,包括:所述属性字段包括所述待融合数据中用于描述兴趣点POI属性的待处理字段的情况下,提取用于描述POI属性标准化的第一模板;根据所述第一模板对所述待处理字段进行数据格式的转换处理,得到所述属性数据。3.根据权利要求2所述的方法,其中,对所述属性数据进行属性分级处理,得到属性分级数据,包括:提取用于描述POI属性分级的第二模板;根据所述第二模板对所述属性数据进行属性分级处理,得到属性分级数据。4.根据权利要求3所述的方法,还包括:根据POI所属的行政区域、POI所对应的地理坐标、包括POI属性描述的富媒体信息中的至少一种信息,得到所述POI属性分级。5.根据权利要求1

4中任一项所述的方法,其中,所述根据所述属性分级数据进行数据融合处理,得到数据融合结果,包括:根据POI身份标识对所述属性分级数据进行数据融合处理,将所述属性分级数据映射到具备所述POI身份标识的地图上,得到数据融合结果。6.根据权利要求5所述的方法,还包括:根据所述属性分级数据对应的分级融合优先级,进行所述数据融合处理。7.一种搜索方法,包括:从获取的搜索请求中提取出搜索关键词;将所述搜索关键词发送给后台服务器,其中,所述后台服务器存储有根据上述权利要求1

6所述的数据融合方法得到的数据融合结果;接收根据所述搜索关键词匹配所述数据融合结果得到的搜索结果。8.根据权利要求7所述的方法,还包括:显示所述搜索结果;所述搜索关键词包括兴趣点POI的情况下,所述搜索结果用于表征不同资源方对同一个POI的融合结果。9.根据权利要求8所述的方法,其中,所述显示所述搜索结果,包括:在客户端显示界面的第一区域,对所述不同资源方对同一个POI提供的多个基础信息融合后得到第一信息;在所述客户端显示界面的第二区域,对所述不同资源方对同一个POI提供的多个比价信息融合后得到多个第二信息;根据所述第一信息及所述多个第二信息进行图文渲染,显示所述搜索结果。
10.一种数据融合装置,包括:数据获取单元,用于从不同数据源获取待融合数据,所述待融合数据包括数据格式不统一的异构数据;数据转换单元,用于对所述待融合数据的属性字段进行数据格式的转换处理,得到数据格式统一的属性数据;数据分级单元,用于对所述属性数据进行属性分级处理,得到属性分级数据;数据融合单元,用于根据所述属性分级数据进行数...

【专利技术属性】
技术研发人员:宋林鹏郑智垚
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1