融合数据处理方法及装置制造方法及图纸

技术编号:18084123 阅读:36 留言:0更新日期:2018-05-31 12:35
本申请实施例公开了一种融合数据处理方法及装置。方法包括:线上系统获取多种异构数据源;线上系统使用价值模型集合处理多种异构数据源,得到每种异构数据源的统一评价指标;线上系统获取融合策略模型的损失量化评价指标;线上系统将每种异构数据源的统一评价指标和损失量化评价指标输入融合策略模型,得到多种异构数据源的融合排序推荐结果。本申请实施例有效解决有约束下多种异构数据全局最优融合排序问题。

【技术实现步骤摘要】
融合数据处理方法及装置
本申请涉及移动终端
,具体涉及融合数据处理方法及装置。
技术介绍
异构数据源混排是指在搜索、推荐等列表类展现排序中,需要在一个列表中融合多种数据源以达成不同产品目标或用户体验,如在搜索中,自然结果和广告混排,满足用户体验。在有列表展现的产品中,展现位置有限,如何合理的融合多种异构数据源,使得全局最优是一个难题。
技术实现思路
本申请实施例提供了融合数据处理方法及装置,可以将多种数据源通过价值模型进行对齐,再结合融合策略模型进行融合排序,有效解决有约束下多种异构数据全局最优融合排序问题。第一方面,本申请实施例提供一种融合数据处理方法,应用于信息推荐系统,所述信息推荐系统包括线上系统,所述线上系统包括价值模型集合和融合策略模型,所述方法包括:所述线上系统获取多种异构数据源;所述线上系统使用所述价值模型集合处理所述多种异构数据源,得到每种异构数据源的统一评价指标;所述线上系统获取所述融合策略模型的损失量化评价指标;所述线上系统将所述每种异构数据源的统一评价指标和所述损失量化评价指标输入所述融合策略模型,得到所述多种异构数据源的融合排序推荐结果。第二方面,本申请实施例提供一种融合数据处理装置,应用于信息推荐系统,所述信息推荐系统包括线上系统,所述线上系统包括价值模型集合和融合策略模型,所述融合数据处理装置包括获取单元、使用单元和输入处理单元,其中,所述获取单元,用于获取多种异构数据源;所述使用单元,用于使用所述价值模型集合处理所述多种异构数据源,得到每种异构数据源的统一评价指标;所述获取单元,还用于获取所述融合策略模型的损失量化评价指标;所述输入处理单元,用于将所述每种异构数据源的统一评价指标和所述损失量化评价指标输入所述融合策略模型,得到所述多种异构数据源的融合排序推荐结果。第三方面,本申请实施例提供一种移动终端,包括处理器、存储器、通信接口以及一个或多个程序,其中,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。第四方面,本申请实施例提供了一种计算机可读存储介质,其中,所述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤,所述计算机包括移动终端。第五方面,本申请实施例提供了一种计算机程序产品,其中,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包,所述计算机包括移动终端。可以看出,本申请实施例中,线上系统首先获取多种异构数据源;其次,使用价值模型集合处理多种异构数据源,得到每种异构数据源的统一评价指标;再次,获取融合策略模型的损失量化评价指标;最后,将每种异构数据源的统一评价指标和损失量化评价指标输入融合策略模型,得到多种异构数据源的融合排序推荐结果。可见,线上系统能够将多种数据源通过价值模型进行对齐,再结合融合策略模型进行融合排序,有效解决有约束下多种异构数据全局最优融合排序问题。附图说明下面将对本申请实施例所涉及到的附图作简单地介绍。图1是一种智能手机的程序运行空间的示意图;图2是本申请实施例提供的一种融合数据处理方法的流程示意图;图3是本申请实施例公开的一种融合数据处理方法的流程示意图;图4是本申请实施例公开的一种融合数据处理方法的流程示意图;图5是本申请实施例公开的一种移动终端的结构示意图;图6是本申请实施例公开的一种移动终端的功能单元组成框图。具体实施方式为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。示例性的,如图1所示,图1是本申请实施例提供的一种信息推荐系统100的系统架构图。该信息推荐系统100的物理形态可以是服务器集群和/或云计算资源,此处不做唯一限定。该信息推荐系统100具体包括线上系统10和线下系统20,线下系统可以是服务器集群,线上系统可以是云计算资源或者服务器集群,其中,线上系统10包括训练好的目标模型11和预估器12,该训练好的目标模型11用于处理实时在线的推荐任务,预估器12用于结合训练好的目标模型11和推荐任务关联的参考特征数据生成预估先验结果,线下系统20包括训练数据库21、待训练的目标模型22,线下系统20会定时使用训练数据库21中的训练数据来训练待训练的目标模型22,得到训练好的目标模型11,并将该训练好的目标模型11推送给线上系统10使用。一般设计中,融合排序主要有两种:1.位置固定排序:如在搜索结果页里面,有广告和自然结果两种数据源,前面几位固定是广告展位,其他位置是自然结果展位。固定位置缺陷是无法做到个性化,难以达到全局最优。2.人工规则位置分配:通过一些人工干预手段,动态分配不同数据源位置;如在搜索结果页里,如果某些用户对广告比较反感,则少出广告,反之多出广告。人工规则动态位置分配相比于固定位置有优势,但依赖于个人经验只能涉及少量维度,无法精细控制,难以达到全局最优。针对上述情况,本申请实施例提出一种融合数据处理方法,该方法中,线上系统首先获取多种异构数据源;其次,使用价值模型集合处理多种异构数据源,得到每种异构数据源的统一评价指标;再次,获取融合策略模型的损失量化评价指标;最后,将每种异构数据源的统一评价指标和损失量化评价指标输入融合策略模型,得到多种异构数据源的融合排序推荐结果。可见,线上系统能够将多种数据源通过价值模型进行对齐,再结合融合策略模型进行融合排序,有效解决有约束下多种异构数据全局最优融合排序问题。下面结合附图对本申请实施例进行介绍。请参阅图2,图2是本申请实施例提供了一种融合数据处理方法的流程示意图,应用于信息推荐系统,所述信息推荐系统包括线上系统,所述线上系统包括价值模型集合和融合策略模型,如图所示,本融合数据处理方法包括:S201,所述线上系统获取多种异构数据源。其中,所述异构数据源包括图片、网页图标icon、网页框等。S202,所述线上系统使用所述价值模型集合处理所述多种异构数据源,得本文档来自技高网
...
融合数据处理方法及装置

【技术保护点】
一种融合数据处理方法,其特征在于,应用于信息推荐系统,所述信息推荐系统包括线上系统,所述线上系统包括价值模型集合和融合策略模型,所述方法包括:所述线上系统获取多种异构数据源;所述线上系统使用所述价值模型集合处理所述多种异构数据源,得到每种异构数据源的统一评价指标;所述线上系统获取所述融合策略模型的损失量化评价指标;所述线上系统将所述每种异构数据源的统一评价指标和所述损失量化评价指标输入所述融合策略模型,得到所述多种异构数据源的融合排序推荐结果。

【技术特征摘要】
1.一种融合数据处理方法,其特征在于,应用于信息推荐系统,所述信息推荐系统包括线上系统,所述线上系统包括价值模型集合和融合策略模型,所述方法包括:所述线上系统获取多种异构数据源;所述线上系统使用所述价值模型集合处理所述多种异构数据源,得到每种异构数据源的统一评价指标;所述线上系统获取所述融合策略模型的损失量化评价指标;所述线上系统将所述每种异构数据源的统一评价指标和所述损失量化评价指标输入所述融合策略模型,得到所述多种异构数据源的融合排序推荐结果。2.根据权利要求1所述的方法,其特征在于,所述线上系统使用所述价值模型集合处理所述多种异构数据源,得到每种异构数据源的统一评价指标,包括:所述线上系统通过查询所述价值模型集合,获取所述每种异构数据源对应的价值模型,所述价值模型集合包括异构数据源的数据类型和价值模型之间的对应关系;所述线上系统获取所述每种异构数据源对应的价值模型所需要的特征参数;所述线上系统确定所述每种异构数据源对应的价值模型所关联的专属预估器;所述线上系统将所述每种异构数据源的所述特征数据和所述价值模型输入所述专属预估器,得到所述每种异构数据源对应的统一评价指标。3.根据权利要求1或2所述的方法,其特征在于,所述信息推荐系统还包括线下系统;所述线上系统获取所述融合策略模型的损失量化评价指标,包括:所述线上系统获取所述融合策略模型处理预设推荐任务的预估先验结果;所述线上系统接收来自所述线下系统的所述融合策略模型处理所述预设推荐任务的实际后验结果;所述线上系统根据所述预估先验结果和所述实际后验结果确定所述融合策略模型的损失量化评价指标。4.根据权利要求3所述的方法,其特征在于,所述线上系统获取所述融合策略模型处理预设推荐任务的预估先验结果,包括:所述线上系统获取所述融合策略模型处理所述预设推荐任务所需要的特征参数;所述线上系统将所述特征参数和所述融合策略模型输入至预设的预估器,得到所述融合策略模型处理预设推荐任务的预估先验结果。5.根据权利要求1-4任一项所述的方法,其特征在于,所述线上系统将所述每种异构数据源的统一评价指标和所述损失量化评价指标输入所述融合策略模型,得到所述多种异构数据源的融合排序推荐结果,包括:所述线上系统根据所述每种异构数据源的统一评价指标生成排序集合,所述排序结合包括多个数据源序列,每个数据源序列包括所述多种异构数据源,且任意两个数据源序...

【专利技术属性】
技术研发人员:黄树东
申请(专利权)人:广东欧珀移动通信有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1