本申请公开了一种基于多模态融合的产品推荐方法及装置，可用于大数据技术领域，所述方法包括：采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；根据所述产品推荐策略设置所述产品展示界面得到产品推荐页面并反馈给用户。本申请通过收集用户的多模态信息，分析用户在与应用进行交互时的实时情感状态，根据其情感状态收集待优化点以进行产品推荐，从而实现主动改善用户体验的效果。用户体验的效果。用户体验的效果。
【技术实现步骤摘要】
基于多模态融合的产品推荐方法及装置
[0001]本申请涉及产品推荐
，特别涉及大数据
，尤其涉及一种基于多模态融合的产品推荐方法及装置。
技术介绍
[0002]本部分旨在为权利要求书中陈述的本申请实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
[0003]如今智能手机不断普及，同时种类繁多的应用不断在人们的生活中扮演着越来越重要的角色。人们平均每天花在不同应用上的时间越来越长，各厂家也都在持续优化产品推荐，力求给予用户更好的体验。但目前产品推荐的优化点多为用户主动反馈，或者根据大量测试发现优化点。这种传统方式较为被动。
技术实现思路
[0004]本申请的一个目的在于提供一种基于多模态融合的产品推荐方法，通过收集用户的多模态信息，分析用户在与应用进行交互时的实时情感状态，根据其情感状态收集待优化点以进行产品推荐，从而实现主动改善用户体验的效果。本申请的另一个目的在于提供一种基于多模态融合的产品推荐装置。本申请的再一个目的在于提供一种计算机设备。本申请的还一个目的在于提供一种可读介质。本申请的还一个目的在于提供一种计算机程序产品。
[0005]为了达到以上目的，本申请一方面公开了一种基于多模态融合的产品推荐方法，包括：
[0006]采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；
[0007]根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；
[0008]根据所述产品推荐策略设置所述产品展示界面得到产品推荐页面并反馈给用户。
[0009]优选的，所述对所述多模态信息进行分析处理得到用户的情感类型和气质类型具体包括：
[0010]通过预设情感类型检测模型对所述多模态信息进行检测得到用户的情感类型；
[0011]通过预设气质类型检测模型对所述多模态信息进行检测得到用户的气质类型。
[0012]优选的于，进一步包括在采集用户的多模态信息，之前：
[0013]采集用户的历史多模态信息得到训练数据；
[0014]通过训练数据和对应的情感类型标签对预设第一检测模型进行训练得到所述情感类型检测模型；
[0015]通过训练数据和对应的气质类型标签对预设第二检测模型进行训练得到所述气质类型检测模型。
[0016]优选的，所述根据用户的情感类型确定对应的产品推荐策略具体包括：
[0017]当用户的情感类型为比较积极或非常积极时，维持当前推荐的产品；
[0018]当用户的情感类型为比较消极或非常消极时，修改向用户推荐的产品；
[0019]当用户的情感类型超过预设时间处于比较消极或非常消极，暂停向用户推荐产品；
[0020]当用户的情感类型为平静时，收集用户的产品交易信息。
[0021]优选的，所述根据用户的气质类型确定对应的产品展示界面具体包括：
[0022]根据用户的气质类型确定对应的产品展示布局和产品展示形式；
[0023]根据所述产品展示布局和产品展示形式形成所述产品展示界面。
[0024]本申请还公开了一种基于多模态融合的产品推荐装置，包括：
[0025]类型判断模块，用于采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；
[0026]产品推荐模块，用于根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；
[0027]界面展示模块，用于根据所述产品推荐策略设置所述产品展示界面得到产品推荐页面并反馈给用户。
[0028]优选的，所述对所述多模态信息进行分析处理得到用户的情感类型和气质类型具体包括：
[0029]通过预设情感类型检测模型对所述多模态信息进行检测得到用户的情感类型；
[0030]通过预设气质类型检测模型对所述多模态信息进行检测得到用户的气质类型。
[0031]优选的，进一步包括在采集用户的多模态信息，之前：
[0032]采集用户的历史多模态信息得到训练数据；
[0033]通过训练数据和对应的情感类型标签对预设第一检测模型进行训练得到所述情感类型检测模型；
[0034]通过训练数据和对应的气质类型标签对预设第二检测模型进行训练得到所述气质类型检测模型。
[0035]优选的，所述根据用户的情感类型确定对应的产品推荐策略具体包括：
[0036]当用户的情感类型为比较积极或非常积极时，维持当前推荐的产品；
[0037]当用户的情感类型为比较消极或非常消极时，修改向用户推荐的产品；
[0038]当用户的情感类型超过预设时间处于比较消极或非常消极，暂停向用户推荐产品；
[0039]当用户的情感类型为平静时，收集用户的产品交易信息。
[0040]优选的，所述根据用户的气质类型确定对应的产品展示界面具体包括：
[0041]根据用户的气质类型确定对应的产品展示布局和产品展示形式；
[0042]根据所述产品展示布局和产品展示形式形成所述产品展示界面。
[0043]本申请还公开了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
[0044]本申请还公开了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述方法。
[0045]本申请还公开了一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现上述方法。
[0046]本申请基于多模态融合的产品推荐方法采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；根据所述产品推荐策略设置所述产品展示界面得到产品推荐页面并反馈给用户。从而，本申请通过收集用户的多模态信息，分析用户在与应用进行交互时的实时情感状态，根据其情感状态收集待优化点以进行产品推荐，从而实现主动改善用户体验的效果。
附图说明
[0047]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
[0048]图1示出本申请基于多模态融合的产品推荐方法具体实施例的流程图；
[0049]图2示出本申请基于多模态融合的产品推荐方法具体实施例S100的流程图；
[0050]图3示出本申请基于多模态融合的产品推荐方法具体实施例S000的流程图；
[0051]图4示出本申请基于多模态融合的产品推荐方法具体实施例S200的流程图；
[0052]图5本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于多模态融合的产品推荐方法，其特征在于，包括：采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；根据所述产品推荐策略设置所述产品展示界面得到产品推荐页面并反馈给用户。2.根据权利要求1所述的基于多模态融合的产品推荐方法，其特征在于，所述对所述多模态信息进行分析处理得到用户的情感类型和气质类型具体包括：通过预设情感类型检测模型对所述多模态信息进行检测得到用户的情感类型；通过预设气质类型检测模型对所述多模态信息进行检测得到用户的气质类型。3.根据权利要求2所述的基于多模态融合的产品推荐方法，其特征在于，进一步包括在采集用户的多模态信息，之前：采集用户的历史多模态信息得到训练数据；通过训练数据和对应的情感类型标签对预设第一检测模型进行训练得到所述情感类型检测模型；通过训练数据和对应的气质类型标签对预设第二检测模型进行训练得到所述气质类型检测模型。4.根据权利要求1所述的基于多模态融合的产品推荐方法，其特征在于，所述根据用户的情感类型确定对应的产品推荐策略具体包括：当用户的情感类型为比较积极或非常积极时，维持当前推荐的产品；当用户的情感类型为比较消极或非常消极时，修改向用户推荐的产品；当用户的情感类型超过预设时间处于比较消极或非常消极，暂停向用户推荐产品；当用户的情感类型为平静时，收集用户的产品交易信息。5.根据权利要求1所述的基于多模态融合的产品推荐方法，其特征在于，所述根据用户的气质类型确定对应的产品展示界面具体包括：根据用户的气质类型确定对应的产品展示布局和产品展示形式；根据所述产品展示布局和产品展示形式形成所述产品展示界面。6.一种基于多模态融合的产品推荐装置，其特征在于，包括：类型判断模块，用于采集用户的多模态信息，对所述多模态信息进行分析处理得到用户的情感类型和气质类型；产品推荐模块，用于根据用户的情感类型确定对应的产品推荐策略，根据用户的气质类型确定对应的产品展示界面；界面...
【专利技术属性】
技术研发人员：张秋瑜，
申请(专利权)人：中国银行股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。