商品推荐方法及装置制造方法及图纸

本发明专利技术提供了一种商品推荐方法及装置，涉及电子商务领域，该商品推荐方法，包括：获取目标对象当前的状态信息；将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；依据所述动作值确定各个待推荐商品分别对应的概率标识；依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。应用本发明专利技术提供的商品推荐方法，能够依据目标对象当前的状态信息，为用户推荐商品，能全面感知用户的需求，提高用户的购物体验。

Recommended methods and devices

【技术实现步骤摘要】
商品推荐方法及装置
本专利技术涉及电子商务领域，特别涉及一种商品推荐方法及装置。
技术介绍
随着科学技术的发展，互联网也得到长足发展，互联网的出现，极大的改变了人们的工作和生活方式，使人们的工作和生活变得更加的丰富和便捷，特别的，在电商领域，人们可以通过网络购物平台进行网上购物。例如，购买衣物、食物和化妆品等等各类商品，给人们带来极大的便利。经本专利技术人研究发现，在电商领域中，通常会应用到商品推荐引擎，以用于向用户推荐商品，现有的推荐引擎技术，通常会应用到内容推荐算法、DeepFM算法等，能够依据用户的线上的行为习惯，分析用户感兴趣的商品，进而将用户感兴趣的商品推荐给用户，然而，现有的推荐引擎仅能根据用户的线上行为来为用户进行商品推荐，不能全面的感知用户当前的需求，进而导致商品推荐效果差。
技术实现思路
本专利技术所要解决的技术问题是提供一种商品推荐方法，能够依据目标对象当前的状态信息，为用户推荐商品，能全面感知用户的需求，提高用户的购物体验。本专利技术还提供了一种商品推荐装置，用以保证上述方法在实际中的实现及应用。一种商品推荐方法，包括：获取目标对象当前的状态信息；将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；依据所述动作值确定各个待推荐商品分别对应的概率标识；依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。上述的方法，可选的，所述获取目标对象当前的状态信息，包括：获取当前时刻信息，并在预先建立的各个消息队列中，获取所述目标对象的对象数据；对所述当前时刻信息及所述对象数据进行分析，得到所述目标对象当前所处的环境信息和所述目标对象的行程信息；依据所述环境信息和所述行程信息，得到所述目标对象当前的状态信息。上述的方法，可选的，所述将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值，包括：将所述状态信息输入至预先训练的推荐模型时，获取预先设置的动作空间，所述动作空间包含各个预设的动作值；确定各个所述动作值对应的网络参数；依据各个所述网络参数对所述状态信息进行计算，得到各个所述动作值对应的评分值；将数值最大的评分值对应的动作值，确定为所述状态信息对应的动作值。上述的方法，可选的，所述依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象，包括：确定每个所述概率标识表征的推荐概率值的大小；依据各个所述推荐概率值的大小，对各个待推荐商品进行排序，并按各个所述概率标识表征的推荐概率值由大至小的顺序选取预设数目的待推荐商品；将已选取的各个待推荐商品组成推荐信息；将所述推荐信息推荐至所述目标对象。上述的方法，可选的，还包括：获取所述目标对象的操作信息；基于所述操作信息生成所述状态信息对应的奖励值；依据所述状态信息、所述奖励值以及所述动作值，更新所述推荐模型的网络参数。一种商品推荐装置，包括：第一获取单元，用于获取目标对象当前的状态信息；输入单元，用于将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；确定单元，用于依据所述动作值确定各个待推荐商品分别对应的概率标识；推荐单元，用于依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。上述的装置，可选的，所述第一获取单元，包括：获取子单元，用于获取当前时刻信息，并在预先建立的各个消息队列中，获取所述目标对象的对象数据；分析子单元，用于对所述当前时刻信息及所述对象数据进行分析，得到所述目标对象当前所处的环境信息和所述目标对象的行程信息；生成子单元，用于依据所述环境信息和所述行程信息，得到所述目标对象当前的状态信息。上述的装置，可选的，所述输入单元，包括：输入子单元，用于将所述状态信息输入至预先训练的推荐模型时，获取预先设置的动作空间，所述动作空间包含各个预设的动作值；第一确定子单元，用于确定各个所述动作值对应的网络参数；运算子单元，用于依据各个所述网络参数对所述状态信息进行计算，得到各个所述动作值对应的评分值；第二确定子单元，用于将数值最大的评分值对应的动作值，确定为所述状态信息对应的动作值。上述的装置，可选的，所述推荐单元，包括：第三确定子单元，用于确定每个所述概率标识表征的推荐概率值的大小；排序子单元，用于依据各个所述推荐概率值的大小，对各个待推荐商品进行排序，并按各个所述概率标识表征的推荐概率值由大至小的顺序选取预设数目的待推荐商品；执行子单元，用于将已选取的各个待推荐商品组成推荐信息；推荐子单元，用于将所述推荐信息推荐至所述目标对象。上述的装置，可选的，还包括：第二获取单元，用于获取所述目标对象的操作信息；生成单元，用于依据所述操作信息生成所述状态信息对应的奖励值；更新单元，用于依据所述状态信息、所述奖励值以及所述动作值，更新所述推荐模型的网络参数。经由上述方案可知，本专利技术提供了一种商品推荐方法及装置，通过获取目标对象当前的状态信息；将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；依据所述动作值确定各个待推荐商品分别对应的概率标识；依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。应用本专利技术提供的商品推荐方法，能够依据目标对象当前的状态信息，为用户推荐商品，能全面感知用户的需求，提高用户的购物体验。附图说明为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术提供的一种商品推荐方法的方法流程图；图2为本专利技术提供的一种商品推荐方法的又一方法流程图；图3为本专利技术提供的一种商品推荐方法的又一方法流程图；图4为本专利技术提供的一种商品推荐方法的又一方法流程图；图5为本专利技术提供的一种商品推荐方法的示例图；图6为本专利技术提供的一种商品推荐装置的结构示意图；图7为本专利技术提供的一种电子设备的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术可用于众多通用或专用的计算装置环境或配置中。例如：个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器装置、包括以上任何装置或设备的分布式计算环境等等。本专利技术实施例提供了一种商品推荐方法，该方法本文档来自技高网...

【技术保护点】
1.一种商品推荐方法，其特征在于，包括：/n获取目标对象当前的状态信息；/n将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；/n依据所述动作值确定各个待推荐商品分别对应的概率标识；/n依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。/n

【技术特征摘要】
1.一种商品推荐方法，其特征在于，包括：
获取目标对象当前的状态信息；
将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值；
依据所述动作值确定各个待推荐商品分别对应的概率标识；
依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象。


2.根据权利要求1所述的方法，其特征在于，所述获取目标对象当前的状态信息，包括：
获取当前时刻信息，并在预先建立的各个消息队列中，获取所述目标对象的对象数据；
对所述当前时刻信息及所述对象数据进行分析，得到所述目标对象当前所处的环境信息和所述目标对象的行程信息；
依据所述环境信息和所述行程信息，得到所述目标对象当前的状态信息。


3.根据权利要求1所述的方法，其特征在于，所述将所述状态信息输入至预先训练的推荐模型中，得到与所述状态信息对应的动作值，包括：
将所述状态信息输入至预先训练的推荐模型时，获取预先设置的动作空间，所述动作空间包含各个预设的动作值；
确定各个所述动作值对应的网络参数；
依据各个所述网络参数对所述状态信息进行计算，得到各个所述动作值对应的评分值；
将数值最大的评分值对应的动作值，确定为所述状态信息对应的动作值。


4.根据权利要求1所述的方法，其特征在于，所述依据各个所述概率标识，选取预设数目的待推荐商品推荐至所述目标对象，包括：
确定每个所述概率标识表征的推荐概率值的大小；
依据各个所述推荐概率值的大小，对各个待推荐商品进行排序，并按各个所述概率标识表征的推荐概率值由大至小的顺序选取预设数目的待推荐商品；
将已选取的各个待推荐商品组成推荐信息；
将所述推荐信息推荐至所述目标对象。


5.根据权利要求1所述的方法，其特在于，还包括：
获取所述目标对象的操作信息；
基于所述操作信息生成所述状态信息对应的奖励值；
依据所述状态信息、所述奖励值以及所述动作值，更新所述推荐模型的网络参数。


6.一种商品推荐装置，其特征在于，包括：
第一获取单元，用于获...

【专利技术属性】
技术研发人员：赵国海，
申请(专利权)人：沈阳民航东北凯亚有限公司，
类型：发明
国别省市：辽宁;21