视频购物的实现方法、装置及用户终端制造方法及图纸

本发明专利技术提供一种视频购物的实现方法、装置及用户终端。所述方法包括：在播放视频时，接收用户发出的表达购买意愿的语音指令；从所述语音指令中提取用户欲购买的物品名称；根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；向用户提示欲购买的物品是否为当前匹配到的物品；当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器；当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。本发明专利技术能够在视频播放过程中减少用户介入，更加方便快捷地实现视频购物，且能够保证用户流畅地观看视频。

【技术实现步骤摘要】
视频购物的实现方法、装置及用户终端
本专利技术涉及人机交互
，尤其涉及一种视频购物的实现方法、装置及用户终端。
技术介绍
随着科技的飞速发展以及人们生活和工作需求的日益多样化，视频购物逐渐成为人们生活和工作中的一种新兴的购物方式。目前，视频购物主要有以下几种方式：方式1：用户终端接受专门的购物语音控制指令，在电视截屏图像中提取多个待选物品，并直接向用户推送备选购物商品信息。方式2：用户通过手势点选视频中物品所在区域，发起购物请求。在实现本专利技术的过程中，专利技术人发现现有技术中至少存在如下技术问题：方式1未能提取用户真正感兴趣的物品类别，需要用户通过UI界面在多个备选物品中进行选择，增加了操作的复杂度，使得用户不能流畅地观看视频；方式2需要用户点选待选物品，影响已有的视频播放操作流程。
技术实现思路
本专利技术提供的视频购物的实现方法、装置及用户终端，能够在视频播放过程中减少用户介入，更加方便快捷地实现视频购物，且能够保证用户流畅地观看视频。第一方面，本专利技术提供一种视频购物的实现方法，包括：在播放视频时，接收用户发出的表达购买意愿的语音指令；从所述语音指令中提取用户欲购买的物品名称；根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；向用户提示欲购买的物品是否为当前匹配到的物品；当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器；当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。可选地，所述从所述语音指令中提取用户欲购买的物品名称包括：将所述语音指令转换为文字；从转换后的文字中提取出用户欲购买的物品名称。可选地，所述根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品包括：使用预置的神经网络模型在当前视频帧上匹配与所述欲购买的物品名称相对应的物品。可选地，所述向用户提示欲购买的物品是否为当前匹配到的物品包括：采用图形用户界面的方式向用户提示欲购买的物品是否为当前匹配到的物品。可选地，所述采用图形用户界面的方式向用户提示欲购买的物品是否为当前匹配到的物品包括：直接在视频中待选物品外加框，或者在视频中待选物品上加蒙板，或者通过弹出窗口显示待选物品。可选地，所述方法还包括：当未接收到用户发出的确认指令时，在持续播放视频的同时继续根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品，并向用户提示欲购买的物品是否为当前匹配到的物品。可选地，所述方法还包括：当在预设时间内未接收到用户发出的确认指令时，或者用户选择放弃购买时，停止向用户提示欲购买的物品是否为当前匹配到的物品。第二方面，本专利技术提供一种视频购物的实现装置，包括：接收单元，用于在播放视频时，接收用户发出的表达购买意愿的语音指令；提取单元，用于从所述语音指令中提取用户欲购买的物品名称；匹配单元，用于根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；提示单元，用于向用户提示欲购买的物品是否为当前匹配到的物品；发送单元，当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器；显示单元，用于当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。可选地，所述提取单元包括：转换模块，用于将所述语音指令转换为文字；提取模块，用于从转换后的文字中提取出用户欲购买的物品名称。可选地，所述匹配单元，用于使用预置的神经网络模型在当前视频帧上匹配与所述欲购买的物品名称相对应的物品。可选地，所述提示单元，用于采用图形用户界面的方式向用户提示欲购买的物品是否为当前匹配到的物品。可选地，所述提示单元，用于直接在视频中待选物品外加框，或者在视频中待选物品上加蒙板，或者通过弹出窗口显示待选物品。可选地，所述匹配单元，还用于当未接收到用户发出的确认指令时，在持续播放视频的同时继续根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；所述提示单元，还用于继续向用户提示欲购买的物品是否为当前匹配到的物品。可选地，所述提示单元，还用于当在预设时间内未接收到用户发出的确认指令时，或者用户选择放弃购买时，停止向用户提示欲购买的物品是否为当前匹配到的物品。第三方面，本专利技术提供一种用户终端，所述用户终端包括上述视频购物的实现装置。本专利技术实施例提供的视频购物的实现方法、装置及用户终端，在播放视频时，接收用户发出的表达购买意愿的语音指令并从中提取用户欲购买的物品名称，根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品，并向用户提示欲购买的物品是否为当前匹配到的物品，当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器，当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。与现有技术相比，本专利技术借助成熟的自然语言识别方案进行交互，识别购买意愿，无需专门的语音指令，用户操作更加方便快捷；在标识用户感兴趣的物品的同时不影响正常的视频观看，不影响正常的视频播放操作流程，无需视频播放应用配合修改；使用更加自然的交流方式实现精确的购物需求导入，减少用户介入，提升用户购买意愿导入成真实购买动作的成功率。附图说明图1为本专利技术一实施例视频购物的实现方法的流程图；图2为本专利技术一实施例视频购物的实现装置的结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术提供一种视频购物的实现方法，如图1所示，所述方法包括：S11、在播放视频时，接收用户发出的表达购买意愿的语音指令。S12、从所述语音指令中提取用户欲购买的物品名称。S13、根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品。S14、向用户提示欲购买的物品是否为当前匹配到的物品。S15、当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器。S16、当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。本专利技术实施例提供的视频购物的实现方法，在播放视频时，接收用户发出的表达购买意愿的语音指令并从中提取用户欲购买的物品名称，根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品，并向用户提示欲购买的物品是否为当前匹配到的物品，当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器，当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。与现有技术相比，本专利技术借助成熟的自然语言识别方案进行交互，识别购买意愿，无需专门的语音指令，用户操作更加方便快捷；在标识用户感兴趣的物品的同时不影响正常的视频观看，不影响正常的视频播放操作流程，无需视频播放应用配合修改；使用更加自然的交流方式实现精确的购物需求导入，减少用户介入，提升用户购买意愿导入成真实购买动作的成功率。下面对本专利技术视频购物的实现方法进行详细说明。首先，用户终端中预置一个已经训练好的神经网络模型用于完成图像的物品检测和分类，这个网络模型可以但不限于Faster-RCNN/YOLO或其他目标检测本文档来自技高网...

【技术保护点】
1.一种视频购物的实现方法，其特征在于，包括：在播放视频时，接收用户发出的表达购买意愿的语音指令；从所述语音指令中提取用户欲购买的物品名称；根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；向用户提示欲购买的物品是否为当前匹配到的物品；当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器；当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。

【技术特征摘要】
1.一种视频购物的实现方法，其特征在于，包括：在播放视频时，接收用户发出的表达购买意愿的语音指令；从所述语音指令中提取用户欲购买的物品名称；根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品；向用户提示欲购买的物品是否为当前匹配到的物品；当接收到用户发出的确认指令后，将当前匹配到的物品图像以及购买指令发送到后台服务器；当接收到后台服务器反馈的购买信息列表后，暂停视频播放并显示购买界面。2.根据权利要求1所述的方法，其特征在于，所述从所述语音指令中提取用户欲购买的物品名称包括：将所述语音指令转换为文字；从转换后的文字中提取出用户欲购买的物品名称。3.根据权利要求1或2所述的方法，其特征在于，所述根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品包括：使用预置的神经网络模型在当前视频帧上匹配与所述欲购买的物品名称相对应的物品。4.根据权利要求1所述的方法，其特征在于，所述向用户提示欲购买的物品是否为当前匹配到的物品包括：采用图形用户界面的方式向用户提示欲购买的物品是否为当前匹配到的物品。5.根据权利要求4所述的方法，其特征在于，所述采用图形用户界面的方式向用户提示欲购买的物品是否为当前匹配到的物品包括：直接在视频中待选物品外加框，或者在视频中待选物品上加蒙板，或者通过弹出窗口显示待选物品。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：当未接收到用户发出的确认指令时，在持续播放视频的同时继续根据所述用户欲购买的物品名称，在当前视频帧上匹配对应的物品，并向用户提示欲购买的物品是否为当前匹配到的物品。7.根据权利要求1或6所述的方法，其特征在于，所述方法还包括：当在预设时间内未接收到用户发出的确认指令时，或者用户选择放弃购买时，停止向用户提示欲购买的物品是否为当前匹配到的物品。8.一种视频购物的实现装置，其特征在于...

【专利技术属性】
技术研发人员：李晨涛，孟祥鹏，廖仁亿，
申请(专利权)人：展讯通信上海有限公司，
类型：发明
国别省市：上海,31