视频消息转发、视频消息搜索方法和设备技术

技术编号:25921805 阅读:12 留言:0更新日期:2020-10-13 10:42
本申请实施例公开了视频消息转发、视频消息搜索方法和设备。视频消息转发方法的一具体实施方式包括:接收视频消息转发请求,其中,视频消息转发请求中包括视频消息;从视频消息中分割关键区域的消息图片集合;提取消息图片集合的消息特征;将视频消息和消息特征对应转发给即时通信应用的客户端。该实施方式在接收到视频消息转发请求时,将视频消息和消息特征对应转发,能够使即时通信应用的客户端在接收视频消息的同时,也能够获取与视频消息相关的消息特征。

【技术实现步骤摘要】
视频消息转发、视频消息搜索方法和设备
本申请实施例涉及计算机
,具体涉及视频消息转发、视频消息搜索方法和设备。
技术介绍
即时通信应用是通过网络来实现即时通信的软件。通常,即时通信应用的用户可以通过在即时通信应用中的聊天会话中发送或接收消息来实现交流。其中,消息可以包括但不限于文字消息、语音消息、图片消息和视频消息等等。对于文字消息和语音消息,能够采用在搜索框中输入文字的方式进行内容搜索。随着网络基础设施的改善,用户在即时通信应用中发送的视频消息的比例正在逐渐提升。然而,当前的即时通信应用尚不支持对视频消息的内容搜索。
技术实现思路
本申请实施例提出了视频消息转发、视频消息搜索方法和设备。第一方面,本申请实施例提供了一种视频消息转发方法,应用于即时通信应用的服务端,包括:接收视频消息转发请求,其中,视频消息转发请求中包括视频消息;从视频消息中分割关键区域的消息图片集合;提取消息图片集合的消息特征;将视频消息和消息特征对应转发给即时通信应用的客户端。在一些实施例中,从视频消息中分割关键区域的消息图片集合,包括:将视频消息输入至区域分割子模型,输出消息图片集合。在一些实施例中,将视频消息输入至区域分割子模型,输出消息图片集合,包括:利用区域分割子模型提取视频消息的消息关键帧集合,以及对消息关键帧集合进行关键区域分割,生成消息图片集合。在一些实施例中,提取消息图片集合的消息特征,包括:将消息图片集合输入至特征提取子模型,输出消息特征。在一些实施例中,将消息图片集合输入至特征提取子模型,输出消息特征,包括:利用特征提取子模型对消息图片集合进行语义分析,得到消息图片集合的语义描述特征,以及对消息图片集合进行频域特征提取,得到消息图片集合的频域特征。在一些实施例中,将视频消息和消息特征对应转发给即时通信应用的客户端,包括:将消息特征附加到视频消息中,生成附加特征视频消息,以及将附加特征视频消息转发给即时通信应用的客户端。第二方面,本申请实施例提供了一种视频消息搜索方法,应用于即时通信应用的客户端,包括:采集视频搜索信息;获取视频搜索信息对应的信息特征;将信息特征在预先存储的消息特征集合中匹配,确定匹配消息特征;在即时通信应用中展示匹配消息特征对应的视频消息。在一些实施例中,获取视频搜索信息对应的信息特征,包括:将视频搜索信息发送给即时通信应用的服务端;接收即时通信应用的服务端返回的信息特征。在一些实施例中,视频搜索信息是视频信息;以及获取视频搜索信息对应的信息特征,包括:从视频信息中分割关键区域的信息图片集合;提取信息图片集合的信息特征。在一些实施例中,从视频信息中分割关键区域的信息图片集合,包括:将视频信息输入至区域分割子模型,输出信息图片集合。在一些实施例中,将视频信息输入至区域分割子模型,输出信息图片集合,包括:利用区域分割子模型提取视频信息的信息关键帧集合,以及对信息关键帧集合进行关键区域分割,生成信息图片集合。在一些实施例中,视频搜索信息是图片信息;以及获取视频搜索信息对应的信息特征,包括:从图片信息中分割关键区域的信息图片;提取信息图片的信息特征。在一些实施例中,提取信息图片集合或信息图片的信息特征,包括:将信息图片集合或信息图片输入至特征提取子模型,输出信息图片集合或信息图片的信息特征。在一些实施例中,将信息图片集合或信息图片输入至特征提取子模型,输出信息图片集合或信息图片的信息特征,包括:利用特征提取子模型对信息图片集合或信息图片进行语义分析,得到信息图片集合或信息图片的语义描述特征,以及对信息图片集合或信息图片进行频域特征提取,得到信息图片集合或信息图片的频域特征。在一些实施例中,将信息特征在预先存储的消息特征集合中匹配,确定匹配消息特征,包括:计算信息特征与消息特征集合中的消息特征的相似度;基于相似度,从消息特征集合中确定匹配消息特征。第三方面,本申请实施例提供了一种视频消息转发装置,设置于即时通信应用的服务端,包括:接收单元,被配置成接收视频消息转发请求,其中,视频消息转发请求中包括视频消息;分割单元,被配置成从视频消息中分割关键区域的消息图片集合;提取单元,被配置成提取消息图片集合的消息特征;转发单元,被配置成将视频消息和消息特征对应转发给即时通信应用的客户端。在一些实施例中,分割单元进一步被配置成:将视频消息输入至区域分割子模型,输出消息图片集合。在一些实施例中,分割单元进一步被配置成:利用区域分割子模型提取视频消息的消息关键帧集合,以及对消息关键帧集合进行关键区域分割,生成消息图片集合。在一些实施例中,提取单元进一步被配置成:将消息图片集合输入至特征提取子模型,输出消息特征。在一些实施例中,提取单元进一步被配置成:利用特征提取子模型对消息图片集合进行语义分析,得到消息图片集合的语义描述特征,以及对消息图片集合进行频域特征提取,得到消息图片集合的频域特征。在一些实施例中,转发单元进一步被配置成:将消息特征附加到视频消息中,生成附加特征视频消息,以及将附加特征视频消息转发给即时通信应用的客户端。第四方面,本申请实施例提供了一种视频消息搜索装置,设置于即时通信应用的客户端,包括:采集单元,被配置成采集视频搜索信息;获取单元,被配置成获取视频搜索信息对应的信息特征;匹配单元,被配置成将信息特征在预先存储的消息特征集合中匹配,确定匹配消息特征;展示单元,被配置成在即时通信应用中展示匹配消息特征对应的视频消息。在一些实施例中,获取单元进一步被配置成:将视频搜索信息发送给即时通信应用的服务端;接收即时通信应用的服务端返回的信息特征。在一些实施例中,视频搜索信息是视频信息;以及获取单元包括:第一获取子单元,被配置成从视频信息中分割关键区域的信息图片集合;第一提取子单元,被配置成提取信息图片集合的信息特征。在一些实施例中,第一获取子单元进一步被配置成:将视频信息输入至区域分割子模型,输出信息图片集合。在一些实施例中,第一获取子单元进一步被配置成:利用区域分割子模型提取视频信息的信息关键帧集合,以及对信息关键帧集合进行关键区域分割,生成信息图片集合。在一些实施例中,视频搜索信息是图片信息;以及获取单元包括:第二获取子单元,被配置成从图片信息中分割关键区域的信息图片;第二提取子单元,被配置成提取信息图片的信息特征。在一些实施例中,第一提取子单元或第二提取子单元进一步被配置成:将信息图片集合或信息图片输入至特征提取子模型,输出信息图片集合或信息图片的信息特征。在一些实施例中,第一提取子单元或第二提取子单元进一步被配置成:利用特征提取子模型对信息图片集合或信息图片进行语义分析,得到信息图片集合或信息图片的语义描述特征,以及对信息图片集合或信息图片进行频域特征提取,得到信息图片集合或信息图片的频域特征。在一些实施例中,匹配单元进一步被配置成:计算信息特征与消息特征集合中的消息特征的相似度;基于相似度本文档来自技高网...

【技术保护点】
1.一种视频消息转发方法,应用于即时通信应用的服务端,包括:/n接收视频消息转发请求,其中,所述视频消息转发请求中包括视频消息;/n从所述视频消息中分割关键区域的消息图片集合;/n提取所述消息图片集合的消息特征;/n将所述视频消息和所述消息特征对应转发给即时通信应用的客户端。/n

【技术特征摘要】
1.一种视频消息转发方法,应用于即时通信应用的服务端,包括:
接收视频消息转发请求,其中,所述视频消息转发请求中包括视频消息;
从所述视频消息中分割关键区域的消息图片集合;
提取所述消息图片集合的消息特征;
将所述视频消息和所述消息特征对应转发给即时通信应用的客户端。


2.根据权利要求1所述的方法,其中,所述从所述视频消息中分割关键区域的消息图片集合,包括:
将所述视频消息输入至区域分割子模型,输出所述消息图片集合。


3.根据权利要求2所述的方法,其中,所述将所述视频消息输入至区域分割子模型,输出所述消息图片集合,包括:
利用所述区域分割子模型提取所述视频消息的消息关键帧集合,以及对所述消息关键帧集合进行关键区域分割,生成所述消息图片集合。


4.根据权利要求1所述的方法,其中,所述提取所述消息图片集合的消息特征,包括:
将所述消息图片集合输入至特征提取子模型,输出所述消息特征。


5.根据权利要求4所述的方法,其中,所述将所述消息图片集合输入至特征提取子模型,输出所述消息特征,包括:
利用所述特征提取子模型对所述消息图片集合进行语义分析,得到所述消息图片集合的语义描述特征,以及对所述消息图片集合进行频域特征提取,得到所述消息图片集合的频域特征。


6.根据权利要求1-5之一所述的方法,其中,所述将所述视频消息和所述消息特征对应转发给即时通信应用的客户端,包括:
将所述消息特征附加到所述视频消息中,生成附加特征视频消息,以及将所述附加特征视频消息转发给所述即时通信应用的客户端。


7.一种视频消息搜索方法,应用于即时通信应用的客户端,包括:
采集视频搜索信息;
获取所述视频搜索信息对应的信息特征;
将所述信息特征在预先存储的消息特征集合中匹配,确定匹配消息特征;
在即时通信应用中展示所述匹配消息特征对应的视频消息。


8.根据权利要求7所述的方法,其中,所述获取所述视频搜索信息对应的信息特征,包括:
将所述视频搜索信息发送给即时通信应用的服务端;
接收所述即时通信应用的服务端返回的所述信息特征。


9.根据权利要求7所述的方法,其中,所述视频搜索信息是视频信息;以及
所述获取所述视频搜索信息对应的信息特征,包括:
从...

【专利技术属性】
技术研发人员:胡晨鹏
申请(专利权)人:上海掌门科技有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1