多媒体数据处理方法、装置和设备/终端/服务器制造方法及图纸

本申请实施例提供了一种多媒体数据处理方法、装置和设备/终端/服务器，其中，多媒体数据处理方法包括：第一用户终端获取第二用户终端分享的多媒体内容；对所述多媒体内容进行目标检测，获得目标检测结果，其中，所述目标检测包括对所述多媒体内容进行模板信息检测；根据所述目标检测结果和所述第一用户终端采集的图像，生成增强现实AR对象，并展示所述AR对象。通过本申请实施例，可以有效进行用户间交互，提升交互效果。

【技术实现步骤摘要】
【国外来华专利技术】多媒体数据处理方法、装置和设备/终端/服务器
本申请实施例涉及互联网
，尤其涉及一种多媒体数据处理方法、装置和设备/终端/服务器。
技术介绍
随着互联网技术的发展，多媒体内容的分享成为了扩展社交的主要工具之一，用户通过视频分享等多媒体内容分享手段与其他用户建立交流，从而实现基于内容的社交。目前的多媒体内容分享主要通过即时聊天工具等社交软件实现，但是目前多媒体内容的分享主要通过多媒体内容的播放观看以及评价讨论来实现，用户之间无法通过多媒体内容本身实现信息交互。因此，如何通过对多媒体内容本身的处理实现用户间的有效交互，成为现有技术中亟待解决的技术问题。
技术实现思路
本申请实施例提供了一种多媒体数据处理方法、装置和设备/终端/服务器，以解决上述现有技术中的问题。根据本申请实施例的一个方面，提供了一种多媒体数据处理方法，包括：第一用户终端获取第二用户终端分享的多媒体内容；对所述多媒体内容进行目标检测，获得目标检测结果，其中，所述目标检测包括对所述多媒体内容进行模板信息检测；根据所述目标检测结果和所述第一用户终端采集的图像，生成AR(AugmentedReality，增强现实)对象，并展示所述AR对象。根据本申请实施例的另一个方面，还提供了一种多媒体数据处理装置，设置于第一用户终端，所述装置包括：获取模块，配置为获取第二用户终端分享的多媒体内容；检测模块，配置为对所述多媒体内容进行目标检测，获得目标检测结果，其中，所述目标检测包括对所述多媒体内容进行模板信息检测；生成模块，配置为根据所述目标检测结果和所述第一用户终端采集的图像，生成AR对象，并展示所述AR对象。根据本申请实施例的又一个方面，还提供了一种设备/终端/服务器，包括：一个或多个处理器；存储装置，配置为存储一个或多个程序；当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上所述的多媒体数据处理方法。根据本申请实施例的再一个方面，还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的多媒体数据处理方法。根据本申请实施例提供的技术方案，第一用户终端通过对多媒体内容进行包括模板信息检测在内的目标检测，获得相应的目标检测结果(包括多媒体内容的模板信息)，进而，以第一用户终端采集的图像和目标检测结果为依据，生成相应的AR对象。其中，模板信息可以表征第二用户终端生成所述多媒体内容时使用的多媒体模板的信息，通过模板信息可以了解第二用户终端的用户想通过所述多媒体内容分享的诸如表情、心情、场景等等特征信息，以便第一用户终端的用户生成与分享的多媒体内容风格类似或匹配的AR对象，具有更好的表达效果，通过该AR对象可以进行用户间交互，提升交互效果。附图说明图1是根据本申请实施例一的一种多媒体数据处理方法的步骤流程图；图2是根据本申请实施例二的一种多媒体数据处理方法的步骤流程图；图3是图2所示实施例中的一种多媒体数据处理的结果示意图；图4是图2所示实施例中的另一种多媒体数据处理的结果示意图；图5是根据本申请实施例三的一种多媒体数据处理装置的结构框图；图6是根据本申请实施例四的一种多媒体数据处理装置的结构框图；图7是根据本申请实施例五的一种设备/终端/服务器的结构示意图。具体实施方式下面结合附图(若干附图中相同的标号表示相同的元素)和实施例，对本申请实施例的具体实施方式作进一步详细说明。以下实施例用于说明本申请，但不用来限制本申请的范围。本领域技术人员可以理解，本申请实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。实施例一参照图1，示出了根据本申请实施例一的一种多媒体数据处理方法的步骤流程图。本实施例的多媒体数据处理方法包括以下步骤：步骤S102：第一用户终端获取第二用户终端分享的多媒体内容。本申请实施例中，主要针对通过相应的模板信息生成的多媒体内容进行处理。也即，第二用户终端分享的多媒体内容通过模板信息生成。其中，多媒体内容包括但不限于：图像、音频、视频、文字、AR、特效等内容。模板信息用于提供具有一定规则的拍摄模板的信息，以供生成具有相应主题或风格或模式的多媒体内容，如，各种魔法表情模板、各种场景或剧情模板，等等。模板信息除具有一定规则外，可选地，还可以包括设定的文字、图像、音频、视频中的至少一种。步骤S104：第一用户终端对多媒体内容进行目标检测，获得目标检测结果。其中，所述目标检测包括对多媒体内容进行模板信息检测，以获得多媒体内容使用的模板信息。进一步地，通过模板信息可以了解分享者想要分享的特征信息，如表情、心情、场景等等。步骤S106：第一用户终端根据目标检测结果和第一用户终端采集的图像，生成AR对象，并展示所述AR对象。在获得了多媒体内容使用的模板信息后，第一用户终端的用户可以通过第一用户终端的图像采集设备采集相应的图像包括但不限于用户图像，以与分享的多媒体内容匹配生成AR对象并进行展示。例如，若目标检测结果指示多媒体内容使用了大笑魔法表情模板，则可以将该多媒体内容与第一用户终端当前所处的某一搞笑场景相结合，生成相应的AR对象；或者，采集第一用户终端的用户的面部图像，将该面部图像替换原多媒体内容中的面部图像，结合大笑魔法表情模板生成第一用户终端的用户的大笑魔法表情；或者，采集第一用户终端的用户的面部图像，结合大笑魔法表情模板生成第一用户终端的用户的大笑魔法表情，将第一用户终端的用户的大笑魔法表情与第二用户终端分享的大笑魔法表情组合，形成AR对象，等等。通过本实施例，第一用户终端通过对多媒体内容进行包括模板信息检测在内的目标检测，获得相应的目标检测结果(包括多媒体内容的模板信息)，进而，以第一用户终端采集的图像和目标检测结果为依据，生成相应的AR对象。其中，模板信息可以表征第二用户终端生成所述多媒体内容时使用的多媒体模板的信息，通过模板信息可以了解第二用户终端的用户想通过所述多媒体内容分享的诸如表情、心情、场景等等特征信息，以便第一用户终端的用户生成与分享的多媒体内容风格类似或匹配的AR对象，具有更好的表达效果，通过该AR对象可以进行用户间交互，提升交互效果。本实施例的多媒体数据处理方法可以由任意适当的具有数据处理能力的设备执行，包括但不限于：各种终端设备或者服务器，如，PC机、平板电脑、移动终端等。实施例二参照图2，示出了根据本申请实施例二的一种多媒体数据处理方法的步骤流程图。本实施例的多媒体数据处理方法包括以下步骤：步骤S202：第一用户终端获取第二用户终端分享的多媒体内容。如前所述，本申请实施例中，主要针对通过相应的模板信息生成的多媒体内容进行处理。也即，第二用户终端分享的多媒体内容通过如实施例一中所述的模板信息生成。其中，多媒体内容包括但不限于：图像、音频、视频、文字、AR、特效等内容。该多媒体内容可以是第二用户终端的用户拍摄的多媒体内容，也可以是该用户通过互联网下载或者本地保存的多媒体内容。第二用户终端分享的多媒体内容可能是针对第一用户终端的，也可以是针对一个特定范围或非特定范围的用户终端的。步骤S204：第一用户终端对多媒体内容进行目标检测，获得目标检测结果。其中，所述目标检测包括对多媒体内容进行模板信本文档来自技高网...

【技术保护点】
1.一种多媒体数据处理方法，其特征在于，包括：第一用户终端获取第二用户终端分享的多媒体内容；对所述多媒体内容进行目标检测，获得目标检测结果，其中，所述目标检测包括对所述多媒体内容进行模板信息检测；根据所述目标检测结果和所述第一用户终端采集的图像，生成增强现实AR对象，并展示所述AR对象。

【技术特征摘要】
【国外来华专利技术】1.一种多媒体数据处理方法，其特征在于，包括：第一用户终端获取第二用户终端分享的多媒体内容；对所述多媒体内容进行目标检测，获得目标检测结果，其中，所述目标检测包括对所述多媒体内容进行模板信息检测；根据所述目标检测结果和所述第一用户终端采集的图像，生成增强现实AR对象，并展示所述AR对象。2.根据权利要求1所述的方法，其特征在于，所述目标检测还包括：对所述多媒体内容进行目标对象的检测。3.根据权利要求2所述的方法，其特征在于，所述根据所述目标检测结果和所述第一用户终端采集的图像，生成增强现实AR对象，包括：将所述目标检测结果中对模板信息的检测结果作为第一检测结果，对目标对象的检测结果作为第二检测结果；对所述第一用户终端采集的图像进行所述目标对象的检测，获得第三检测结果；使用所述第三检测结果替换所述第二检测结果，并根据替换后的第二检测结果和所述第一检测结果，生成AR对象。4.根据权利要求1或2所述的方法，其特征在于，所述根据所述目标检测结果和所述第一用户终端采集的图像，生成增强现实AR对象，包括：将所述目标检测结果中对模板信息的检测结果作为第四检测结果；对所述第一用户终端采集的图像进行目标对象的检测，获得第五检测结果；根据所述第四检测结果和所述第五检测结果，生成AR对象；或者，将所述目标检测结果中对模板信息的检测结果作为第六检测结果；对所述第一用户终端采集的图像进行目标对象的检测，获得第七检测结果；根据所述第六检测结果和所述第七检测结果，生成第一AR对象；根据所述第一AR对象和所述多媒体内容，生成第二AR对象；或者，将所述目标检测结果中对模板信息的检测结果作为第八检测结果；接收对所述第八检测结果的修改请求，其中，所述修改请求中包含有修改参数；根据所述修改请求对所述第八检测结果进行修改，获得修改结果；对所述第一用户终端采集的图像进行目标对象的检测，获得第九检测结果；根据所述修改结果和所述第九检测结果，生成AR对象。5.根据权利要求1-3任一项所述的方法，其特征在于，所述对所述多媒体内容进行目标检测，获得目标检测结果，包括：根据所述第二用户终端分享所述多媒体内容时所采用的传输协议，对所述多媒体内容进行模板信息检测，获得检测结果。6.根据权利要求5所述的方法，其特征在于，所述根据所述第二用户终端分享所述多媒体内容时所采用的传输协议，对所述多媒体内容进行模板信息检测，获得检测结果，包括：解析所述第二用户终端分享所述多媒体内容时所采用的传输协议，获得所述多媒体内容拍摄的特征信息与编辑信息；根据所述特征信息与所述编辑信息，获得所述多媒体内容的模板信息。7.根据权利要求6所述的方法，其特征在于，所述特征信息包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中至少其一。8.根据权利要求6所述的方法，其特征在于，所述编辑信息包括：生成所述多媒体内容的应用程序信息。9.一种多媒体数据处理装置，设置于第一用户终端，其特征在于，所述装置包括：获取模块，配置为获取第二用户终端分享的多媒体...

【专利技术属性】
技术研发人员：胡月鹏，孙超男，
申请(专利权)人：优视科技新加坡有限公司，优视科技有限公司，
类型：发明
国别省市：新加坡,SG