视频信息的处理方法、装置、电子设备及存储介质制造方法及图纸

本申请提供了一种基于人工智能的视频信息的处理方法、装置、电子设备及计算机可读存储介质；方法包括：在人机交互界面中呈现视频；在呈现所述视频的期间，检测目标对象的行为；根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征；当所述目标对象的行为表征指示所述视频中出现的内容超出所述目标对象的承受能力时，呈现所述内容的屏蔽效果。通过本申请，能够个性化显示视频中的内容。

【技术实现步骤摘要】
视频信息的处理方法、装置、电子设备及存储介质
本申请涉及人工智能技术，尤其涉及一种视频信息的处理方法、装置、电子设备及计算机可读存储介质。
技术介绍
人工智能(AI，ArtificialIntelligence)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法和技术及应用系统。人工智能现如今得到快速发展，并广泛应用于各种行业。基于人工智能的计算机视觉处理得到广泛应用，以在线视频为例，视频的资源越来越丰富，然而在本申请实施例中发现，视频的观众由于心理素质、地域文化、宗教信仰等各方面的差异，对视频的接受程度存在差异。对于视频内容的多样性和观众接收程度的差异性之间的矛盾，相关技术尚无有效解决方案。申请内容本申请实施例提供一种视频信息的处理方法、装置、电子设备及计算机可读存储介质，能够个性化显示视频中的内容。本申请实施例的技术方案是这样实现的：本申请实施例提供一种视频信息的处理方法，包括：在人机交互界面中呈现视频；在呈现所述视频的期间，检测目标对象的行为；根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征；当所述目标对象的行为表征指示所述视频中出现的内容超出所述目标对象的承受能力时，呈现所述内容的屏蔽效果。本申请实施例提供一种视频信息的处理装置，包括：视频播放模块，用于在人机交互界面中呈现视频；检测模块，用于在呈现所述视频的期间，检测目标对象的行为；确定模块，用于根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征；所述视频播放模块，还用于当所述目标对象的行为表征指示所述视频中出现的内容超出所述目标对象的承受能力时，呈现所述内容的屏蔽效果。在上述方案中，所述检测模块，还用于采集所述目标对象的行为图像；所述确定模块，还用于根据所述行为图像识别出所述目标对象的行为表征。在上述方案中，所述确定模块，还用于在所述行为图像中，识别所述目标对象的行为类型；根据识别出的行为类型，查询不同的行为类型与行为表征的对应关系，得到所述识别出的行为类型所对应的行为表征。在上述方案中，所述确定模块，还用于调用神经网络模型执行以下处理：提取所述行为图像的特征向量；将提取的所述特征向量映射为对应多个行为表征的概率，并将最大概率所对应的行为表征确定为所述目标对象的行为表征；其中，所述神经网络模型是以所述目标对象的样本行为图像、以及针对所述样本行为图像的标注的行为表征为样本训练得到。在上述方案中，所述确定模块，还用于当所述目标对象的行为表征指示所述目标对象的情感类型属于恐惧或厌恶时，确定所述视频中出现的内容超出所述目标对象的承受能力；所述视频播放模块，还用于执行以下操作至少之一：在所述内容的全部画面区域中叠加素材；在所述内容的部分画面区域中叠加素材；跳过所述内容的播放；降低播放所述内容的音量。在上述方案中，所述视频播放模块，还用于确定所述视频播放的当前帧；在所述当前帧和上一帧之间存在差异的区域中叠加素材，以使所述存在差异的区域呈现以下屏蔽效果至少之一：马赛克；模糊；腐蚀；磨砂；网格；遮挡。在上述方案中，所述视频播放模块，还用于在所述内容中确定所述目标对象的视线的焦点区域；对所述焦点区域进行目标识别，以确定所述焦点区域中的目标，并对所述目标叠加素材，以使所述目标呈现以下屏蔽效果至少之一：马赛克；模糊；腐蚀；磨砂；网格；遮挡。在上述方案中，所述视频播放模块，还用于采集所述目标对象的瞳孔和眼球角膜外表面的反射亮斑的位置；根据所述目标对象的瞳孔和眼球角膜外表面的反射亮斑的位置，在所述内容中确定对应于所述目标对象视线的焦点区域。在上述方案中，所述视频播放模块，还用于根据所述目标对象的瞳孔和眼球角膜外表面的反射亮斑的位置，确定所述目标对象的角膜反射向量；根据所述目标对象的角膜反射向量，确定所述目标对象观看所述视频时的视线方向；根据所述目标对象观看所述视频时的视线方向，在所述内容中确定所述焦点区域。在上述方案中，所述视频播放模块，还用于将所述焦点区域划分为多个候选框；根据每个候选框的特征向量，预测包括所述目标的候选框以及所包括所述目标的类型；确定所述候选框中包括的属于设定类型的目标；其中，所述目标的设定类型包括以下至少之一：恐怖类型；色情类型。在上述方案中，所述视频播放模块，还用于将所述目标进行标记，以当所述视频中再次出现被标记的目标时，在所述视频中对所述目标叠加所述素材。本申请实施例提供一种视频信息的处理方法，包括：在人机交互界面中呈现视频；当所述视频中出现的内容超出目标对象的承受能力时，呈现所述内容的屏蔽效果。本申请实施例提供一种电子设备，包括：存储器，用于存储可执行指令；处理器，用于执行所述存储器中存储的可执行指令时，实现本申请实施例提供的视频信息的处理方法。本申请实施例提供一种计算机可读存储介质，存储有可执行指令，用于引起处理器执行时，实现本申请实施例提供的视频信息的处理方法。本申请实施例具有以下有益效果：通过呈现视频期间所采集的行为来预测针对视频中出现内容的情感，并当出现无法接收内容的情况类型时进行屏蔽，从而针对不同对象的承受能力的差异而屏蔽，实现了根据对象的个体差异而个性化呈现视频内容，并节约了视频前期处理环节，提升了视频发布的时效性。附图说明图1是本申请实施例提供的视频信息的处理系统100的结构示意；图2是本申请实施例提供的终端400的结构示意图；图3是本申请实施例提供的视频信息的处理方法的流程示意图；图4是本申请实施例提供的视频信息的处理方法的流程示意图；图5是本申请实施例提供的视频信息的处理方法的流程示意图；图6A和图6B是相关技术提供的应用场景示意图；图7A、图7B、图7C和图7D是本申请实施例提供的应用场景示意图；图8是本申请实施例提供的视频信息的处理方法的流程示意图。具体实施方式为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，所描述的实施例不应视为对本申请的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解，“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的
的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的，不是旨在限制本申请。对本申请实施例进行进一步详细说明之前，对本申请实施例中涉及的名词和术语进行说明，本申请实施例中涉及的名词和术语适用于如下的解释。1)响应于，用于表示所执行的操作所依赖的条件或者状态，当满足本文档来自技高网...

【技术保护点】
1.一种视频信息的处理方法，其特征在于，所述方法包括：/n在人机交互界面中呈现视频；/n在呈现所述视频的期间，检测目标对象的行为；/n根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征；/n当所述行为表征指示所述视频中出现的内容超出所述目标对象的承受能力时，呈现所述内容的屏蔽效果。/n

【技术特征摘要】
1.一种视频信息的处理方法，其特征在于，所述方法包括：
在人机交互界面中呈现视频；
在呈现所述视频的期间，检测目标对象的行为；
根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征；
当所述行为表征指示所述视频中出现的内容超出所述目标对象的承受能力时，呈现所述内容的屏蔽效果。


2.根据权利要求1所述的方法，其特征在于，
所述检测目标对象的行为，包括：
采集所述目标对象的行为图像；
所述根据所述目标对象的行为，确定针对所述视频中出现的内容的行为表征，包括：
根据所述行为图像识别出所述目标对象的行为表征。


3.根据权利要求2所述的方法，其特征在于，所述根据所述行为图像识别出所述目标对象的行为表征，包括：
在所述行为图像中，识别所述目标对象的行为类型；
根据识别出的行为类型，查询不同的行为类型与行为表征的对应关系，得到所述识别出的行为类型所对应的行为表征。


4.根据权利要求2所述的方法，其特征在于，所述根据所述行为图像识别出所述目标对象的行为表征，包括：
调用神经网络模型执行以下处理：
提取所述行为图像的特征向量；
将提取的所述特征向量映射为对应多个行为表征的概率，并将最大概率所对应的行为表征确定为所述目标对象的行为表征；
其中，所述神经网络模型是以所述目标对象的样本行为图像、以及针对所述样本行为图像的标注的行为表征为样本训练得到。


5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当所述目标对象的行为表征指示所述目标对象的情感类型属于恐惧或厌恶时，确定所述视频中出现的内容超出所述目标对象的承受能力；
所述呈现所述内容的屏蔽效果，包括：
执行以下操作至少之一：
在所述内容的全部画面区域中叠加素材；
在所述内容的部分画面区域中叠加素材；
跳过所述内容的播放；
降低播放所述内容的音量。


6.根据权利要求5所述的方法，其特征在于，所述在所述内容的部分画面区域中叠加素材，包括：
确定所述视频播放的当前帧；
在所述当前帧和上一帧之间存在差异的区域中叠加素材，以使
所述存在差异的区域呈现以下屏蔽效果至少之一：马赛克；模糊；腐蚀；磨砂；网格；遮挡。


7.根据权利要求5所述的方法，其特征在于，所述在所述内容的部分画面区域中叠加素材，包括：
在所述内容中确定所述目标对象的视线的焦点区域；
对所述焦点区域进行目标识别，以确定所述焦点区域中的目标，并对所述目标叠加素材，以使
所述目标呈现以下屏蔽效果至少之一：马赛克；模糊；腐蚀；磨砂；网格；遮挡。...

【专利技术属性】
技术研发人员：黄其亮，黄杰怡，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44