一种直播视频的处理方法、装置及设备制造方法及图纸

本说明书实施例公开了一种直播视频的处理方法、装置及设备，该方法包括：获取待展示的直播视频数据流；将直播视频数据流输入到预先训练的敏感区域检测模型中，以对直播视频数据流对应的视频中包含的敏感区域进行识别，基于该视频中包含的敏感区域信息，对该视频中包含的敏感区域中的敏感信息进行脱敏处理，得到脱敏后的直播视频数据流，展示脱敏后的直播视频数据流，并检测用户的注意力信息；如果用户的注意力信息指示该用户的注意力未处于直播视频数据流对应的视频的预设区域内，则基于用户的注意力信息和脱敏后的直播视频数据流，确定用户注意力的调整策略，并向直播视频数据流对应的直播方输出用户注意力的调整策略。应的直播方输出用户注意力的调整策略。应的直播方输出用户注意力的调整策略。

【技术实现步骤摘要】
一种直播视频的处理方法、装置及设备


[0001]本文件涉及计算机
，尤其涉及一种直播视频的处理方法、装置及设备。

技术介绍

[0002]通过视频直播的方式对某种或多种商品进行推荐和销售已经成为当前一种热门的营销方式之一，通过直播方(如主播)在其开设的网络直播间中对某种或多种商品的介绍说明，观看方可以通过该网络直播间提供的购物链接进行购买，上述销售方式可以去除销售过程中的很多中间环节，从而为购买方提供较优惠的价格，也可以使得商品的生产方去除仓储的压力。但是，在视频直播的过程中，直播方的隐私信息，以及与待销售的商品无关或与待销售的商品存在竞争关系的事物，有可能会出现在网络直播间中，从而造成隐私信息的泄露，并影响待销售的商品的销售效果。为此，需要提供一种能够更加有效保护直播方隐私、并能够对观看方的注意力进行及时调整的技术方案。

技术实现思路

[0003]本说明书实施例的目的是提供一种能够更加有效保护直播方隐私、并能够对观看方的注意力进行及时调整的技术方案。
[0004]为了实现上述技术方案，本说明书实施例是这样实现的：<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种直播视频的处理方法，所述方法包括：获取待展示的直播视频数据流；将所述直播视频数据流输入到预先训练的敏感区域检测模型中，以对所述直播视频数据流对应的视频中包含的敏感区域进行识别，得到所述视频中包含的敏感区域信息；基于所述视频中包含的敏感区域信息，对所述视频中包含的敏感区域中的敏感信息进行脱敏处理，得到脱敏后的直播视频数据流；展示所述脱敏后的直播视频数据流，并检测展示所述脱敏后的直播视频数据流的过程中用户的注意力信息；如果所述用户的注意力信息指示所述用户的注意力未处于所述直播视频数据流对应的视频的预设区域内，则基于所述用户的注意力信息和所述脱敏后的直播视频数据流，确定所述用户注意力的调整策略，并向所述直播视频数据流对应的直播方输出所述用户注意力的调整策略，所述用户注意力的调整策略用于指示所述直播方引导所述用户的注意力处于所述直播视频数据流对应的视频的预设区域内。2.根据权利要求1所述的方法，所述检测展示所述脱敏后的直播视频数据流的过程中用户的注意力信息，包括：将所述脱敏后的直播视频数据流输入到预先训练的注意力检测模型中，得到展示所述脱敏后的直播视频数据流的过程中用户的注意力信息。3.根据权利要求1或2所述的方法，所述基于所述用户的注意力信息和所述脱敏后的直播视频数据流，确定所述用户注意力的调整策略，包括：将所述用户的注意力信息和所述脱敏后的直播视频数据流输入到预先训练的注意力调整模型中，得到所述用户注意力的调整策略。4.根据权利要求3所述的方法，所述敏感区域信息包括所述直播方所在的空间环境中的敏感区域的信息、所述直播方的预设类型的物品或所述物品的局部区域的信息、所述直播视频数据流对应的直播对象相关的信息。5.根据权利要求3所述的方法，所述基于所述视频中包含的敏感区域信息，对所述视频中包含的敏感区域中的敏感信息进行脱敏处理，得到脱敏后的直播视频数据流，包括：基于预先训练的信息识别模型对所述视频中包含的敏感区域信息对应的敏感区域内的敏感信息进行识别，得到所述视频中包含的敏感区域中的敏感信息；对所述视频中包含的敏感区域中的敏感信息进行脱敏处理，得到脱敏后的直播视频数据流。6.根据权利要求1所述的方法，所述方法还包括：获取第一训练样本，所述第一训练样本由历史直播视频数据流构成，所述历史直播视频数据流对应的视频中包含敏感区域；基于所述第一训练样本，以及基于均方误差的第一损失函数对所述敏感区域检测模型进行训练，得到训练后的敏感区域检测模型，所述敏感区域检测模型是基于神经网络算法构建的模型，所述神经网络算法包括FasterRCNN算法。7.根据权利要求2所述的方法，所述方法还包括：获取携带有用户注意力图谱的第二训练样本，所述第二训练样本由历史直播视频数据流构成；
基于所述第二训练样本，以及基于均方误差的第二损失函数对所述注意力检测模型进行训练，得到训练后的注意力检测模型，所述注意力检测模型是基于图像分割UNet算法构建的模型。8.根据权利要求3所述的方法，所述方法还包括：获取携带有用户注意力的调整策略及其对应的注意力图谱的第三训练样本，所述第三训练样本由历史直播视频数据流构成；基于所述第三训练样本，以及预设的Softmax损失函数对所述注意力调整模型进行训练，得到训练后的注意力调整模型，所述注意力调整模型是基于残差网络ResNet算法构建的模型。9.根据权利要求1所述的方法，所述注意力的调整策略包括话术调整策略和/或行为动作调整策略。10.一种直播视频的处理方法，应用于区块链系统，所述方法包括：获取对直播视频进行处理的规则信息，基于对直播视频进行处理的规则信息生成相应的第一智能合约，并将所述第一智能合约部署到所述区块链系统中；基于所述第一智能合约获取待展示的直播视频数据流；基于所述第一智能合约，将所述直播视频数据流输入到预先训练的敏感区域检测模型中，以对所述直播视频数据流对应的视频中包含的敏感区域进行识别，得到所述视频中包含的敏感区域信息；基于所述第一智能合约和所述视频中包含的敏感区域信息，对所述视频中包含的敏感区域中的敏感信息进行脱敏处理，得到脱敏后的直播视频数据流；基于所述第一智能合约，展示所述脱敏后的直播视频数据流，并检测展示所述脱敏后的直播视频数据流的过程中用户的注意力信息；如果所述用户的注意力信息指示所述用户的注意力未处于所述直播视频数据流对应的视频的预设区域内，则基于所述第一智能合约、所述用户的注意力信息和所述脱敏后的直播视频数据流，确定所述用户注意力的调整策略，并向所述直播视频数据流对应的直播方输出所述用户注意力的调整策略，所述用户注意力的调整策略用于指示所述直播方引导所述用户的注意力处于所述直播视频数据流对应的视频的预设区域内。11.根据权利要求10所述的方法，所述方法还包括：基于预先部署于所述区块链系统中第二智能合约获取第一训练样本，所述第一训练样本由历史直播视频数据流构成，所述历史直播视频数据流对应的视频中包含敏感区域；基于所述第二智能合约、所述第一训练样本，以及基于均方误差的第一损失函数对所述敏感区域检测模型进行训练，得到训练后的敏感区域检测模型，所述敏感区域检测模型是基于神经网络算法构建的模型，所述神经网络算法包括FasterRCNN算法。12.一种直播视频的处理装置，所述装置包括：数据获取模块，获取待展示的直播视频数据流；敏感区域识别模块，将所述直播视频数据流输入到预先训练的敏感区域检测模型中，以对所述直播视频数据流对应的视频中包含的敏感区域进行识别，得到所述视频中包含的敏感区域信息；脱敏模块，基于所述视频中包含的敏感区域信息，对所述视频中包含的敏感区域中的
敏感信息进行脱敏处理，得到脱敏后的直播视频数据流；注意力检测模块，展示所述脱敏后的直播视频数据流，并检测展示所述脱敏后的直播视频数据流的过程中用户的注意力信息；注意力调整模块，如果所述用户的注意力信息指示所述用户的注意力未处于所述直播视频数据流对应的视频的预设区域内，则基于所述用户的注意力信息和所述脱敏后的直播视频数据流，确定所述用户注意力的调整策略，并向所述直播视频数据流对应的直播方输出所述用户注意力的调整策略，所述用户注意力的调整策略用于指示所述直播方引...

【专利技术属性】
技术研发人员：曹佳炯，丁菁汀，
申请(专利权)人：支付宝杭州信息技术有限公司，
类型：发明
国别省市：