本发明专利技术提供了屏幕实时隐私保护方法和装置，包括：对第一视频流进行提取得到M帧图像；普通模式下，将每帧图像通过图像隐私区域检测算法得到图像组帧，将图像组帧进行组合后得到第二视频流；自适应模式下，从M帧图像中选取任一帧图像作为当前帧图像；通过图像相似性检测算法判断当前帧图像是否进行窗口检测；如果否，则将上一帧图像的模糊区域坐标进行模糊处理；如果是，则将当前帧图像通过图像隐私区域检测算法得到第一图像与模糊区域坐标，重复自适应模式的过程，直至每帧图像均被遍历；加速模式下，将M帧图像通过图像隐私区域检测算法，得到第二图像与模糊区域坐标；将第一图像与模糊区域坐标或第二图像与模糊区域坐标进行模糊处理。糊处理。糊处理。
【技术实现步骤摘要】
屏幕实时隐私保护方法和装置
[0001]本专利技术涉及计算机
，尤其是涉及屏幕实时隐私保护方法和装置。
技术介绍
[0002]会议投屏以及远程会议中的屏幕共享是办公场景的常见活动，由于个人的疏忽及缺少保护机制，经常会出现共享的屏幕上弹出微信/qq等聊天窗口，或邮件及个人空间窗口等私密信息，从而造成个人隐私的泄露。
[0003]在公共显示屏上，播放的往往是固定模式的视频，如果由于后台操作不当或系统故障，可能导致播放异常的信号（如操作系统桌面、系统报错窗口和其他管理员误播放的信号等），同样带来不好的影响，甚至可能泄露系统本身的技术信息等。
[0004]当屏幕播放异常时，存在的检测方法主要包括：第一，进行全屏实时分类，判断当前屏幕是否播放异常的画面；第二，进行模板匹配，例如某些专用播放领域，通过设计特定版式规则，将播放画面与模板进行对比，如果不匹配，则进行过滤/掐断等保护处理。在发现异常后的处理方法上，往往使用的是掐断视频信号、播放预制画面等方法。
[0005]由上述方法可知，全屏实时分类场景，对小窗口检测精度不高。当屏幕出现窗口堆叠的情况时，为了处理各种尺度的图像特征，需要对图像进行多尺度处理，造成计算量增加，难以应用于实时播控的场景。
[0006]模板匹配的缺点在于预设的模板只能用于屏幕播放版式不变的情况下，难以灵活复制在视频会议等灵活场景。
技术实现思路
[0007]有鉴于此，本专利技术的目的在于提供屏幕实时隐私保护方法和装置，根据不同的模式采用相应的模糊处理，从而确保公共显示屏上不会播出泄露隐私/不符合播放要求的画面；检测精度高，可以精确检测弹出的小窗口，使其不会影响整体的屏幕共享可用性。
[0008]第一方面，本专利技术实施例提供了屏幕实时隐私保护方法，所述方法包括：获取第一视频流，对所述第一视频流进行提取，得到M帧图像；当在普通模式下，将每帧图像通过图像隐私区域检测算法，得到图像组帧，将所述图像组帧进行组合后，得到第二视频流；当在自适应模式下，从所述M帧图像中选取任一帧图像作为当前帧图像；通过图像相似性检测算法判断所述当前帧图像是否进行窗口检测；如果否，则采用上一帧图像的模糊区域坐标进行模糊处理；如果是，则将所述当前帧图像通过所述图像隐私区域检测算法，得到第一图像与模糊区域坐标，重复所述自适应模式的过程，直至所述每帧图像均被遍历；当在加速模式下，将所述M帧图像通过所述图像隐私区域检测算法，得到第二图像与模糊区域坐标；将所述第一图像与模糊区域坐标或所述第二图像与模糊区域坐标进行模糊处理，
得到处理后的图像，并将所述处理后的图像进行组合后，得到第三视频流。
[0009]进一步的，当在普通模式下，将每帧图像通过图像隐私区域检测算法，得到图像组帧，包括：当在所述普通模式下，将所述每帧图像进行图像隐私区域检测算法检测后，在所述每帧图像上对目标区域进行模糊处理，得到所述图像组帧。
[0010]进一步的，对所述第一视频流进行提取，得到M帧图像，包括：当在所述普通模式下，对所述第一视频流的每帧图像进行提取，得到所述M帧图像；当在所述加速模式下，根据预设周期间隔对所述第一视频流进行提取，得到每个所述预设周期对应的图像；从每个所述预设周期对应的图像中选取任一图像；将选取的任一图像构成所述M帧图像。
[0011]进一步的，将所述第一图像与模糊区域坐标或所述第二图像与模糊区域坐标进行模糊处理，得到处理后的图像，包括：将每个所述预设周期内的所有图像对应所述第二图像与模糊区域坐标的区域进行模糊处理，得到所述处理后的图像。
[0012]进一步的，当在加速模式下，将所述M帧图像通过所述图像隐私区域检测算法，得到第二图像与模糊区域坐标，包括：当在所述加速模式下，利用单阶段目标检测模型对所述每帧图像中的窗口四角顶点及窗口区域分别进行检测，得到顶点的坐标、顶点的类别和窗口区域，其中，所述窗口区域包括窗口的坐标和窗口的类别；将所述顶点的坐标和所述顶点的类别通过矩形顶点匹配规则进行重建，得到新的矩形区域；将所述新的矩形区域与所述窗口区域进行匹配，得到匹配结果；根据所述匹配结果输出m个所述新的矩形区域的坐标和窗口类别；将每个所述窗口类别与设定的白名单类别或黑名单类别进行匹配；如果所述窗口类别满足所述黑名单类别，则触发隐私保护机制，并记录隐私窗口位置；如果所述窗口类别不满足所述白名单类别，则触发隐私保护机制，并记录所述隐私窗口位置；其中，所述隐私窗口位置为所述第二图像与模糊区域坐标。
[0013]进一步的，所述顶点类别包括左上角顶点、右上角顶点、左下角顶点和右下角顶点，所述窗口类别包括操作系统窗口、网络浏览器窗口、即时通讯窗口、文件编辑窗口和邮件窗口。
[0014]进一步的，将所述新的矩形区域与所述窗口区域进行匹配，得到匹配结果，包括：判断所述新的矩形区域与所述窗口区域的交并比是否大于预设阈值；如果是，则匹配成功，并将所述新的矩形区域的类别设置为所述窗口的类别；如果否，则匹配不成功，并将所述新的矩形区域的类别设置为其他窗口。
[0015]进一步的，通过图像相似性检测算法判断所述当前帧图像是否进行窗口检测，包
括：计算所述当前帧图像与所述上一帧图像的直方图的误差；如果所述直方图的误差小于设定阈值，则所述当前帧图像与所述上一帧图像相似；如果所述直方图的误差大于或等于所述设定阈值，则所述当前帧图像与所述上一帧图像不相似；如果所述当前帧图像与所述上一帧图像相似，则不进行窗口检测；如果所述当前帧图像与所述上一帧图像不相似，则进行窗口检测。
[0016]第二方面，本专利技术实施例提供了屏幕实时隐私保护装置，所述装置包括：提取模块，用于获取第一视频流，对所述第一视频流进行提取，得到M帧图像；组合模块，用于当在普通模式下，将每帧图像通过图像隐私区域检测算法，得到图像组帧，将所述图像组帧进行组合后，得到第二视频流；选取模块，用于当在自适应模式下，从所述M帧图像中选取任一帧图像作为当前帧图像；窗口检测模块，用于通过图像相似性检测算法判断所述当前帧图像是否进行窗口检测；第一模糊处理模块，用于在不进行窗口检测的情况下，采用上一帧图像的模糊区域坐标进行模糊处理；第一图像与模糊区域坐标获取模块，用于在进行窗口检测的情况下，将所述当前帧图像通过所述图像隐私区域检测算法，得到第一图像与模糊区域坐标，重复所述自适应模式的过程，直至所述每帧图像均被遍历；第二图像与模糊区域坐标获取模块，用于当在加速模式下，将所述M帧图像通过所述图像隐私区域检测算法，得到第二图像与模糊区域坐标；第二模糊处理模块，用于将所述第一图像与模糊区域坐标或所述第二图像与模糊区域坐标进行模糊处理，得到处理后的图像，并将所述处理后的图像进行组合后，得到第三视频流。
[0017]第三方面，本专利技术实施例提供了电子设备，包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的方法。
[0018]本专利技术实施例提供了屏幕实时隐私保护方法和装置，包括：获取第一视频流，对本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种屏幕实时隐私保护方法，其特征在于，所述方法包括：获取第一视频流，对所述第一视频流进行提取，得到M帧图像；当在普通模式下，将每帧图像通过图像隐私区域检测算法，得到图像组帧，将所述图像组帧进行组合后，得到第二视频流；当在自适应模式下，从所述M帧图像中选取任一帧图像作为当前帧图像；通过图像相似性检测算法判断所述当前帧图像是否进行窗口检测；如果否，则采用上一帧图像的模糊区域坐标进行模糊处理；如果是，则将所述当前帧图像通过所述图像隐私区域检测算法，得到第一图像与模糊区域坐标，重复所述自适应模式的过程，直至所述每帧图像均被遍历；当在加速模式下，将所述M帧图像通过所述图像隐私区域检测算法，得到第二图像与模糊区域坐标；将所述第一图像与模糊区域坐标或所述第二图像与模糊区域坐标进行模糊处理，得到处理后的图像，并将所述处理后的图像进行组合后，得到第三视频流。2.根据权利要求1所述的屏幕实时隐私保护方法，其特征在于，当在普通模式下，将每帧图像通过图像隐私区域检测算法，得到图像组帧，包括：当在所述普通模式下，将所述每帧图像进行图像隐私区域检测算法检测后，在所述每帧图像上对目标区域进行模糊处理，得到所述图像组帧。3.根据权利要求1所述的屏幕实时隐私保护方法，其特征在于，对所述第一视频流进行提取，得到M帧图像，包括：当在所述普通模式下，对所述第一视频流的每帧图像进行提取，得到所述M帧图像；当在所述加速模式下，根据预设周期间隔对所述第一视频流进行提取，得到每个所述预设周期对应的图像；从每个所述预设周期对应的图像中选取任一图像；将选取的任一图像构成所述M帧图像。4.根据权利要求3所述的屏幕实时隐私保护方法，其特征在于，将所述第一图像与模糊区域坐标或所述第二图像与模糊区域坐标进行模糊处理，得到处理后的图像，包括：将每个所述预设周期内的所有图像对应所述第二图像与模糊区域坐标的区域进行模糊处理，得到所述处理后的图像。5.根据权利要求1所述的屏幕实时隐私保护方法，其特征在于，当在加速模式下，将所述M帧图像通过所述图像隐私区域检测算法，得到第二图像与模糊区域坐标，包括：当在所述加速模式下，利用单阶段目标检测模型对所述每帧图像中的窗口四角顶点及窗口区域分别进行检测，得到顶点的坐标、顶点的类别和窗口区域，其中，所述窗口区域包括窗口的坐标和窗口的类别；将所述顶点的坐标和所述顶点的类别通过矩形顶点匹配规则进行重建，得到新的矩形区域；将所述新的矩形区域与所述窗口区域进行匹配，得到匹配结果；根据所述匹配结果输出m个所述新的矩形区域的坐标和窗口类别；将每个所述窗口类别与设定的白名单类别或黑名单类别进行匹配；如果所述窗口类别满足所述黑名单类别，则触发隐私保护机制，并记录隐私窗口位置；...
【专利技术属性】
技术研发人员：侯磊，张博，张乐平，李海峰，
申请(专利权)人：北京匠数科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。