【技术实现步骤摘要】
用于传递视频中的感兴趣区域信息的方法和设备
本公开涉及视频处理的
，具体地涉及用于传递视频中的感兴趣区域信息的方法和设备，以及用于在视频的渲染画面上提供辅助信息的方法和设备。
技术介绍
近些年来，视频播放或渲染技术得到了极大发展，尤其是在互联网视频播放或渲染
中更是如此。为了体现视频的交互性和趣味性，出现了各种视频编辑技术，例如弹幕叠加、图标叠加、动画叠加、字幕叠加等等。在实施这些技术时，希望弹幕、图标、动画、字幕等在显示时能避开用户感兴趣的区域，使得感兴趣区域（ROI）（例如，人脸）仍然能够被清晰地观看，从而不会影响视频渲染时的用户观看体验。通常，使用一个比特表示视频画面中的一个像素是否属于感兴趣区域，以形成该视频画面的感兴趣区域（ROI）信息。而且，ROI信息通常都是按照一张张画面存储的，这导致在传递ROI信息时（例如在将ROI信息从编码端传递到解码端时）需要的带宽显著增加。例如，如果视频画面的分辨率为1920x1080，则每一帧画面需要1920x1080/8字节的数据量表示ROI信息，这导致额外增加...
【技术保护点】
1.一种用于传递视频中的感兴趣区域信息的方法，包括：/n从所述视频的第一视频帧中确定感兴趣区域信息；/n响应于存在作为所述第一视频帧的前一视频帧的第二视频帧，则确定所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息间的残差作为感兴趣区域残差掩码；/n对所述感兴趣区域残差掩码进行压缩；/n对所述压缩后的感兴趣区域残差掩码与所述第一视频帧的编码视频数据进行补充增强信息封装，以得到第一封装视频帧；以及/n传递所述第一封装视频帧。/n
【技术特征摘要】
1.一种用于传递视频中的感兴趣区域信息的方法，包括：
从所述视频的第一视频帧中确定感兴趣区域信息；
响应于存在作为所述第一视频帧的前一视频帧的第二视频帧，则确定所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息间的残差作为感兴趣区域残差掩码；
对所述感兴趣区域残差掩码进行压缩；
对所述压缩后的感兴趣区域残差掩码与所述第一视频帧的编码视频数据进行补充增强信息封装，以得到第一封装视频帧；以及
传递所述第一封装视频帧。
2.根据权利要求1所述的方法，其中，所述视频的每个视频帧中的每个像素具有灰度分量。
3.根据权利要求2所述的方法，其中，从所述视频的第一视频帧中确定感兴趣区域信息，包括：
基于所述第一视频帧中的所有像素的灰度分量来确定感兴趣区域；以及
基于所述确定的感兴趣区域来确定所述感兴趣区域信息。
4.根据权利要求3所述的方法，其中，基于所述确定的感兴趣区域来确定所述感兴趣区域信息包括：
以像素块为单位来基于所述确定的感兴趣区域确定所述感兴趣区域信息。
5.根据权利要求1所述的方法，还包括：
响应于不存在作为所述第一视频帧的前一视频帧的第二视频帧，则确定所述第一视频帧的感兴趣区域信息为所述感兴趣区域残差掩码。
6.根据权利要求1所述的方法，其中，确定所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息间的残差包括：
对所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息进行异或操作来确定所述残差。
7.根据权利要求1所述的方法，其中，所述第一视频帧的编码视频数据包括对所述第一视频帧进行H.264或者H.265编码而得到编码视频数据。
8.根据权利要求1所述的方法，其中，传递所述第一封装视频帧包括：
传递所述第一封装视频帧到视频客户端进行渲染。
9.一种用于在视频的渲染画面上提供辅助信息的方法，包括：
获取根据权利要求1中的方法传递的第一封装视频帧；
从所述第一封装视频帧中获取所述第一封装视频帧的感兴趣区域信息；
获取所述第一封装视频帧对应的辅助信息；
在对所述第一封装视频帧中的编码视频数据进行渲染的同时，在所述编码视频数据的渲染画面上提供所述辅助信息，并且将所述辅助信息中与所述感兴趣区域信息表示的感...
【专利技术属性】
技术研发人员：范志兴，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。