【技术实现步骤摘要】
【国外来华专利技术】使用混合变换的点云压缩
本公开一般涉及多媒体数据的压缩和编码。更具体地，本公开涉及用于对点云(pointcloud)进行压缩和解压缩的装置和方法。
技术介绍
由于功能强大的手持设备(诸如智能手机)已经可用，360度(360°)视频正成为体验沉浸式视频的一种新方式。360°视频通过捕获世界的360°视图为消费者带来沉浸式的“真实生活的”、“身临其境的”的体验。用户可以交互地改变他们的视点，并动态地观看他们希望的捕获场景或对象的任何部分。显示和导航传感器实时跟踪头部移动，以确定用户想要观看的360°视频的区域。360°视频提供三自由度(threeDegreesofFreedom，3DoF)沉浸式体验。六自由度(6DoF)是沉浸式体验的下一水平，其中用户可以在虚拟/增强环境中转动他的头部并四处移动。需要本质上是三维的多媒体数据(诸如点云)来提供6DoF的体验。点云和网格(mesh)是表示对象或场景的表面的模型的3-D点集合。点云在各种应用中是常见的，仅举几例，诸如游戏、3-D地图、可视化、医疗应用、增强现实、虚拟现实、自主...
【技术保护点】
1.一种用于点云解码的解码设备，所述解码设备包括：/n通信接口，被配置成接收压缩比特流；以及/n处理器，可操作地耦合到所述通信接口，其中所述处理器被配置成：/n将所述压缩比特流解码成第一二维(2-D)帧集合和第二2-D帧集合，其中，所述第一2-D帧集合包括表示三维(3-D)点云的几何形状的第一规则面片集合，所述第二2-D帧集合包括表示所述3-D点云的纹理的第二规则面片集合，所述第一规则面片集合和第二规则面片集合的面片表示所述3-D点云中的3-D点的相应聚类，/n在所述第一2-D帧集合中识别表示不被包括在所述第一规则面片集合中的所述3-D点云的几何形状点的漏点面片，并且在所述...
【技术特征摘要】
【国外来华专利技术】20171021 US 62/575,412;20171023 US 62/575,842;20171.一种用于点云解码的解码设备，所述解码设备包括：
通信接口，被配置成接收压缩比特流；以及
处理器，可操作地耦合到所述通信接口，其中所述处理器被配置成：
将所述压缩比特流解码成第一二维(2-D)帧集合和第二2-D帧集合，其中，所述第一2-D帧集合包括表示三维(3-D)点云的几何形状的第一规则面片集合，所述第二2-D帧集合包括表示所述3-D点云的纹理的第二规则面片集合，所述第一规则面片集合和第二规则面片集合的面片表示所述3-D点云中的3-D点的相应聚类，
在所述第一2-D帧集合中识别表示不被包括在所述第一规则面片集合中的所述3-D点云的几何形状点的漏点面片，并且在所述第二2-D帧集合中识别表示不被包括在所述第二规则面片集合中的所述3-D点云的点的纹理的漏点面片；以及
使用2-D帧集合、使用所述第一规则面片集合和第二规则面片集合和所述漏点面片来生成所述3-D点云。
2.根据权利要求1所述的解码设备，其中，所述处理器还被配置成：
识别与被包括在所述2-D帧集合中的每个面片相关联的标志，所述标志指示每个面片是否是漏点面片中的一个；以及
识别辅助面片信息，所述辅助面片信息指示漏点面片的大小、漏点面片在2-D帧集合中的位置，
其中，从所述压缩比特流中解码所述辅助面片信息和所述标志。
3.根据权利要求1所述的解码设备，其中，所述处理器还被配置成：
在所述第一2-D帧集合中定位表示几何形状的漏点面片，并且在所述第二2-D帧集合中定位表示纹理的漏点面片，
其中，表示几何形状的漏点面片在所述第一2-D帧集合中的位置对应于表示纹理的漏点面片在所述第二2-D帧集合中的位置。
4.根据权利要求1所述的解码设备，其中，所述处理器还被配置成：
识别被包括在所述比特流中的参数；
响应于将所述参数识别为第一值，在所述第一2-D帧集合的单个颜色平面中识别点中的每一个的几何坐标；以及
响应于将所述参数识别为第二值，将点中的每一个的几何坐标放置在所述第一2-D帧集合的多个颜色平面中，其中，所述多个颜色平面中的每一个对应于坐标方向。
5.根据权利要求1所述的解码设备，其中，所述处理器还被配置成：
识别2-D帧集合的占用图，所述占用图指示所述2-D帧集合中的表示所述3-D点云中的点的像素的位置，以及
基于所述占用图来估计被包括在漏点面片中每一个中的点的量。
6.根据权利要求1所述的解码设备，其中，从所述2-D帧集合生成所述3-D点云，所述处理器被配置成：
分析所述第一2-D帧集合的规则面片以生成所述3-D点云的形状；
分析所述第二2-D帧集合的规则面片以应用所述3-D点云的形状的纹理；
用来自被包括在所述第一2-D帧集合中的漏点面片的信息来增强所述3-D点云的形状；以及
用来自被包括在所述第二2-D帧集合中的漏点面片的信息来增强所述3-D点云的纹理。
7.一种用于点云编码的编码设备，所述编码设备包括：
处理器，被配置成：
针对三维(3-D)点云生成第一二维(2-D)帧集合和第二2-D帧集合，所述第一二维(2-D)帧集合包括表示所述3-D点云的几何形状的第一规则面片集合，所述第二2-D帧集合包括表示所述3-D点云的纹理的第二规则面片集合，所述第一规则面片集合和第二规则面片集合中的面片表示所述3-D点云中的3-D点的相应聚类，
检测不被表示在规则面片集合中的一个中的3-D点云中的点，
生成表示检测到的点的几何形状的漏点面片和表示检测到的点的纹理的漏点面片，
将表示检测到的点的几何形状的漏点面片包括在所述第一2-D帧集合中，将表示检测到的点的纹理的漏点面片包括在所述第二2-D帧集合中，
对包括漏点面片的2-D帧集合进行编码以生成压缩比特流，以及
可操作地耦合到所述处理器的通信接口，所述通信接口被配置成传输所述压缩比特流。
8.根据权利要求7所述的编码设备，其中，所述处理器还被配置成：
生成与被包括在2-D帧集合中的每个面片相关联的标志，所述标志指示每个面片是所述第一规则面片集合和第二规则面片集合中的面片中的一个还是漏点面片中的一个；以及
生成辅助面片信息，所述辅助面片信息指示漏点面片的大小、漏点面片在2-D帧集合中的位置，
其中，所述辅助面片信息和所述标志被包括在所述压缩比特流中。
9.根据权利要求7所述的编码设备，其中，所述处理器还被配置成：
在所述第一2-D帧集合中定位表示几何形状的漏点面片，并且在所述第二2-D帧集合中定位表示纹理的漏点面片，
其中，表示几何形状的漏点面片在所述第一2-D帧集合中的位置对应于表示纹理的漏点面片在所述第二2-D帧集合中的位置。<...
【专利技术属性】
技术研发人员：I辛哈罗伊，M布达加维，林荣权，H纳贾夫扎德，柳诚烈，E法拉马齐，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。