用于联合时空网格抽取的方法技术

本发明专利技术涉及一种用于联合时空网格抽取的方法。一种由编码器中的至少一个处理器执行的方法包括：接收多个连续网格帧，每个网格帧包括一个多边形网格；从所述多个连续网格帧中选择一个帧；通过重新使用共享相同的已抽取网格的所述多个连续网格帧来对所述一个帧的多边形网格执行抽取，以生成已抽取网格；以及使用已抽取网格对来自排除所述一个帧的所述多个连续网格帧中的至少一个帧中的多边形网格进行编码。

【技术实现步骤摘要】

本公开涉及一组高级视频编码技术。更具体地，本公开涉及联合时空网格抽取。

技术介绍

1、3d捕获、建模和渲染的进步已促进3d内容在各种平台和设备上的普遍存在。如今，可以在一个大洲捕捉婴儿迈出的第一步，并使得祖父母能够在另一个大洲看到(可能会互动)并享受与孩子的完全沉浸式体验。然而，为了实现这种真实感，模型变得更加复杂，且大量数据与这些模型的创建和消耗相关联。3d网格广泛用于表示此类沉浸式内容。

2、网格由描述体积对象的表面的若干多边形组成。每个多边形由其在3d空间中的顶点以及顶点是如何连接的信息(称为连接性信息)来限定。可选地，顶点属性(例如，颜色、法线等)可与网格顶点相关联。通过利用映射信息，属性还可与网格的表面相关联，该映射信息使用2d属性图来对网格进行参数化。这种映射通常由与网格顶点相关联的参数坐标(称为uv坐标或纹理坐标)集来描述。2d属性图用于存储高分辨率属性信息，例如纹理、法线、位移等。这种信息可用于各种目的，例如纹理映射和着色。

3、动态网格序列可能需要大量数据，因为动态网格序列可包括随时间变化的大量信息。因此，需要高效本文档来自技高网...

【技术保护点】

1.一种由编码器中的至少一个处理器执行的方法，所述方法包括：

2.根据权利要求1所述的方法，其中，所述一个帧是共享所述相同的已抽取网格的所述多个连续网格帧中的第一帧。

3.根据权利要求1所述的方法，其中，所述一个帧是共享所述相同的已抽取网格的所述多个连续网格帧的中心帧。

4.根据权利要求1所述的方法，其中，所述一个帧从共享所述相同的已抽取网格的所述多个连续网格帧中随机选择。

5.根据权利要求1所述的方法，其中，所述一个帧是从所述多个连续网格帧中选择的，其中，所述一个帧的已抽取网格对率失真进行优化。

6.根据权利要求5所述的方法，...

【技术特征摘要】

1.一种由编码器中的至少一个处理器执行的方法，所述方法包括：

2.根据权利要求1所述的方法，其中，所述一个帧是共享所述相同的已抽取网格的所述多个连续网格帧中的第一帧。

3.根据权利要求1所述的方法，其中，所述一个帧是共享所述相同的已抽取网格的所述多个连续网格帧的中心帧。

4.根据权利要求1所述的方法，其中，所述一个帧从共享所述相同的已抽取网格的所述多个连续网格帧中随机选择。

5.根据权利要求1所述的方法，其中，所述一个帧是从所述多个连续网格帧中选择的，其中，所述一个帧的已抽取网格对率失真进行优化。

6.根据权利要求5所述的方法，其中，对所述率失真进行优化的所述一个帧的所述已抽取网格具有最少比特位来供编码。

7.根据权利要求5所述的方法，其中，根据点到点距离误差或点到平面距离误差，对所述率失真进行优化的所述一个帧的所述已抽取网格具有最小失真。

8.根据权利要求5所述的方法，其中，所述多个连续网格帧中的每个网格具有时间抽取成本，所述时间抽取成本为编码速率和失真误差的加权和，其中，对所述率失真进行优化的所述一个帧的所述已抽取网格具有最小时间抽取成本。

9.根据权利要求1所述的方法，其中，所述一个帧的已抽取网格包括至少一个顶点，其中，所述至少一个顶点的二维坐标基于来自排除所述一个帧的所述多个连续网格帧的每个网格的每个顶点的坐标平均值来细化，所述每个顶点位于所述至少一个顶点的半径内。

10....

【专利技术属性】
技术研发人员：普拉纳夫·卡达姆，刘杉，丁伟，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：