可使用一种或多种方法、设备和/或系统来创建扩展现实。在扩展现实中，需要实现新颖且改进的特征，诸如与照明和/或随时间推移的照明演变有关的特征。在一些情况下，这些特征可通过使用照明信息来实现。在一些情况下，照明信息可遵循标准化格式。在一些情...

公开了用于扩展现实(XR)体验中的自由度(DoF)控制的系统、方法和工具。在示例中，设备可确定与用户相关联的第一基本自由度(DoF)边界。该第一基本DoF边界可以是基于运行时之前的信息或运行时信息中的至少一者来确定的。该设备可至少基于该...

用于图像的基于深度神经网络的编码系统确定用于对图像进行解码的深度神经网络模型的更新参数。这些参数由编码器确定，并提供给解码器以在对图像进行解码之前更新解码器的模型。这通过仅微调神经解码器的一些参数来提供结构稀疏性。更新要么针对预定参数集...

公开了一种用于对图像或视频的块编码或解码的方法和装置。对于图像或视频的至少一个块，获得第一帧内预测模式，获得第二帧内预测模式。基于第一帧内预测模式和第二帧内预测模式的组合对至少一个块编码或解码。在一实施例中，第一帧内预测模式是非基于方向...

一种用于对图像或视频块进行编码和解码的方法和装置，其中使用该块的交叉分量模型和重构亮度样本对该块的色度样本进行帧内预测。基于根据该块的至少一个特性进行修改的参考区域来为该块获得交叉分量模型。在实施例中，选择参考区域中的重构亮度和色度样本...

获得3D场景的场景描述数据。该场景描述数据包括：场景元素信息，其描述该场景中的多个场景元素中的每个场景元素；触发信息，其描述至少一个触发条件；动作信息，其描述要对与该动作相关联的一个或多个场景元素执行的至少一个动作；和行为信息，其中该行...

对于触觉信号，触觉场景格式的语法元素将与触觉效果相关的触觉信号的部分和与冲刷相关的部分区分开。这允许触觉渲染设备将触觉信号适配到特定类型的触觉设备、触觉设备能力和目标身体部位，以便保持低于感知阈值并确保预期的触觉体验。

在一个实现中，重建过程中预测样本块(Pred(p))和解码残差样本块(Res p)的简单加法被混合过程替换。混合过程可以被认为是涉及比简单加法更复杂的运算的函数f(Pred(p)，Res p)。例如，在混合过程中，解码的预测残差(Res...

一种用于沉浸式场景描述的数据结构包括基于触觉多级纹理映射的表示触觉效果的信息，该触觉多级纹理映射包括多个触觉纹理。在渲染时，至少基于用户交互的速度从多个触觉纹理中选择一个触觉纹理：当用户以低速交互时，选择具有精细细节的纹理来渲染触觉反馈...

提供了用于生成、传输和解码扩展现实场景的场景描述的方法、设备和数据流。根据本原理，场景图链接节点并且包括指示哪些节点对应于与场景的真实环境的对象相对应的3D模型的第一列表的对象和/或哪些节点对应于与场景的虚拟对象相对应的3D模型的第二列...

提供用于重新扫描其中发生变化的3D场景的方法、设备。获得3D场景的3D模型，并且在3D场景中定位扫描设备。扫描设备开始扫描3D场景。检测3D场景的扫描部分和3D模型之间的差异，并在显示给用户的视图上突出显示。向用户提供选项以通过添加新的...

用于沉浸式场景描述的数据结构包括基于触觉纹理和用于确定如何解释触觉纹理的附加信息字段的表示触觉效果的信息，从而允许区分像素直接表示触觉效果的值的情况或像素引用表示触觉效果的触觉信号的情况。附加信息还可以携带信息用以在不同设置的集合当中选...

一种用于在SL‑HDR1系统中校正SDR视频的方法，包括：标识在SL‑HDR1过程期间其色度分量值有被削波的风险的SDR图片样本；以及在从SDR图片生成HDR图片之前，校正所标识的样本以防止削波。

提供方法、设备和数据流来对与协助元数据相关联的未对齐多视图加深度图像进行编码，以用于生成与未对齐颜色视图对齐的深度图。在编码阶段处，对于未对齐颜色视图，评估每个深度图的贡献，并映射所表示的对象。图片补丁在对象和贡献视图方面被切割成同质的...

公开了用于延迟受约束的基于模板的操作的系统、方法和手段。设备(例如，视频解码设备、视频编码设备)可执行快速模板重建。该设备可获得与第一块相关联的运动信息。该设备可获得该第一块的运动向量候选列表。该运动信息可基于该运动向量候选列表来确定。...

一种用于视频编码和解码的二次变换，涉及用于对图片进行编码/解码的方法和装置，其针对INTRA模式中视频编码和解码使用二次变换，并且更具体地，针对帧内子分区模式中的译码单元的变换单元使用二次变换。根据译码单元和变换单元的各种参数提出了不同...

一种用于视频编码和解码的二次变换，涉及用于对图片进行编码/解码的方法和装置，其针对INTRA模式中视频编码和解码使用二次变换，并且更具体地，针对帧内子分区模式中的译码单元的变换单元使用二次变换。根据译码单元和变换单元的各种参数提出了不同...

在一个实现方式中，我们提出了通过指定用于接近触发的节点级别的接近准则来增强场景描述。例如，在节点级别的场景描述增强包括以下一个或多个：(1)指示与所述节点的接近重要性的两个权重参数，(2)对附接至节点网格的简化网格的引用，用于接近计算，...

本申请涉及用于视频编码和解码的量化矩阵预测的方法及装置。所述方法对包含于比特流中的视频信息进行解码及/或编码可涉及与所述视频信息的至少一部分相关联的预测量化矩阵及指示所述预测量化矩阵的至少一个系数将被解译为残差的语法元素，使得对所述视频...

本申请涉及用于视频编码和解码的量化矩阵预测的方法及装置。所述方法对包含于比特流中的视频信息进行解码及/或编码可涉及与所述视频信息的至少一部分相关联的预测量化矩阵及指示所述预测量化矩阵的至少一个系数将被解译为残差的语法元素，使得对所述视频...