指示视频内容的文件格式制造技术

本发明专利技术提供一种装置，包含：接口电路，处理电路与显示设备。该接口电路用于接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容。该媒体数据报含该一个或多个轨道与该一个或多个空间分区的对应关系。该处理电路，用于抽取该一个或多个轨道与该一个或多个空间分区的对应关系，并基于该对应关系，从该一个或多个轨道中选择一个或多个覆盖轨道，覆盖轨道具有空间分区覆盖关注区域。该显示设备，用于在该时间显示关注区域的影像。

【技术实现步骤摘要】
【国外来华专利技术】指示视频内容的文件格式交叉引用本专利技术主张在2016年8月10日提出的申请号为62/372,824、标题为“MethodsandApparatusofIndicationsofVRand360videoContentinFileFormat”的美国临时专利申请的优先权，主张在2016年9月2日提出的申请号为62/382,805、标题为“MethodsandApparatusofIndicationsofVRinFileFormats”的美国临时专利申请的优先权，主张在2017年7月31日提出的申请号为15/663,932、标题为“FILEFORMATFORINDICATIONOFVIDEOCONTENT”的美国临时专利申请的优先权，其内容以引用方式整体并入本文中。
技术介绍
此处所提供的背景描述是为了大体展现本专利技术的内容。本专利技术的专利技术人的工作，在此
技术介绍
部分所描述的以及说明书的某些方面可能不构成申请时的现有技术，也并非是明确或暗示承认为本专利技术的现有技术。全向视频(Omnidirectionalvideo)/360视频可渲染以提供特别的用户体验。例如，于虚拟现实应用中，计算机技术创建复制真实环境的现实影像，声音以及其他感觉或创建虚拟设置，所以用户能感受到于环境中实体存在的仿真全向视频(Omnidirectionalvideo)/360视频的体验。
技术实现思路
本专利技术之一方面提供装置，其包含接口电路，处理电路，及显示设备。该接口电路用于接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容。该媒体数据报含该一个或多个轨道到该一个或多个空间分区的对应关系。该处理电路用于抽取该一个或多个轨道到该一个或多个空间分区的该对应关系，从该一个或多个轨道选择一个或多个覆盖轨道，该一个或多个覆盖轨道基于该对应关系具有覆盖关注区域的空间分区，并基于该一个或多个轨道产生该关注区域的多个影像。该显示设备用于显示该关注区域的该多个影像。根据本专利技术之一方面，该处理电路用于基于与轨道关注的空间分区信息，决定该轨道到空间分区的对应关系。根据本专利技术之一方面，该处理电路用于基于投射指示器决定投射类型，并基于该投射类型决定该对应关系。于实施例中，该处理电路用于当该投射指示器指示等距长方投影时，在定义该空间分区的球面坐标系统中抽取多个值。例如，该处理电路用于基于该球面坐标系统内的该多个值决定定义该空间分区的中心点与视场(afieldofview)。又例如，该处理电路用于基于该球面坐标系统中的该多个值决定定义该空间分区的边界。在另一个实施例中，该处理电路用于当该投射指示器指示理想的固体投影(platonicsolidprojection.)时，抽取识别该空间分区的面索引。本专利技术之一方面提供一种影像渲染方法。该方法包含接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容。该媒体数据报含该一个或多个轨道到该一个或多个空间分区的对应关系。而且，该方法包含抽取该一个或多个轨道到该一个或多个空间分区的该对应关系，从该一个或多个轨道选择一个或多个覆盖轨道，该一个或多个覆盖轨道基于该对应关系具有覆盖关注区域的空间分区，基于该一个或多个轨道产生该关注区域的多个影像，以及显示该关注区域的该多个影像。本专利技术之一方面提供一种装置，其包含内存与处理电路。该内存用于缓冲获取的媒体数据。该处理电路用于将该获取的媒体数据架构进对应一个或多个空间分区的一个或多个轨道，编码该媒体数据并用该一个或多个轨道到该一个或多个空间分区的对应关系封装该编码的媒体数据进一个或多个文件。本专利技术之一方面提供一种方法。该方法包含接收获取的媒体数据，将该获取的媒体数据架构进对应一个或多个空间分区的一个或多个轨道，编码该媒体数据，以及用该一个或多个轨道到该一个或多个空间分区的对应关系封装该编码的媒体数据进一个或多个文件。附图说明本专利技术提出作为例子的各实施例会参考后面附图在后具体描述，其中同样的标号代表同样元件，其中：图1显示根据本专利技术实施例的媒体系统100的方块图；图2显示根据本专利技术一个实施例的流程例子200的流程图；图3显示根据本专利技术一个实施例的流程例子300的流程图；以及图4-图8显示根据本专利技术一个实施例的文件格式的对应关系范例。具体实施方式图1显示根据本专利技术实施例的媒体系统100的方块图。媒体系统100包含相互耦接的来源系统(sourcesystem)110，分发系统(deliverysystem)150以及渲染系统(renderingsub-system)160。来源系统110用于获取全向视频(Omnidirectionalvideo)/360视频的媒体数据并恰当地封装(encapsulate)该媒体数据。分发系统150用于将封装的媒体数据从来源系统110分发至渲染系统160。渲染系统160用于根据媒体数据渲染全向视频(Omnidirectionalvideo)/360视频。根据本专利技术之一方面，来源系统110逻辑地将媒体数据架构进一个或多个轨道中，且每一轨道包含按时间顺序的取样序列。于一个实施例中，来源系统110根据空间分区将影像/视频数据架构进一个或多个轨道。该一个或多个轨道被封装进一个或多个文件。并且，来源系统110包含轨道与空间分区的间的对应关系来协助渲染。因此，在一个例子中，基于对应关系，渲染系统160能获取合适轨道来产生关注区域的影像。来源系统110可使用任何合适的技术实施。于一个实施例中，来源系统110的元件组合于设备封装内。于另一个例子中，来源系统110为分布式系统(distributedsystem)，来源系统110的元件可被安排于不同位置，且可互相恰当地经由例如有线连接及/或无线连接而连接。在图1的例子中，来源系统100包含互相耦接的获取设备(acquisitiondevice)112，处理电路(例如影像产生电路)120，内存115以及接口电路111。获取设备112用于获取各种媒体数据，例如影像，声音，全向视频(Omnidirectionalvideo)/360视频等等。获取设备112可具有恰当设置。于一个例子中，获取设备112包含具有多个照相机的照相机架(camerarig，图未示)，例如具有两个鱼眼照相机(fisheyecamera)的影像系统，具有四个照相机的四面影像系统(tetrahedralimagingsystem)，具有六个照相机的立方体影像系统(cubicimagingsystem)，具有八个照相机的八面体影像系统(octahedralimagingsystem)，具有二十个照相机的二十面体影像系统(icosahedralimagingsystem)，等等，用于在环绕空间中不同方向照像。在一个实施例中，照相机所拍摄的影像为重迭的，且可拼接为比单个照相机提供更大范围的环绕空间的影像。在一个例子中，照相机所拍摄的影像可提供整个环绕空间的360°球面覆盖。需要注意的是，照相机所拍摄的影像可提供小于环绕空间的360°球面覆盖。由获取设备112获取的媒体数据可恰当存储或缓冲，例如在内存115中。处理电路120可存取内存115，处理媒体数据，并将该媒体数据封装进恰当格式。封装的媒体数据然后恰当地储存或缓冲本文档来自技高网...

【技术保护点】
1.一种装置，其特征在于，包含：接口电路(161)，用于接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容，该媒体数据报含该一个或多个轨道到该一个或多个空间分区的对应关系；处理电路(170)，用于抽取该一个或多个轨道到该一个或多个空间分区的该对应关系，从该一个或多个轨道选择一个或多个覆盖轨道，该一个或多个覆盖轨道基于该对应关系具有覆盖关注区域的空间分区，并基于该一个或多个轨道产生该关注区域的多个影像；以及显示设备，用于显示该关注区域的该多个影像。

【技术特征摘要】
【国外来华专利技术】2016.08.10 US 62/372,824;2016.09.02 US 62/382,805;1.一种装置，其特征在于，包含：接口电路(161)，用于接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容，该媒体数据报含该一个或多个轨道到该一个或多个空间分区的对应关系；处理电路(170)，用于抽取该一个或多个轨道到该一个或多个空间分区的该对应关系，从该一个或多个轨道选择一个或多个覆盖轨道，该一个或多个覆盖轨道基于该对应关系具有覆盖关注区域的空间分区，并基于该一个或多个轨道产生该关注区域的多个影像；以及显示设备，用于显示该关注区域的该多个影像。2.如权利要求1所述的装置，其中该处理电路用于基于与轨道关注的空间分区信息，决定该轨道到空间分区的对应关系。3.如权利要求2所述的装置，其特征在于，该处理电路用于基于投射指示器决定投射类型，并基于该投射类型决定该对应关系。4.如权利要求3所述的装置，其特征在于，该处理电路用于当该投射指示器指示等距长方投影时，在定义该空间分区的球面坐标系统中抽取多个值。5.如权利要求4所述的装置，其特征在于，该处理电路用于基于该球面坐标系统内的该多个值决定定义该空间分区的中心点与视场。6.如权利要求4所述的装置，其特征在于，该处理电路用于基于该球面坐标系统中的该多个值决定定义该空间分区的边界。7.如权利要求3所述的装置，其特征在于，该处理电路用于当该投射指示器指示理想的固体投影时，抽取识别该空间分区的面索引。8.一种影像渲染方法，其特征在于，包含：接收媒体数据，该媒体数据具有被架构进对应一个或多个空间分区的一个或多个轨道的视频内容，该媒体数据报含该一个或多个轨道到该一个或多个空间分区的对应关系；抽取该一个或多个轨道到该一个或多个空间分区的该对应关系；从该一个或多个轨道选择一个或多个覆盖轨道，该一个或多个覆盖轨道基于该对应关系具有覆盖关注区域的空间分区；基于该一个或多个轨道产生该关注区域的多个影像；以及显示该关注区域的该多个影像。9.如权利要求8所...

【专利技术属性】
技术研发人员：赖柏霖，刘杉，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾,71