显示方法以及显示装置制造方法及图纸

一种显示方法，是与移动体协作来动作的显示装置中的显示方法，包括：决定步骤(S901)，根据所述移动体的驾驶状况，决定对第1周边信息和第2周边信息的哪一个进行显示，所述第1周边信息是利用二维数据而生成的示出所述移动体的周边状况的影像，所述第2周边信息是利用三维数据而生成的示出所述移动体的周边状况的影像；以及显示步骤(S903、S904)，对决定的将要显示的所述第1周边信息或所述第2周边信息进行显示。

Display method and display device

A display method is a display method in a display device acting in cooperation with a mobile body, which includes: a decision step (S901), according to the driving condition of the mobile body, deciding which of the first and second peripheral information to display, the first peripheral information is an image generated by using two-dimensional data showing the peripheral condition of the mobile body, and the second peripheral information. Information is an image generated by using three-dimensional data to show the peripheral condition of the mobile body, and a display step (S903, S904) to display the first peripheral information or the second peripheral information determined to be displayed.

【技术实现步骤摘要】
【国外来华专利技术】显示方法以及显示装置
本申请涉及显示方法以及显示装置。
技术介绍
在用于汽车或机器人自主地进行工作的计算机视觉、地图信息、监控、基础结构检查、或影像分发等较大的领域中，今后将会普及灵活运用了三维数据的装置或服务。三维数据通过测距仪等距离传感器、立体摄影机、或多个单眼相机的组合等各种方法来获得。作为三维数据的一个表现方法有被称作点云数据的表现方法，该方法通过三维空间内的点群来表现三维结构的形状(例如，参照非专利文献1)。在点云数据中存放了点群的位置以及颜色。虽然预想点云数据作为三维数据的表现方法将成为主流，但是，点群的数据量非常大。因此，在三维数据的蓄积或传输中与二维的动态图像(作为一个例子，有以MPEG而被标准化后的MPEG-4AVC或HEVC等)一样，需要通过编码来进行数据量的压缩。并且，关于点云数据的压缩，有一部分由进行点云数据关联的处理的公开的程序库(PointCloudLibrary：点云库)等支持。并且，有周知的利用三维的地图数据，检索在车辆周边的设施，并进行显示的的技术(例如，参照专利文献1)。(现有技术文献)(专利文献)专利文献1国际公开第2014/020663号在对基于这种三维数据的信息进行显示的显示装置中，希望能够显示与状况相符的恰当的信息。
技术实现思路
本申请的目的在于，提供一种能够显示恰当的信息的显示方法或显示装置。本申请的一个形态所涉及的显示方法是与移动体协作来动作的显示装置中的显示方法，包括：决定步骤，根据所述移动体的驾驶状况，决定对第1周边信息和第2周边信息的哪一个进行显示，所述第1周边信息是利用二维数据而生成的示出所述移动体的周边状况的信息，所述第2周边信息是利用三维数据而生成的示出所述移动体的周边状况的信息；以及显示步骤，对决定的将要显示的所述第1周边信息或所述第2周边信息进行显示。另外，这些所有的或具体的形态可以作为系统、方法、集成电路、计算机程序或计算机可读取的CD-ROM等记录介质来实现，并且可以通过对系统、方法、集成电路、计算机程序以及记录介质进行组合来实现。本申请能够提供一种能够显示恰当的信息的显示方法或显示装置。附图说明图1示出了实施方式1所涉及的编码三维数据的构成。图2示出了属于实施方式1所涉及的GOS的最下层的SPC间的预测结构的一个例子。图3示出了实施方式1所涉及的层间的预测结构的一个例子。图4示出了实施方式1所涉及的GOS的编码顺序的一个例子。图5示出了实施方式1所涉及的GOS的编码顺序的一个例子。图6是实施方式1所涉及的三维数据编码装置的方框图。图7是实施方式1所涉及的编码处理的流程图。图8是实施方式1所涉及的三维数据解码装置的方框图。图9是实施方式1所涉及的解码处理的流程图。图10示出了实施方式1所涉及的元信息的一个例子。图11示出了实施方式2所涉及的SWLD的构成例。图12示出了实施方式2所涉及的服务器以及客户端的工作例。图13示出了实施方式2所涉及的服务器以及客户端的工作例。图14示出了实施方式2所涉及的服务器以及客户端的工作例。图15示出了实施方式2所涉及的服务器以及客户端的工作例。图16是实施方式2所涉及的三维数据编码装置的方框图。图17是实施方式2所涉及的编码处理的流程图。图18是实施方式2所涉及的三维数据解码装置的方框图。图19是实施方式2所涉及的解码处理的流程图。图20示出了实施方式2所涉及的WLD的构成例。图21示出了实施方式2所涉及的WLD的八叉树结构的例子。图22示出了实施方式2所涉及的SWLD的构成例。图23示出了实施方式2所涉及的SWLD的八叉树结构的例子。图24是示出实施方式3所涉及的车辆间的三维数据的收发的状态的模式图。图25示出了在实施方式3所涉及的车辆间被传输的三维数据的一个例子。图26是实施方式3所涉及的三维数据制作装置的方框图。图27是实施方式3所涉及的三维数据制作处理的流程图。图28是实施方式3所涉及的三维数据发送装置的方框图。图29是实施方式3所涉及的三维数据发送处理的流程图。图30是实施方式3所涉及的三维数据制作装置的方框图。图31是实施方式3所涉及的三维数据制作处理的流程图。图32是实施方式3所涉及的三维数据发送装置的方框图。图33是实施方式3所涉及的三维数据发送处理的流程图。图34是实施方式4所涉及的三维信息处理装置的方框图。图35是实施方式4所涉及的三维信息处理方法的流程图。图36是实施方式4所涉及的三维信息处理方法的流程图。图37是用于说明实施方式5所涉及的三维数据的发送处理的图。图38是实施方式5所涉及的三维数据制作装置的方框图。图39是实施方式5所涉及的三维数据制作方法的流程图。图40是实施方式5所涉及的三维数据制作方法的流程图。图41是实施方式6所涉及的显示方法的流程图。图42示出了透过实施方式6所涉及的挡风玻璃看到的周边环境的例子。图43示出了实施方式6所涉及的平视显示器的显示例。图44示出了实施方式6所涉及的调整后的平视显示器的显示例。具体实施方式当在实际的装置或服务中使用点云数据等编码数据时，需要针对所希望的空间位置或目标对象等进行随机存取，但是到目前为止，三维的编码数据中的随机存取作为功能并不存在，因此，为此的编码方法也不存在。在本申请中，对能够提供一种在编码三维数据中能够提供随机存取功能的三维数据编码方法、三维数据解码方法、三维数据编码装置或三维数据解码装置。本申请的一个形态所涉及的三维数据编码方法对三维数据进行编码，所述三维数据编码方法包括：划分步骤，将所述三维数据划分为分别与三维坐标对应的第一处理单位，该第一处理单位是随机存取单位；以及编码步骤，通过对多个所述第一处理单位的每一个进行编码，来生成编码数据。据此，以每个第一处理单位的随机存取成为可能。这样，该三维数据编码方法能够提供在编码三维数据中的随机存取功能。例如，也可以是，所述三维数据编码方法包括生成步骤，在该生成步骤中生成第一信息，该第一信息示出多个所述第一处理单位、以及与多个所述第一处理单位的每一个对应的三维坐标，所述编码数据包括所述第一信息。例如，也可以是，所述第一信息进一步示出与所述多个第一处理单位的每一个对应的对象、时刻以及数据存放目的地中的至少一个。例如，也可以是，在所述划分步骤，进一步将所述第一处理单位划分为多个第二处理单位，在所述编码步骤，对多个所述第二处理单位的每一个进行编码。例如，也可以是，在所述编码步骤，针对处理对象的第一处理单位中包含的处理对象的第二处理单位，参照所述处理对象的第一处理单位中包含的其他的第二处理单位来进行编码。据此，通过参照其他的第二处理单位，从而能够提高编码效率。例如，也可以是，在所述编码步骤中，作为所述处理对象的第二处理单位的类型，从不参照其他的第二处理单位的第一类型、参照其他的一个第二处理单位的第二类型、以及参照其他的两个第二处理单位的第三类型中选择一个，并按照选择的类型，对所述处理对象的第二处理单位进行编码。例如，也可以是，在所述编码步骤中，按照所述三维数据中包含的对象的数量或疏密程度，变更对所述第一类型进行选择的频度。据此，能够对折衷的关系中的随机存取性与编码效率进行恰当地设定。例如，也可以是，在所述编码步骤中，按照所述三维数据中包含的对象的数量或疏密程度、或者动本文档来自技高网...

【技术保护点】
1.一种显示方法，是与移动体协作来动作的显示装置中的显示方法，所述显示方法包括：决定步骤，根据所述移动体的驾驶状况，决定对第1周边信息和第2周边信息的哪一个进行显示，所述第1周边信息是利用二维数据而生成的示出所述移动体的周边状况的信息，所述第2周边信息是利用三维数据而生成的示出所述移动体的周边状况的信息；以及显示步骤，对决定的将要显示的所述第1周边信息或所述第2周边信息进行显示。

【技术特征摘要】
【国外来华专利技术】2016.11.01 US 62/4156451.一种显示方法，是与移动体协作来动作的显示装置中的显示方法，所述显示方法包括：决定步骤，根据所述移动体的驾驶状况，决定对第1周边信息和第2周边信息的哪一个进行显示，所述第1周边信息是利用二维数据而生成的示出所述移动体的周边状况的信息，所述第2周边信息是利用三维数据而生成的示出所述移动体的周边状况的信息；以及显示步骤，对决定的将要显示的所述第1周边信息或所述第2周边信息进行显示。2.如权利要求1所述的显示方法，所述驾驶状况是指，所述移动体是处于自主移动中、还是处于手动驾驶中，在所述决定步骤，在所述移动体处于自主移动中的情况下，决定为显示所述第1周边信息，在所述移动体处于手动驾驶中的情况下，决定为显示所述第2周边信息。3.如权利要求1所述的显示方法，所述驾驶状况是所述移动体所处的区域。4.如权利要求1至3的任一项所述的显示方法，所述三维数据是，通过从三维的点群数据中提取特征量为阈值以上的点群而得到的数据。...

【专利技术属性】
技术研发人员：小山达也，西孝启，杉尾敏康，远间正真，吉川哲史，松延徹，
申请(专利权)人：松下电器美国知识产权公司，
类型：发明
国别省市：美国,US