显示控制系统、显示控制装置及显示控制方法制造方法及图纸

本发明专利技术提供一种能够适当地控制无人飞行器具备的摄像机所拍摄的图像的显示状态的显示控制系统、显示控制装置及显示控制方法。传感数据获取部(60)获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像。判定部(62)根据与无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器。显示控制部(64)根据是否持续判定操作者没有目视无人飞行器来控制显示部中的所述飞行器拍摄图像的显示状态。

【技术实现步骤摘要】
【国外来华专利技术】显示控制系统、显示控制装置及显示控制方法
本专利技术涉及一种显示控制系统、显示控制装置及显示控制方法。
技术介绍
在使无人飞行器飞行时，为了确保该无人飞行器及其周围的安全，原则上该无人飞行器的操作者必须目视该无人飞行器。并且，在无人飞行器的操作者无法看见该无人飞行器的状况下，例如要求无人飞行器的操作者能够通过该无人飞行器具备的摄像机对周围拍摄出的图像(以下，称为飞行器拍摄图像)等，掌握该无人飞行器周围的状况。作为将飞行器拍摄图像提示给该无人飞行器的操作者的技术的一例，在专利文献1中记载有一种远距离操作系统，将根据安装在无人直升机上的全方位摄像机拍摄到的全方位图像所制作的操作用图像提示给操作者。另外，在专利文献2中记载有，在操作者的头部所佩戴的头戴式显示器上显示无人飞行体的摄像机拍摄到的影像。
技术介绍
文献专利文献专利文献1：日本专利特开2003-267295号公报专利文献2：日本专利特开2017-119501号公报
技术实现思路
[专利技术要解决的问题]在无人飞行器的操作者目视着该无人飞行器的状况下，希望尽可能地抑制向该操作者提示飞行器拍摄图像，以尽量不妨碍目视。另一方面，如果无人飞行器的操作者没有目视该无人飞行器，那么希望向操作者提示飞行器拍摄图像，让操作者知道无人飞行器周围的状况。然而，视线仅仅离开无人飞行器较短的时间便立即将飞行器拍摄图像提示给该操作者，向操作者提示飞行器拍摄图像抑或是抑制该提示频繁地切换时，担心操作者会感到不快。此外，在专利文献1记载的技术中，所述操作用图像一直被提示给操作者。另外，在专利文献2记载的技术中，无人飞行体的摄像机拍摄到的影像也始终显示在头戴式显示器上。本专利技术鉴于所述问题而完成，目的之一在于提供一种能够适当地控制无人飞行器具备的摄像机所拍摄的图像的显示状态的显示控制系统、显示控制装置及显示控制方法。[解决问题的技术手段]为了解决所述问题，本专利技术的显示控制系统包含：图像获取机构，获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像；判定机构，根据与所述无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器；及显示控制机构，根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示部中的所述飞行器拍摄图像的显示状态。在本专利技术的一形态中，所述判定机构根据是否以指定次数连续地判定所述操作者没有目视所述无人飞行器，来进一步判定是否持续判定所述操作者没有目视所述无人飞行器，所述显示控制机构根据是否以指定次数连续地判定所述操作者没有目视所述无人飞行器的判定结果，控制所述显示部中的所述飞行器拍摄图像的显示状态。或者，所述判定机构根据是否已持续指定时间判定所述操作者没有目视所述无人飞行器，来进一步判定是否持续判定所述操作者没有目视所述无人飞行器，所述显示控制机构根据是否已持续指定时间判定所述操作者没有目视所述无人飞行器的判定结果，控制所述显示部中的所述飞行器拍摄图像的显示状态。另外，在本专利技术的一形态中，所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，对是否使所述飞行器拍摄图像显示在所述显示部进行控制。或者，所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示在所述显示部的所述飞行器拍摄图像的尺寸。另外，在本专利技术的一形态中，所述判定机构根据所述无人飞行器与所述操作者之间的距离，判定该操作者是否目视着该无人飞行器。另外，在本专利技术的一形态中，所述判定机构根据所述操作者的视野范围与所述无人飞行器的位置，判定该操作者是否目视着该无人飞行器。另外，在本专利技术的一形态中，所述判定机构根据配置在所述操作者的头部的摄像机所拍摄的操作者拍摄图像，判定所述操作者是否目视着所述无人飞行器。另外，在本专利技术的一形态中，所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，对所述操作者佩戴的头戴式显示器所具备的所述显示部中的所述飞行器拍摄图像的显示状态进行控制。另外，在本专利技术的一形态中，所述判定机构根据所述操作者佩戴的头戴式示器所具备的摄像机拍摄的操作者拍摄图像，判定所述操作者是否目视着所述无人飞行器，所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，对所述头戴式显示器所具备的所述显示部中的所述飞行器拍摄图像的显示状态进行控制。另外，在本专利技术的一形态中，还包含引导机构，所述引导机构在所述操作者没有目视所述无人飞行器的情况下，将引导所述操作者使其能够目视所述无人飞行器的引导信息提供给所述操作者。另外，本专利技术的显示控制装置包含：图像获取机构，获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像；判定机构，根据与所述无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器；及显示控制机构，根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示部中的所述飞行器拍摄图像的显示状态。另外，本专利技术的显示控制方法包含如下步骤：获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像；根据与所述无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器；及根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示部中的所述飞行器拍摄图像的显示状态。附图说明图1是表示本专利技术的一实施方式的显示控制系统的整体构成的一例的图。图2A是表示本专利技术的一实施方式的头戴式显示器的构成的一例的图。图2B是表示本专利技术的一实施方式的无人飞行器的构成的一例的图。图3是示意性地表示无人飞行器的位置与操作者的位置的关系的一例的图。图4是表示本专利技术的一实施方式的头戴式显示器中装配的功能的一例的功能模块图。图5是表示本专利技术的一实施方式的头戴式显示器中进行的处理的流程的一例的流程图。具体实施方式以下，一边参照附图，一边对本专利技术的一实施方式进行说明。图1是表示本专利技术的一实施方式的显示控制系统1的整体构成的一例的图。如图1所示，本实施方式的显示控制系统1中包含头戴式显示器(HMD)10、无人飞行器12及操作终端14。如图1所示，操作终端14与无人飞行器12能够相互通信。另外，HMD10与操作终端14能够相互通信。此外，HMD10与无人飞行器12也可以能够不经由操作终端14而直接相互通信。HMD10是无人飞行器12的操作者可以佩戴在头部的显示器装置。此外，在以下说明中，本实施方式的HMD10设为影像穿透式(视频透视式)。因此，无人飞行器12的操作者能够通过下述摄像机部30拍摄的图像(以下，称为操作者拍摄图像)，在佩戴着HMD10的状态下看见实际空间的情况。本实施方式的HMD10中，例如如图2A所示，包含处理器20、存储部22、通信部24、显示部26、传感器部28及摄像机部30。此外，HMD10中也可以包含本文档来自技高网...

【技术保护点】
1.一种显示控制系统，其特征在于包含：/n图像获取机构，获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像；/n判定机构，根据与所述无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器；及/n显示控制机构，根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示部中的所述飞行器拍摄图像的显示状态。/n

【技术特征摘要】
【国外来华专利技术】1.一种显示控制系统，其特征在于包含：
图像获取机构，获取飞行中的无人飞行器具备的摄像机所拍摄的飞行器拍摄图像；
判定机构，根据与所述无人飞行器及该无人飞行器的操作者中的至少一个相关的传感数据，判定该操作者是否目视着该无人飞行器；及
显示控制机构，根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示部中的所述飞行器拍摄图像的显示状态。


2.根据权利要求1所述的显示控制系统，其特征在于：
所述判定机构根据是否以指定次数连续地判定所述操作者没有目视所述无人飞行器，来进一步判定是否持续判定所述操作者没有目视所述无人飞行器，且
所述显示控制机构根据是否以指定次数连续地判定所述操作者没有目视所述无人飞行器的判定结果，控制所述显示部中的所述飞行器拍摄图像的显示状态。


3.根据权利要求1所述的显示控制系统，其特征在于：
所述判定机构根据是否已持续指定时间判定所述操作者没有目视所述无人飞行器，来进一步判定是否持续判定所述操作者没有目视所述无人飞行器，且
所述显示控制机构根据是否已持续指定时间判定所述操作者没有目视所述无人飞行器的判定结果，控制所述显示部中的所述飞行器拍摄图像的显示状态。


4.根据权利要求1至3中任一项所述的显示控制系统，其特征在于：
所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，对是否使所述飞行器拍摄图像显示在所述显示部进行控制。


5.根据权利要求1至3中任一项所述的显示控制系统，其特征在于：
所述显示控制机构根据是否持续判定所述操作者没有目视所述无人飞行器，控制显示在所述显示部的所述飞行器拍摄图像的尺寸。


6.根据权利要求1至5中任一项所述的显示控制系统，其特征在于：
所述判定机构根据所述无人飞行器与所述操作者之间的距离，判定该操作者是否目视着该无人飞行器。


7.根据权利要求1至6中任一项所述的显示控制系统，其特征在于：
所述判定机构根据所述操作者的视野范围与所述无人飞行器的位置，...

【专利技术属性】
技术研发人员：中泽满，岩濑裕章，
申请(专利权)人：乐天株式会社，
类型：发明
国别省市：日本;JP