电子装置的控制方法、电子装置以及记录介质制造方法及图纸

电子装置的控制方法、电子装置以及记录介质。本发明专利技术公开电子装置、电子装置的控制方法、计算机程序及计算机可读记录介质。本发明专利技术的电子装置的控制方法包括：从在车辆运行过程中由摄像头拍摄而得的影像数据中检测人行横道的步骤；生成用于表示所检测出的人行横道的对象的步骤；以及通过增强现实来输出所生成的对象的步骤。

【技术实现步骤摘要】
电子装置的控制方法、电子装置以及记录介质本申请是原案申请号为201510867498.6的专利技术专利申请(申请日为2015年12月1日、专利技术名称为“电子装置、电子装置的控制方法”)的分案申请。
本专利技术涉及电子装置、电子装置的控制方法、计算机程序及计算机可读记录介质，更详细地，涉及在增强现实上向使用人员执行车辆驾驶相关引导的电子装置、电子装置的控制方法、计算机程序及计算机可读记录介质。
技术介绍
当车辆行驶时，最重要的是安全行驶及预防交通事故，为此，在车辆安装有执行控制车辆的姿势、控制车辆结构装置的功能等的多种辅助装置及安全带、安全气囊等安全装置。不仅如此，近期，设置于车辆的黑匣子等的装置存储车辆的行驶影像及从各种传感器传输的数据，从而处于在车辆设置当车辆发生交通事故时用于查明车辆的事故原因的装置的趋势。由于也可以在智能手机、平板电脑等便携式终端设备安装黑匣子或导航仪应用等，因而被用作如上所述的车辆用装置。但实际上，目前在这种车辆用装置中的行驶影像的利用率非常低。更具体地，即使通过目前安装于车辆的摄像头等的视觉传感器来获得车辆的行驶影像，车辆的电子装置仅停留于单纯地显示、传送这种影像或仅停留于生成是否脱离车道等简单的周边通知信息。并且，作为目前受关注的新的车辆电子装置，还提出平视显示器(HUD，Head-UpDisplay)或增强现实界面，但在这些装置中，对车辆的行驶影像的利用率也仅停留在单纯显示或生成简单的通知信息的层面。
技术实现思路
本专利技术根据上述必要性而提出，本专利技术的目的在于，提供若在道路上行驶中的车辆停在交叉路口等情况下，生成用于表示人行横道的对象，并通过增强现实进行输出的电子装置、电子装置的控制方法、计算机程序及计算机可读记录介质。用于实现上述目的的本专利技术一实施例的电子装置的控制方法包括：从在车辆运行过程中由摄像头拍摄而得的影像数据中检测人行横道的步骤；生成用于表示所检测出的上述人行横道的对象的步骤；以及通过增强现实来输出所生成的上述对象的步骤。而且，本专利技术的电子装置的控制方法还可包括判断上述车辆是否处于停车状态的步骤，在上述生成用于表示所检测出的上述人行横道的对象的步骤中，若判断为上述车辆处于停车状态，则可生成用于识别成上述人行横道位于上述车辆的前方的第一对象。并且，本专利技术的电子装置的控制方法还可包括在上述影像数据中利用信号灯的信号区域部分的影像数据来判断信号种类信息的步骤，在上述生成用于表示所检测出的上述人行横道的对象的步骤中，若在上述信号种类信息为停止信号的状态下上述车辆维持停车状态，则生成用于识别成上述人行横道位于上述车辆的前方的第一对象，若在上述信号种类信息为停止信号的状态下上述车辆出发，则生成用于警告上述人行横道位于上述车辆的前方的第二对象。而且，可以以互不相同的颜色区分上述第一对象、第二对象。并且，上述第一对象、第二对象可以以包含与颜色透明度相关的阿尔法通道的形态体现，上述第一对象、第二对象可根据上述阿尔法通道来包含透明区域。而且，本专利技术的电子装置的控制方法还可包括利用拍摄而得的上述影像数据来判断上述人行横道上是否存在行人的步骤；以及生成用于表示是否存在上述行人的对象的步骤。并且，本专利技术的电子装置的控制方法还可包括如下的步骤：若在上述人行横道上存在行人的状态下上述车辆的前方车辆出发，则控制成不执行前方车辆出发引导。而且，本专利技术的电子装置的控制方法还可包括如下的步骤：若在上述人行横道上存在行人的状态下上述车辆出发，则控制成执行用于警告在上述人行横道上存在行人的引导。并且，上述第一对象、第二对象的显现位置可以为在上述增强现实中人行横道所处的区域。而且，上述输出步骤可包括：对摄像头执行校准(Calibration)来计算出摄像头参数的步骤；以上述摄像头参数为基础，生成上述摄像头的拍摄影像的虚拟三维空间(3-Dimensional)的步骤；以及使所生成的上述对象位于上述虚拟三维空间的步骤。另一方面，用于实现上述目的的本专利技术一实施例的电子装置包括：显示部，用于显示画面；对象生成部，若从在车辆运行过程中由摄像头拍摄而得的影像数据中检测出人行横道，则生成用于表示所检测出的上述人行横道的对象；以及控制部，将上述显示部控制成通过增强现实来输出所生成的上述对象。而且，上述控制部可判断上述车辆是否处于停车状态，若判断为上述车辆处于停车状态，则上述控制部可控制上述对象生成部生成用于识别成上述人行横道位于上述车辆的前方的第一对象。并且，上述控制部可在上述影像数据中利用信号灯的信号区域部分的影像数据来判断信号种类信息，上述控制部可对上述对象生成部进行如下的控制：若在上述信号种类信息为停止信号的状态下上述车辆维持停车状态，则生成用于识别成上述人行横道位于上述车辆的前方的第一对象，若在上述信号种类信息为停止信号的状态下上述车辆出发，则生成用于警告上述人行横道位于上述车辆的前方的第二对象。而且，可以以互不相同的颜色区分上述第一对象、第二对象。并且，上述第一对象、第二对象可以以包含与颜色透明度相关的阿尔法通道的形态体现，上述第一对象、第二对象可根据上述阿尔法通道来包含透明区域。而且，上述控制部可通过利用拍摄而得的上述影像数据来判断上述人行横道上是否存在行人，并控制上述对象生成部生成用于表示是否存在上述行人的对象。并且，上述控制部可进行如下的控制：若在上述人行横道上存在行人的状态下上述车辆的前方车辆出发，则不执行前方车辆出发引导。而且，上述控制部可进行如下的控制：若在上述人行横道上存在行人的状态下上述车辆出发，则执行用于警告在上述人行横道上存在行人的引导。并且，上述第一对象、第二对象的显现位置可以为在上述增强现实中人行横道所处的区域。而且，上述控制部可进行如下的控制：通过对摄像头进行校准来计算出摄像头参数，以上述摄像头参数为基础，生成上述摄像头的拍摄影像的虚拟三维空间，使所生成的上述对象位于上述虚拟三维空间。另一方面，用于实现上述目的的本专利技术一实施例的存储于记录介质的计算机程序可通过与电子装置相结合来执行以下步骤：从在车辆运行过程中由摄像头拍摄而得的影像数据中检测人行横道的步骤；生成用于表示所检测出的上述人行横道的对象的步骤；以及通过增强现实来输出所生成的上述对象的步骤。另一方面，在用于实现上述目的的本专利技术一实施例的存储有用于执行电子装置的控制方法的计算机程序的计算机可读记录介质中，上述控制方法包括：从在车辆运行过程中由摄像头拍摄而得的影像数据中检测人行横道的步骤；生成用于表示所检测出的上述人行横道的对象的步骤；以及通过增强现实来输出所生成的上述对象的步骤。根据本专利技术的上述多种实施例，可在存在人行横道的区间通过增强现实方法动态地显现引导信息，从而可有效地向驾驶员提供引导，并可引起驾驶员的兴趣，而且可谋求驾驶员对车辆的安全驾驶及方便性。并且，根据本专利技术的上述多种实施例，根据人行横道上是否存在行人来执行相关引导，从而可谋求驾驶员本文档来自技高网...

【技术保护点】
1.一种电子装置的控制方法，该控制方法包括以下步骤：/n确定车辆是否处于停车状态；/n从在所述车辆处于停车状态时段期间在摄像头中拍摄的影像数据中检测人行横道；/n当检测到人行横道时，生成用于使得驾驶员能够识别所述人行横道位于所述车辆的前方的第一对象；/n确定所生成的第一对象在所述摄像头的拍摄影像的虚拟三维3D空间中的映射位置；以及/n通过基于所确定的映射位置将所述第一对象映射到所述虚拟3D空间，通过增强现实来显示所述第一对象。/n

【技术特征摘要】
20141201 KR 10-2014-0170051;20150316 KR 10-2015-001.一种电子装置的控制方法，该控制方法包括以下步骤：
确定车辆是否处于停车状态；
从在所述车辆处于停车状态时段期间在摄像头中拍摄的影像数据中检测人行横道；
当检测到人行横道时，生成用于使得驾驶员能够识别所述人行横道位于所述车辆的前方的第一对象；
确定所生成的第一对象在所述摄像头的拍摄影像的虚拟三维3D空间中的映射位置；以及
通过基于所确定的映射位置将所述第一对象映射到所述虚拟3D空间，通过增强现实来显示所述第一对象。


2.根据权利要求1所述的控制方法，该控制方法还包括以下步骤：
对所述摄像头执行校准，以计算摄像头参数；
以所述摄像头参数为基础来生成所述摄像头的拍摄影像的虚拟3D空间。


3.根据权利要求2所述的控制方法，其中，生成所述虚拟3D空间的步骤包括以下步骤：
以所述摄像头参数为基础来从所述拍摄影像获得深度信息；以及
以所获得的深度信息和所述拍摄影像为基础来生成所述虚拟3D空间。


4.根据权利要求1所述的控制方法，其中，确定车辆是否处于停车状态的步骤包括以下步骤：
生成针对所述影像数据的灰度影像数据；以及
按时间顺序依次对包括在所生成的灰度影像数据的多个帧彼此进行比较，以确定所述车辆是否处于停车状态。


5.根据权利要求1所述的控制方法，其中，检测所述人行横道的步骤考虑到地图数据和位置数据中的至少一个以及所述影像数据来确定所述车辆当前是否位于人行横道上。


6.根据权利要求1所述的控制方法，其中，所述第一对象包括显现颜色的区域和透明区域。


7.根据权利要求1所述的控制方法，其中，显示所生成的第一对象和第二对象的步骤包括以下步骤：通过增强现实来显示路径导航对象、车道变更引导对象、车道脱离引导对象和行人引导对象中的至少一个。


8.根据权利要求7所述的控制方法，其中，所述路径导航对象、车道变更引导对象、车道脱离引导对象和行人引导对象中的每一个被体现为三维对象、纹理图像和艺术线条中的一个。


9.根据权利要求1所述的控制方法，该控制方法还包括以下步骤：
利用所述影像数据中的信号灯的信号区域部分的影像数据来确定信号种类信息，并且
其中，检测所述人行横道的步骤包括以下步骤：从在所述信号种类信息为停止信号时段期间在所述摄像头中拍摄的影像数据中检测人行横道。


10.根据权利要求9所述的控制方法，该控制方法还包括以下步骤：
当所述信号种类信息为停止信号的状态下所述车辆维持停车状态时，生成所述第一对象；以及
当所述信号种类信息为停止信号的状态下所述车辆出发时，生成用于警告所述驾驶员所述人行横道位于所述车辆的前方的第二对象。


11.一种电子装置，该电子装置包括：
显示部，该显示部显示画面；
对象生成部...

【专利技术属性】
技术研发人员：趙浩亨，
申请(专利权)人：星克跃尔株式会社，
类型：发明
国别省市：韩国;KR