图像处理设备、图像处理方法和程序技术

本发明专利技术涉及图像处理设备、图像处理方法和程序。所提供的图像处理设备包括：图像获取单元，用于获取输入图像；选择单元，用于从多种识别方法中选择输入图像中示出的对象的识别方法；识别单元，用于利用选择单元所选择的识别方法来识别输入图像中示出的对象；以及显示控制单元，用于将与识别单元识别出的对象相关联的虚拟对象叠加到输入图像上并显示虚拟对象。显示控制单元选择单元所选择的识别方法来改变虚拟对象的显示。

【技术实现步骤摘要】

本公开文件涉及图像处理设备、图像处理方法和程序。
技术介绍
近年来，一种称作增强现实(AR)的技术赢得了关注，该技术将附加信息叠加到真实世界并将其呈现给用户。在AR技术中要呈现给用户的信息可以通过利用各种类型的虚拟对象来可视化。例如，在利用AR技术以使注意力集中于真实世界中的对象的情况下，用于使注意力集中于该对象的虚拟对象(例如，记号)可以被叠加到真实世界的对象上(或 该对象周围)等并且可以显示该虚拟对象。用户可以通过观看虚拟对象而将他/她的注意力转向需要关注的对象。需要关注的对象可以是例如公告、广告等。可以基于通过成像设备捕获真实世界而获得的捕获图像来识别这样的对象。此处，不是在所有时间都使用同一识别方法作为对象识别的方法，而可以根据情况适当地改变识别方法。例如，披露了以下技术，通过评估对象识别的精确性并且例如基于评估结果修改识别所使用的参数或改变识别算法来增大对象识别的精确性(例如，参见JP2001-175860A)。
技术实现思路
然而，到目前为止没有披露给予用户关于使用了哪种识别方法的反馈的技术。各识别方法在处理成本或能达到的精确性方面有所不同。相应地，如果给予用户关于识别方法的反馈，则尤其在存在可能使用的多种识别方法的情况下有用。作为一个示例，用户可以基于该反馈来判断当前显示的虚拟对象的位置或姿态、或者所呈现的信息内容的可靠性。作为另一示例，用户根据该反馈可以等待直到可以预期具有高识别精确性的识别方法变得可用为止，然后对虚拟对象进行操作。因此，希望实现以下技术，该技术能够容易地给予用户关于对象识别时所使用的识别方法的反馈。根据本公开文件的实施例，提供了一种图像处理设备，该图像处理设备包括图像获取单元，用于获取输入图像；选择单元，用于从多种识别方法中选择输入图像中示出的对象的识别方法；识别单元，用于利用选择单元所选择的识别方法来识别输入图像中示出的对象；以及显示控制单元，用于将与识别单元识别出的对象相关联的虚拟对象叠加到输入图像上并显示虚拟对象。显示控制单元根据选择单元所选择的识别方法来改变虚拟对象的显不。如上所述，根据本公开文件，可以容易地给予用户关于在对象识别时所使用的识别方法的反馈。附图说明图I是用于描述根据本公开文件的实施例的图像处理设备的概况的示图；图2是示出根据该实施例的图像处理设备的硬件配置的框图3是示出控制单元所实现的功能的结构的示例的框图；图4是用于描述从多种识别方法中选择识别方法的功能的示图；图5是示出控制单元所实现的功能的结构的另一示例的框图；图6是用于描述关于多种识别方法的第一示例的示图；图7是用于描述关于多种识别方法的第二示例的示图；图8是用于描述关于多种识别方法的第三示例的示图；图9是示出对象的识别处理的流程的流程图；图10是示出根据所选择的识别方法的虚拟对象的示例性显示的示图；图11是示出根据所选择的识别方法的虚拟对象的示例性显示的示图；以及图12是示出输出图像的显示控制处理的流程的流程图。具体实施例方式在下文中，将参照附图来详细描述本公开文件的优选实施例。要注意，在本说明书和附图中，用相同的参考标号来标示基本具有相同的功能和配置的结构元件，并且省略对这些结构元件的重复阐述。此外，将按照下述顺序来给出阐述。I.图像处理设备的概况2.示例性硬件配置3.信息处理设备的功能3-1.图像获取单元3-2.检测单元3-3.选择单元3-4.识别单元3-5.识别处理的流程3-6.显示控制单元3-7.显示控制处理的流程4.总结〈I.图像处理设备的概况〉图I是用于描述根据本公开文件的实施例的图像处理设备的概况的示图。在图I中示出了具有根据本公开文件的实施例的图像处理设备100的用户所存在的真实空间I。参照图1，对象Obj存在于真实空间I内。对象Obj是例如用户应当关注的对象，并且如图I所示通常是表示目的地等的位置的标记，但是对象Obj也可以是给产品或事件做广告的广告等或者其他对象。此外，在图I所示的示例中，对象Obj被安装在墙上，但是对象Obj也可以被安装在天花板、地板等上。此外，真实空间I不限于图I所示的示例，而、可以是室内环境或室外环境。图像处理设备100捕获真实空间的内部并执行稍后描述的根据本实施例的图像处理。在图I中，摄像机被示出为图像处理设备100的示例，但是图像处理设备100不限于这样的示例。例如，图像处理设备100可以是能够从成像装置如摄像机获取图像的信息处理设备，如个人电脑(PC)、移动终端或数码家电。此外，图像处理设备100不一定如图I所示的那样被用户手持。例如，图像处理设备可以被固定地安装在任意位置，或者可以被安装在用相机作为视觉的机器人等中。当所捕获的图像被当作输入图像并且图像处理设备100基于该输入图像识别出对象Obj时，与识别出的对象Obj相关联的虚拟对象可以被叠加在输入图像上并被显示。虚拟对象是例如用于将注意力集中于所识别出的对象Obj的虚拟对象(例如，记号)，并且可以被叠加在输入图像中的对象Obj等上(或被叠加在对象Obj的外围上)。通过观看虚拟对象，用户可以将他/她的注意力集中于需要关注的对象Obj。不是在所有时间都使用同一识别方法作为对象识别方法，而可以根据情况适当地改变识别方法。根据本公开文件的实施例的图像处理设备100能够通过以下部分详细描述的机制来使用户感知对象识别方法。<2.硬件配置的示例> 图2是示出根据本公开文件的实施例的图像处理设备100的硬件配置的示例的框图。参照图2，图像处理设备100包括成像单元102、传感器单元104、输入单元106、存储单元108、显示单元112、连接端口 114、总线116和控制单元118。(成像单元)成像单元102是与例如成像装置对应的相机模块。成像单元102通过利用图像传感器如CCD (电荷耦合器件)或CMOS (互补金属氧化物半导体)捕获真实空间I来生成捕获的图像。在本公开文件的该实施例中成像单元102被假设为图像处理设备100的一部分，但是成像单元102也可以与图像处理设备100单独配置。(传感器单元) 传感器单元104是一组用于支持对图像处理设备100的位置和姿态(attitude)(成像单元102的位置和姿态)的识别的传感器。例如，传感器单元104可以包括GPS传感器，GPS传感器接收GPS (全球定位系统)信号并测量图像处理设备100的纬度、经度和海拔。此外，传感器单元104可以包括定位传感器，定位传感器基于从无线接入点接收到的无线电信号的强度来测量图像处理设备100的位置。此外，传感器单元104可以包括测量图像处理设备100的倾角的回转仪传感器、测量三轴(three-axis)加速度的加速度传感器、或测量方位的地磁传感器。此外，在图像处理设备100具有基于图像识别的位置估计功能和姿态估计功能的情况下，在图像处理设备100的配置中可以省略传感器单元104。(输入单元)输入单元106是用户用来操作图像处理设备100或将信息输入到图像处理设备100的输入装置。输入单元106可以包括例如键盘、小键盘、鼠标、按钮、开关或触摸面板。输入单元106可以包括姿势识别模块，姿势识别模块识别在输入图像中示出的用户的姿势。此外，输入单元106可以包括视线检测模块，视线检测模块检测佩戴头戴显本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：图像获取单元，用于获取输入图像；选择单元，用于从多种识别方法中选择所述输入图像中示出的对象的识别方法；识别单元，用于利用所述选择单元所选择的识别方法来识别所述输入图像中示出的对象；以及显示控制单元，用于将与所述识别单元识别出的对象相关联的虚拟对象叠加到所述输入图像上并显示所述虚拟对象，其中所述显示控制单元根据所述选择单元所选择的识别方法来改变所述虚拟对象的显示。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：笠原俊一，
申请(专利权)人：索尼公司，
类型：发明
国别省市：