关注位置识别装置、摄像装置、显示装置、关注位置识别方法及程序制造方法及图纸

本发明专利技术提供一种能够可靠地对影像中的被用户关注的部分的位置进行识别的关注位置识别装置、摄像装置、显示装置、关注位置识别方法及程序。本发明专利技术的关注位置识别装置具备：视线分析部，进行用户的视线位置的检测和视线位置是否稳定的判断来作为用户的视线分析；影像分析部，进行获取到的影像的影像分析；及关注位置识别部，根据视线分析的结果及影像分析的结果，对影像中的被用户关注的部分的位置即关注位置进行识别。

Focus Location Recognition Device, Camera Device, Display Device, Focus Location Recognition Method and Procedure

The invention provides a focus position recognition device, a video camera device, a display device, a focus position recognition method and a program capable of reliably recognizing the position of the part concerned by the user in an image. The device for recognizing the position of interest of the present invention includes: a line-of-sight analysis unit, which detects the position of the user's line of sight and judges whether the position of the line of sight is stable to serve as the user's line-of-sight analysis; an image analysis unit, which carries out the image analysis of the acquired image; and a line-of-sight recognition unit, which, according to the results of line-of-sight analysis and image analysis, focuses on the part of the image that is Location is to identify the location of interest.

【技术实现步骤摘要】
【国外来华专利技术】关注位置识别装置、摄像装置、显示装置、关注位置识别方法及程序
本专利技术涉及一种能够可靠地对影像中的被用户关注的部分的位置进行识别的关注位置识别装置、摄像装置、显示装置、关注位置识别方法及程序。
技术介绍
已知一种通过检测用户的视线对用户的视线所指的被摄体进行识别的技术。专利文献1中记载有，当判定为用户的视线在一定时间内指向同一被摄体时，对该被摄体进行拍摄。专利文献2中记载有，基于用户的视线位置的检测结果和被摄体距离的测定结果进行图像剪切处理时，为了防止因视线位置的检测误差导致的剪切错误，预先设定被摄体的实际尺寸信息及被摄体的实际尺寸信息与处理范围的对应关系，并求出与被摄体的实际尺寸相称的处理范围。专利文献3中记载有，剪切通过实时取景图像内的图像识别检测到的被摄体(例如狗的面部及猫的面部)的部分而放大显示，并检测相对于放大显示的部分的用户的视线位置(例如狗的眼睛位置)而进行对焦。专利文献4中记载有，根据用户的视线位置选择焦点检测区域，并基于该焦点检测区域的散焦量的变化状况判别被摄体是否为移动物体，根据被摄体是否为移动物体来切换视线检测动作的次数。以往技术文献专利文献专利文献1：日本特开2004-64409号公报专利文献2：日本特开2001-116985号公报专利文献3：日本特开2015-162822号公报专利文献4：日本特开平7-199042号公报
技术实现思路
专利技术要解决的技术课题然而，实际上很难可靠地对被用户关注的位置进行识别。其原因为人并不一定会在一定时间内连续将视线指向关注位置。即使是人有意识地持续观察关注位置时，视线位置也通常会在无意识中发生变动。因此，当直接使用视线检测的结果而对关注位置进行了识别时，有可能将不适当的位置识别为关注位置。专利文献1中所记载的专利技术中，仅仅判定用户的视线是否在一定时间内指向同一被摄体，因此当用户的视线位置不稳定时(例如当临时从用户所关注的被摄体移开实现时)，并不一定能够对被用户关注的被摄体进行拍摄。专利文献2中所记载的专利技术中，考虑到视线位置的检测误差，简言之构成为将图像的剪切范围的尺寸设定成比与被摄体的实际尺寸对应的尺寸略大，从而用户的关注位置的识别精度并不会提高。专利文献3中所记载的专利技术中，构成为为了剪切实时取景图像内的被摄体的部分并放大显示而使用图像识别技术，并不根据视线位置是否稳定的判断结果及图像识别结果而对关注位置进行识别，因此认为当用户的视线位置不稳定时，有时无法对用户的关注位置进行识别。专利文献4中所记载的专利技术中，构成为基于散焦量的变化状况判别被摄体是否为移动物体而切换视线检测动作的次数，当用户的视线位置不稳定时，有可能无法对用户的关注位置进行识别。如上所述，专利文献1～专利文献4中未具体公开及启示基于视线分析的结果及影像分析的结果这两者对用户的关注位置进行识别，认为即使使用专利文献1～4中所记载的技术，但当用户的视线位置不稳定时，很难可靠地对用户的关注位置进行识别。本专利技术的目的在于提供一种能够可靠地对影像中的被用户关注的部分的位置进行识别的关注位置识别装置、摄像装置、显示装置、关注位置识别方法及程序。用于解决技术课题的手段为了实现上述目的，本专利技术的第1方式所涉及的关注位置识别装置具备：视线分析部，进行用户的视线位置的检测和视线位置是否稳定的判断来作为用户的视线分析；影像获取部，获取影像；影像分析部，进行获取到的影像的影像分析；及关注位置识别部，根据视线分析的结果及影像分析的结果，对影像中的被用户关注的部分的位置即关注位置进行识别。根据本方式，进行用户的视线位置的检测和视线位置是否稳定的判断来作为用户的视线分析，且进行所获取的影像的影像分析，基于视线分析的结果及影像分析的结果这两者对影像中的关注位置进行识别，因此可可靠地对影像中的关注位置进行识别。本专利技术的第2方式所涉及的关注位置识别装置中，当判断为视线位置稳定时，关注位置识别部采用检测到的视线位置来作为关注位置。根据本方式，当判断为视线位置稳定时，采用该视线位置来作为关注位置，由此可可靠地对影像中的关注位置进行识别。本专利技术的第3方式所涉及的关注位置识别装置中，影像分析部判断影像是否稳定，当判断为视线位置不稳定时，关注位置识别部根据影像是否稳定的判断结果对关注位置进行识别。根据本方式，当判断为视线位置不稳定时，基于影像是否稳定的判断结果对关注位置进行识别，因此可可靠地对影像中的关注位置进行识别。本专利技术的第4方式所涉及的关注位置识别装置中，当判断为视线位置不稳定，且判断为影像稳定时，关注位置识别部按时间序列过滤检测到的视线位置并采用该过滤的视线位置来作为关注位置。根据本方式，当判断为视线位置不稳定且影像稳定时，按时间序列过滤所检测到的视线位置并采用该过滤的视线位置来作为关注位置，由此可可靠地对影像中的关注位置进行识别。本专利技术的第5方式所涉及的关注位置识别装置中，当判断为视线位置不稳定，且判断为影像稳定时，关注位置识别部根据影像分析的结果推定影像中的关注部分，并采用影像中的推定的关注部分的位置来作为关注位置。根据本方式，当判断为视线位置不稳定且影像稳定时，基于影像而推定关注部分，并采用影像中的被推定的关注部分的位置来作为关注位置，由此可可靠地对影像中的关注位置进行识别。本专利技术的第6方式所涉及的关注位置识别装置中，当判断为视线位置不稳定，且判断为影像不稳定时，关注位置识别部对检测到的视线位置的移动与影像中的移动进行比较而判定是否采用检测到的视线位置来作为关注位置。根据本方式，当判断为视线位置不稳定且影像不稳定时，对所检测到的视线位置的移动与影像中的移动进行比较而判定是否采用所检测到的视线位置来作为关注位置，因此可可靠地对影像中的关注位置进行识别。本专利技术的第7方式所涉及的关注位置识别装置中，当判断为视线位置不稳定，且判断为影像不稳定时，关注位置识别部根据影像分析的结果推定影像中的关注部分，对检测到的视线位置的移动与影像中的推定的关注部分的移动进行比较而判定是否采用检测到的视线位置来作为关注位置。根据本方式，当判断为视线位置不稳定且影像不稳定时，基于影像而推定关注部分，对所检测到的视线位置的移动与影像中的被推定的关注部分的移动进行比较而判定是否采用所检测到的视线位置来作为关注位置，因此可可靠地对影像中的关注位置进行识别。本专利技术的第8方式所涉及的关注位置识别装置中，当判断为视线位置不稳定时，关注位置识别部对检测到的视线位置的移动与影像中的移动进行比较而判定是否采用检测到的视线位置来作为关注位置。根据本方式，即使在视线位置不稳定的情况下，当视线位置的移动与影像中的被推定的关注部分的移动之间有相关性时，也能够可靠地对影像中的关注位置进行识别。本专利技术的第9方式所涉及的关注位置识别装置中，与判定为视线位置不稳定的情况相比，当判定为视线位置稳定时，关注位置识别部增大视线分析的结果的权重而对关注位置进行识别。本专利技术的第10方式所涉及的摄像装置具备前述关注位置识别装置，其中，将对被摄体进行拍摄的摄像部用作影像获取部。本专利技术的第11方式所涉及的摄像装置中，使用基于视线分析的结果和通过摄像得到的影像的分析结果进行了识别的关注位置，进行自动调焦、自动曝光及自动颜色平衡校正中的至少一种。本专利技术的第12方式所涉及的显示装置具备：前本文档来自技高网...

【技术保护点】
1.一种关注位置识别装置，其具备：视线分析部，进行用户的视线位置的检测和所述视线位置是否稳定的判断来作为所述用户的视线分析；影像获取部，获取影像；影像分析部，进行获取到的所述影像的影像分析；及关注位置识别部，根据所述视线分析的结果及所述影像分析的结果，对所述影像中的被所述用户关注的部分的位置即关注位置进行识别。

【技术特征摘要】
【国外来华专利技术】2016.07.20 JP 2016-1424841.一种关注位置识别装置，其具备：视线分析部，进行用户的视线位置的检测和所述视线位置是否稳定的判断来作为所述用户的视线分析；影像获取部，获取影像；影像分析部，进行获取到的所述影像的影像分析；及关注位置识别部，根据所述视线分析的结果及所述影像分析的结果，对所述影像中的被所述用户关注的部分的位置即关注位置进行识别。2.根据权利要求1所述的关注位置识别装置，其中，当判断为所述视线位置稳定时，所述关注位置识别部采用所述检测到的视线位置来作为所述关注位置。3.根据权利要求2所述的关注位置识别装置，其中，所述影像分析部判断所述影像是否稳定，当判断为所述视线位置不稳定时，所述关注位置识别部根据所述影像是否稳定的判断结果对所述关注位置进行识别。4.根据权利要求3所述的关注位置识别装置，其中，当判断为所述视线位置不稳定，且判断为所述影像稳定时，所述关注位置识别部按时间序列过滤所述检测到的视线位置并采用该过滤的视线位置来作为所述关注位置。5.根据权利要求3所述的关注位置识别装置，其中，当判断为所述视线位置不稳定，且判断为所述影像稳定时，所述关注位置识别部根据所述影像分析的结果推定所述影像中的关注部分，并采用所述影像中的所述推定的关注部分的位置来作为所述关注位置。6.根据权利要求4或5所述的关注位置识别装置，其中，当判断为所述视线位置不稳定，且判断为所述影像不稳定时，所述关注位置识别部对所述检测到的视线位置的移动与所述影像中的移动进行比较而判断是否采用所述检测到的视线位置来作为所述关注位置。7.根据权利要求4所述的关注位置识别装置，其中，当判断为所述视线位置不稳定，且判断为所述影像不稳定时，所述关注位置识别部根据所述影像分析的结果推定所述影...

【专利技术属性】
技术研发人员：杉本雅彦，
申请(专利权)人：富士胶片株式会社，
类型：发明
国别省市：日本,JP