图像处理方法、记录介质、图像处理装置以及摄像装置制造方法及图纸

一种图像处理方法，其中包括：取得图像；识别所取得的图像中人物区域的位置；根据所识别的人物区域的位置设定对象检测范围；以及根据所设定的对象检测范围来检测人物状态。所设定的对象检测范围来检测人物状态。所设定的对象检测范围来检测人物状态。

【技术实现步骤摘要】
【国外来华专利技术】图像处理方法、记录介质、图像处理装置以及摄像装置


[0001]本专利技术涉及图像处理技术，具体而言，涉及图像处理方法、记录介质、图像处理装置以及摄像装置。

技术介绍

[0002]利用深度学习从图像中检测人物姿势等的技术已为众所周知。除此以外，还有一种用于在检测到指定人物的诸如姿势、脸部表情或手势之类的状态时自动执行拍摄的技术。例如，日本专利No.4227257公开了一种当识别到被摄体的脸部、姿势及运动的状态变成指定状态时自动拍摄该被摄体图像的构成。另外，日本专利No.6729043公开了一种高精度识别图像中人物位置的技术，其中具体公开了，当其他对象重叠在被检测到的人物区域上时，如果该其他对象是移动体，则基于人物姿势识别人物位置，而如果其他对象是非移动体，则将人物区域的指定位置识别为人物位置。
[0003]不过，上述技术方案在检测画面中的人物状态时，从兼顾缩短检测时间和检测精度的观点来看，尚有改进余地。
[0004]引用列表
[0005]专利文献
[0006]PTL1：日本专利No.4227257
[0007]PTL2：日本专利No.6729043

技术实现思路

[0008]技术方案所要解决的问题
[0009]鉴于上述情况，本专利技术的目的在于提供一种能够在检测画面中人物状态时兼顾缩短检测时间和提高检测精度的图像处理方法。
[0010]问题的解决方案
[0011]一种图像处理方法，其中包括：取得图像；识别所取得的图像中的人物域的位置；根据所识别的人物区域的位置设定对象检测范围；根据所设定的对象检测范围来检测人物状态。
[0012]
技术实现思路
的有益效果
[0013]本专利技术的实施方式能够在检测画面中的人物状态时，兼顾减少检测时间和提高检测精度。
[0014]附图的简要说明
[0015]附图旨在描述本专利技术的示例性实施方式，而不应解释为限制本专利技术的范围。除非明确指出，否则附图不应被认为是按比例绘制的。同样，在这些附图中，相同或相似的符号表示相同或相似的部件。
[0016]图1是实施方式涉及的全天球摄像装置的截面图。
[0017]图2是图1所示的全天球摄像装置的硬件框图。
[0018]图3是图1所示的全天球摄像装置执行的图像处理操作框图。
[0019]图4A是全天球图像图像数据生成处理的示意图。
[0020]图4B是用平面表示全天球图像数据结构的示意图。
[0021]图4C是用球面表示全天球图像数据结构的示意图。
[0022]图5是第一实施方式实行的基于人物姿势检测的摄像控制的功能结构框图。
[0023]图6是第一实施方式涉及的基于人物姿势检测的摄像控制的流程图。
[0024]图7A、7B、7C是第一实施方式涉及的全天球摄像装置10执行的以使得全天球图像的一方端部与另一方端部连续的方式复制全天球图像的一方端部的处理的示意图。
[0025]图8是第一实施方式涉及的全天球摄像装置执行的姿势检测处理的示意图。
[0026]图9是第二实施方式涉及的基于人物姿势检测实现摄像控制的功能结构框图。
[0027]图10是第二实施方式涉及的基于人物姿势检测的摄像控制流程图。
[0028]图11A、11B、11C是第二实施方式涉及的全天球摄像装置的检测帧之间差异的处理和判断是否执行复制的处理的示意图。
[0029]图12A和12B是第二实施方式涉及的全天球摄像装置中如何扩展检测对象的范围(对象检测范围)的示意图。
[0030]图13A和13B是第二实施方式涉及的全天球摄像装置中用于检测处理的复制图像的处理的示意图。
具体实施方式
[0031]在此所使用的术语仅仅是为了描述特定的实施方式，而不是为了限制本专利技术。此处使用的单数形式"一个"和"所述"意图在于包括复数形式，除非上下文另有明确说明。
[0032]在实施方式的附图中，为了清楚起见，使用特定术语。然而，本说明书的公开无意局限于所选择的特定术语，而且应当理解，每个特定部件包括具有相似功能、以相似方式操作并获得相似结果的所有技术均等物。
[0033]在优选实施方式的附图中，为了清楚起见，使用特定术语。然而，本专利说明书所公开的内容并不限于所选择的特定术语，并且应当理解，每个特定部件包括具有相同功能、以相似方式操作并获得相似结果的所有技术均等物。在以下实施方式中，图像处理装置是一例摄像装置，摄像装置是一例包括两个鱼眼透镜的全天球摄像装置10。
[0034]以下参考图1和图2描述本实施方式涉及的全天球摄像装置10的整体构成。图1是一实施方式涉及的全天球摄像装置10的截面图。图1中的全天球图像装置10包括摄像体12、保持摄像体12和诸如控制板和电池等部件的壳体14、以及设置在壳体14上的快门按钮18。
[0035]图1所示的摄像体12(摄像装置)包括两个透镜光学系统20A和20B以及两个图像传感器22A和22B。图像传感器22A和22B例如是电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器。每个透镜光学系统20A和20B(以下统称为透镜光学系统20)由例如六组七个透镜或十组十四个透镜构成的鱼眼透镜构成。在图1所示实施方式中，上述鱼眼透镜具有大于180度(＝360度/n，其中n表示光学系统的数量，n为2)的全视角，优选具有190度或更大的视角。在下述实施方式中使用的两个鱼眼透镜均具有180度或更大的全视角。不过，只要整体上获得指定的视角，也可以包括三个或更多个透镜光学系统和图像传感器。此外，下面描述的实施方式中使用鱼眼透镜，但只要整体上获得预定的视角，也可以用其它广角
透镜或超广角透镜来取代鱼眼透镜。
[0036]两个透镜光学系统20A和20B的光学元件(透镜、棱镜、滤光器和光圈)相对于图像传感器22A和22B的相对位置已定。具体而言，这些元件位于使得透镜光学系统20A和20B各自的光学元件的光轴以直角与相应的图像传感器22的光接受区域的中心部相交，且该光接受区域成为相应的鱼眼透镜的成像平面。下述实施方式中使用弯折光学系统，其中两个直角棱镜将透镜光学系统20A和20B会聚的光束分别分配到图像传感器22A和22B，以减小光学系统之间的差异。但并不受此限制，也可以使用其中入射光束在光学系统内行进时弯折三次的三次弯折结构来减小差异。还可使用直线光学系统以降低成本。
[0037]在图1所示的实施方式中，透镜光学系统20A和20B具有相同规格，并且以光轴保持一致的方式彼此反方组合。图像传感器22A和22B将接受的光的光分布转换为图像信号，并将图像依次输出到控制器的图像处理部。如稍后详述，图像传感器22A和22B各自拍摄的图像合成后生成4p立体角度图像(以下将这种图像称为"全天球图像")。全天球图像是能够从一个摄像地点看到的全方位图像。在以下的实施方式中将生成全天球图像。不过，有些实施方式中，全天球图像也可以是只在水平面上360度拍摄的全周图本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像处理方法，其中包括：取得图像；识别所取得的图像中人物区域的位置；根据所识别的人物区域的位置设定对象检测范围；以及根据所设定的对象检测范围来检测人物状态。2.根据权利要求1所述的图像处理方法，其中，进一步包括至少在所述对象检测范围中，以让所述图像的一方端部与另一方端部连续的方式复制所述一方端部，所述图像在至少一个方向上具有循环视野。3.根据权利要求2所述的图像处理方法，其中，所述复制进一步包括把复制的一方端部加到另一方端部上，生成另一个图像。4.根据权利要求3所述的图像处理方法，其中，在识别所述人物区域的位置之前执行复制，并且根据所生成的另一个图像，执行所述人物区域的位置的识别。5.根据权利要求3所述的图像处理方法，其中，进一步包括：根据所述人物区域的大小决定所述对象检测范围的位置和大小；以及根据所述对象检测范围的位置和大小，判断是否执行所述复制，其中，根据在决定中要执行所述复制的决定，在识别人物区域的位置之后执行所述复制，并且根据所生成的另一个图像，执行人物状态检测。6.根据权利要求2至5中任意一项所述的图像处理方法，其中，所述图像至少在一个方向上具有360度视角。7.根据权利要求1至6中任意一项所述的图像处理方法，其中，所述人物状态检测包括根据所述图像检测人物骨架，以及根据检测到的骨架检测人物姿势。8.根据权利要求1至7中任意一项所述的图像处理方法，其中，对所述人物区域的位置的识别包括以下的其中之一：根据所述图像检测人脸；根据所述图像检测脸部；以及取得连续拍摄的多个帧的图像之间的差异，并且基于该差异检测移动对象。9.根据权利要求1至8中任意一项所述的图像处理方法，其中进一步包括根据人物状态控制摄像部的摄像方法。10.一种保存计算机可读代码的记录介质，其中，所述代码用于控制所述计算机执行权利要求1至9中任意一项所述的方法。11...

【专利技术属性】
技术研发人员：野村健一郎，
申请(专利权)人：株式会社理光，
类型：发明
国别省市：