图像处理装置、图像处理方法以及程序制造方法及图纸

图像处理装置具有：图像取得单元，通过图像传感器取得拍摄作业区域而得到的动态图像；图像生成单元，从所述动态图像生成在所述作业区域内进行作业的作业者的脸部部分的图像；统计信息生成单元，根据所述动态图像生成所述作业者的作业的统计信息；数据生成单元，生成将所述生成的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据；以及输出单元，输出所述生成的数据。输出所述生成的数据。输出所述生成的数据。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法以及程序


[0001]本专利技术涉及使用图像传感器来分析对象的行动的技术。

技术介绍

[0002]在工厂自动化市场中，实际使用下述技术：使用设置在单元线(cell line)上的图像传感器，掌握进行作业的作业者、设备的工作数、作业位置等，分析每个作业步骤的作业内容，从而有助于生产率的提高等。
[0003]例如，在专利文献1中，提出了如下技术：通过在线的入口和出口读取安装在生产线上运转的工件上的ID标签，从而确定工件的作业开始时刻和作业结束时刻，并计测作业时间。另外，在专利文献2中，提出了在作业步骤中的一系列的作业中显示与追踪对象的作业者的作业内容有关的时间图表、动态图像的技术。
[0004]现有技术文献
[0005]专利文献
[0006]专利文献1：日本特开2006
‑
202255号公报
[0007]专利文献2：日本特开2018
‑
073176号公报

技术实现思路

[0008]专利技术要解决的课题
[0009]但是，在现有技术中，需要在工件上安装ID标签、或者指定用户追踪作业的人物等确定作业内容的分析对象的作业。另外，在使用ID标签的情况下，由于读取ID标签的传感器等的检测精度，计测时间的准确性被左右，需要按每个步骤读取ID标签。另外，在用户在产品线的影像中指定作为追踪对象的作业者的情况下，用户并不是对各作业者识别个人，所以即使能够掌握各作业者的作业内容，也无法确定个人并掌握作业内容。
>[0010]本专利技术是鉴于上述实际情况而提出的，提供了基于由图像传感器取得的图像，能够识别作业者个人并分析作业内容的技术。
[0011]用于解决课题的手段
[0012]为了达成上述目的，本专利技术采用以下的结构。
[0013]本专利技术的第一侧面涉及的图像处理装置具有：图像取得单元，通过图像传感器取得拍摄作业区域而得到的动态图像；图像生成单元，从所述动态图像生成在所述作业区域内进行作业的作业者的脸部部分的图像；统计信息生成单元，根据所述动态图像生成所述作业者的作业的统计信息；数据生成单元，生成将所述生成的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据；以及输出单元，输出所述生成的数据。由此，由于根据图像传感器的动态图像而作业者个人和统计信息建立关联，因此能够识别作业者个人来分析作业。
[0014]并且，也可以是，所述数据生成单元生成将由所述图像生成单元生成的多个作业者的脸部部分的图像与由所述统计信息生成单元生成的多个所述作业者的作业的统计信
息建立关联的数据，所述数据生成单元针对由所述输出单元输出的数据，生成对多个所述作业者的脸部部分的图像中的至少两个以上的图像和与所述至少两个以上的图像建立关联的所述统计信息进行了合并而得到的新的数据。此外，也可以是，所述至少两个以上的图像是根据用户输入而被选择的图像。由此，在对同一作业者生成了多个脸部部分的图像的情况下，能够一边将多个图像综合为一个图像，一边合并与这些多个图像建立关联的统计信息。
[0015]并且，也可以是，所述数据生成单元针对由所述输出单元输出的数据，生成将所述作业者的脸部部分的图像变更为由所述图像生成单元生成的所述作业者的脸部部分的其它图像而得到的新数据。并且，也可以是，所述数据生成单元生成将基于包含所述作业者的脸部部分的尺寸、朝向、脸部相似度中的至少一个的基准而选择出的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据。并且，也可以是，所述数据生成单元基于预先取得的多个作业者的脸部部分的图像与所述生成的所述作业者的脸部部分的图像的匹配，生成将从所述预先取得的图像中选择出的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据。由此，能够将作业者的脸部部分的图像变更为更容易识别作业者的图像，从而易于确定该作业者的统计信息。
[0016]并且，也可以是，所述统计信息生成单元基于所述动态图像生成所述作业者的作业的统计信息的概要信息和详细信息，所述数据生成单元生成将所述作业者的脸部部分的图像、所述生成的所述作业者的作业的统计信息的所述概要信息、以及所述生成的所述作业者的作业的统计信息的所述详细信息相互建立关联的数据。由此，通过将作业者的脸部部分的图像与有助于作业者的作业的分析的各种信息建立关联，从而能够进行更高效的作业的分析。
[0017]并且，也可以是，所述数据生成单元基于所述取得的动态图像，生成与所述生成的所述作业者的作业的统计信息关联的动态图像，所述数据生成单元生成将所述作业者的脸部部分的图像、所述生成的所述作业者的作业的统计信息、所述生成的动态图像相互建立关联的数据。并且，也可以是，所述统计信息生成单元基于所述动态图像，针对所述作业区域所包含的一个以上的作业步骤的每个作业步骤，生成所述作业者的作业的统计信息，所述数据生成单元基于所述取得的动态图像，按所述一个以上的作业步骤的每个作业步骤，生成与所述生成的所述作业者的作业的统计信息关联的动态图像，所述数据生成单元生成将所述作业者的脸部部分的图像、所述生成的所述作业者的作业的所述一个以上的作业步骤的每个作业步骤的统计信息、以及所述生成的所述一个以上的作业步骤的每个作业步骤的动态图像相互建立关联的数据。由此，通过确认成为作业者的统计信息的基础的动态图像，从而能够进行更高效的作业的分析。
[0018]并且，也可以是，所述统计信息生成单元生成表示评价结果的评价信息，所述评价结果基于针对根据所述动态图像生成的所述作业者的作业的统计信息的规定的基准，所述数据生成单元生成将所述作业者的脸部部分的图像、所述生成的所述作业者的作业的统计信息及所述评价信息建立关联的数据。由此，例如，将作业者的统计信息中的作业时间大幅度地高于目标值、或相对于目标值大幅缩短的统计信息等在统计信息的分析中应关注的信息作为评价结果而示出，从而能够进行更高效的作业的分析。
[0019]另外，本专利技术也能够捕捉为包含上述处理的至少一部分的图像处理方法、用于使计算机执行这些方法的程序、或者非暂时性地记录了这样的程序的计算机可读取的记录介质。上述结构和处理分别只要不产生技术上的矛盾就能够相互组合来构成本专利技术。
[0020]专利技术效果
[0021]根据本专利技术，能够基于由图像传感器取得的图像，识别作业者个人并分析作业内容。
附图说明
[0022]图1是表示应用本专利技术的图像处理装置的结构例的框图。
[0023]图2是表示一个实施方式所涉及的PC(图像处理装置)的结构例的框图。
[0024]图3是表示一个实施方式所涉及的PC的处理流程例的流程图。
[0025]图4是表示一个实施方式所涉及的显示画面的具体例的示意图。
[0026]图5是表示变形例1所涉及的显示画面的具体例的示意图。
[0027]图6是表示变形例2所涉及的显示画面的具体例的示意图。
[0028]图7是表示变形本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，具有：图像取得单元，通过图像传感器取得拍摄作业区域而得到的动态图像；图像生成单元，从所述动态图像生成在所述作业区域内进行作业的作业者的脸部部分的图像；统计信息生成单元，根据所述动态图像生成所述作业者的作业的统计信息；数据生成单元，生成将所述生成的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据；以及输出单元，输出所述生成的数据。2.根据权利要求1所述的图像处理装置，其特征在于，所述数据生成单元生成将由所述图像生成单元生成的多个作业者的脸部部分的图像与由所述统计信息生成单元生成的多个所述作业者的作业的统计信息建立关联的数据，所述数据生成单元针对由所述输出单元输出的数据，生成对多个所述作业者的脸部部分的图像中的至少两个以上的图像和与所述至少两个以上的图像建立关联的所述统计信息进行了合并而得到的新的数据。3.根据权利要求2所述的图像处理装置，其特征在于，所述至少两个以上的图像是根据用户输入而被选择的图像。4.根据权利要求1～3中任一项所述的图像处理装置，其特征在于，所述数据生成单元针对由所述输出单元输出的数据，生成将所述作业者的脸部部分的图像变更为由所述图像生成单元生成的所述作业者的脸部部分的其它图像而得到的新数据。5.根据权利要求1～4中任一项所述的图像处理装置，其特征在于，所述数据生成单元生成将基于包含所述作业者的脸部部分的尺寸、朝向、脸部相似度中的至少一个的基准而选择出的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据。6.根据权利要求1～5中任一项所述的图像处理装置，其特征在于，所述数据生成单元基于预先取得的多个作业者的脸部部分的图像与所述生成的所述作业者的脸部部分的图像的匹配，生成将从所述预先取得的图像中选择出的所述作业者的脸部部分的图像与所述生成的所述作业者的作业的统计信息建立关联的数据。7.根据权利要求1～6中任一项所述的图像处理装置，其特征在于，所述统计信息生成单元基于所述动态图像生成所述作业者的作业的统计信息的概要信息和详细信息，所述数...

【专利技术属性】
技术研发人员：田中清明，杉尾淳一，高山贵宏，
申请(专利权)人：欧姆龙株式会社，
类型：发明
国别省市：