判定程序、判定装置、以及判定方法制造方法及图纸

判定程序使计算机执行获取包含附加了标记的面部的连续地拍摄到的拍摄图像组的处理。判定程序使计算机执行从表示标记的位置推移的多个模式，选择与拍摄图像组中连续的多个图像所包含的标记的位置的时间序列的变化对应的第一模式的处理。判定程序使计算机执行根据基于第一模式决定的动作单元的判定基准、和拍摄图像组中包含在多个图像之后的拍摄图像所包含的标记的位置，判定动作单元的产生强度的处理。处理。处理。

【技术实现步骤摘要】
【国外来华专利技术】判定程序、判定装置、以及判定方法


[0001]本专利技术涉及判定程序、判定装置、以及判定方法。

技术介绍

[0002]在非语言交流中，表情发挥重要的作用。在开发理解人并辅助人的计算机方面，表情估计是必需的技术。为了估计表情首先必须规定表情的记述方法。作为表情的记述方法，已知有AU(Action Unit：动作单元)。AU是基于面部肌肉的解剖学知识而定义的与表情表露相关的面部上的动作，迄今为止也提出了估计AU的技术。
[0003]估计AU的AU估计引擎的代表性方式以基于大量的教师数据的机器学习为基础，使用面部表情的图像数据、和各AU的Occurrence(产生的有无)、Intensity(产生强度)作为教师数据。另外，教师数据的Occurrence、Intensity由被称为Coder(编码员)的专家进行Annotation(注释)。
[0004]专利文献1：日本特开2011－237970号公报
[0005]非专利文献1：X.Zhang,L.Yin,J.Cohn,S.Canavan,M.Reale,A.Horowitz,P本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种判定程序，其特征在于，使计算机执行如下处理：获取包含附加了标记的面部的连续地拍摄到的拍摄图像组；从表示上述标记的位置推移的多个模式，选择与上述拍摄图像组中连续的多个图像所包含的上述标记的位置的时间序列的变化对应的第一模式；以及根据基于上述第一模式决定的动作单元的判定基准、和上述拍摄图像组中包含在上述多个图像之后的拍摄图像所包含的上述标记的位置，判定上述动作单元的产生强度。2.根据权利要求1所述的判定程序，其特征在于，选择上述第一模式的处理包含如下处理：基于上述面部的无表情试行的第一开始时刻，从上述拍摄图像组决定包含上述第一开始时刻之前的第一图像的上述多个图像，并基于上述第一图像中的上述标记的位置，选择上述第一模式，判定上述产生强度的处理包含如下处理：基于上述第一模式，计算上述面部的无表情试行的第一结束时刻之后的上述标记的假想的位置的估计值，并将计算出的上述估计值作为基准对上述拍摄图像组中的上述第一结束时刻后的上述标记的位置计算上述标记的位置的移动量，来判定上述产生强度。3.根据权利要求2所述的判定程序，其特征在于，使上述计算机执行：通过判定上述拍摄图像组中上述标记的位置收敛到无表情时的位置来检测无表情试行时间，从而获取上述第一开始时刻以及上述第一结束时刻。4.根据权利要求2所述的判定程序，其特征在于，计算上述估计值的处理包含如下处理：通过对上述第一模式的上述标记的位置执行向时间方向的平行移动、向标记位置方向的放大缩小、以及向上述标记位置方向的平行移动中的至少一个，来与上述第一图像中的上述标记的位置匹配，并基于匹配上述标记的位置后的上述第一模式，计算上述面部的无表...

【专利技术属性】
技术研发人员：斋藤淳哉，内田昭嘉，吉井章人，森冈清训，村濑健太郎，
申请(专利权)人：富士通株式会社，
类型：发明
国别省市：