图像处理装置和图像处理方法制造方法及图纸

本发明专利技术提供图像处理装置和图像处理方法。图像处理装置具备如下那样的1个以上的处理器，该处理器：基于人脸的嘴的中央部分的图像信息、和人脸的嘴的中央部分的周边部分的图像信息来判定所述人脸的嘴是否张开，在张开的情况下，对所述人脸的嘴的中央部分的图像信息进行修正。

【技术实现步骤摘要】

本专利技术涉及图像处理装置和图像处理方法。
技术介绍
过去，已知将人物的嘴未成为半开的图像决定为动态图像内容的代表图像的技术(JP特开2012-4722号公报)。于是，如图10所示那样，若从人物的嘴成为半开的1张摄影图像(静止图像)检测到嘴部件，则如图11中点线所示那样，以包含牙齿的状态检测嘴部件。在使嘴配合声音张合的脸变形处理中，由于将该包含牙齿的状态的嘴部件视作合上嘴的状态，在张嘴时在开口的部分进行插入牙齿的处理，因此会如图12所示那样，成为在牙齿中插入了牙齿的嘴角成为不自然的图像。
技术实现思路
本专利技术的课题在于，能提供嘴角不会被不自然地描绘的图像。为了解决上述课题，技术方案1所记载的专利技术的图像处理装置具备如下那样的1个以上的处理器，该处理器：基于人脸的嘴的中央部分的图像信息、和人脸的嘴的中央部分的周边部分的图像信息来判定所述人脸的嘴是否张开，在张开的情况下，对所述人脸的嘴的中央部分的图像信息进行修正。附图说明图1是表示本实施方式中的图像输出系统的整体构成例的图。图2是表示图1的图像处理装置的功能构成的框图。图3是表示图1的数字标牌装置的功能构成的框图。图4是表示图3的屏幕部的概略构成的图。图5是表示由图2的控制部执行的动态图像数据生成处理的流程图。图6是用于说明区域周边部和区域中央部的图。图7是示意表示在HSV坐标系绘制嘴部件区域内的唇区域的各像素的颜色信息以及牙齿区域的各像素的颜色信息的颜色映射的图。图8是用于说明部件区域中的唇的内侧边界的图。图9是用于说明开口量的图。图10是用于说明在现有的技术中嘴成为半开的摄像图像的图。图11是用于说明在现有的技术使用嘴成为半开的摄像图像来使嘴张合的处理的图。图12是用于说明在现有的技术中进行使用嘴成为半开的摄像图像来使嘴张合的脸变形处理时的处理结果的图。具体实施方式以下参考附图来详细说明本专利技术所涉及的适合的实施方式。另外，本专利技术并不限定于图示例。[图像输出系统100的构成]图1是表示本专利技术的实施方式中的图像输出系统100的整体构成的图。图像输出系统100构成为使图像处理装置1和数字标牌(signage)装置2连接成能经由LAN(local Area Network，局域网)、WAN(Wide Area Network，广域网)、因特网等通信网络N进行数据收发。[图像处理装置1的构成]图2是表示图像处理装置1的主控制构成的框图。图像处理装置1是基于1张脸图像生成动态图像数据，将该生成的动态图像数据发送给数字标牌装置2的装置，例如能运用PC(Personal Computer，个人计算机)等。图像处理装置1如图2所示那样，具备控制部11、存储部12、操作部13、显示部14、通信部15等而构成。控制部11具备：执行存储于存储部12的程序存储部121的各种程序来进行给定的运算和各部的控制的CPU(Central Processing Unit，中央处理器)；和成为程序执行时的工作区域的存储器(均省略图示)。控制部11通过与存储于存储部12的程序存储部121的程序的协同来执行图5所
示的动态图像数据生成处理，或者将生成的动态图像数据发送给数字标牌装置2。控制部11作为识别部、检测部、修正部、判定部、生成部、边缘检测部、算出部、动态图像数据生成部而发挥功能。这些识别部、检测部、修正部、判定部、生成部、边缘检测部、算出部、动态图像数据生成部既可以是单一的控制部，也可以各自分开设置控制部来进行各动作。存储部12由HDD(Hard Disk Drive)或非易失性的半导体存储器等构成。在存储部12如图2所示那样设置程序存储部121。在程序存储部121存储在控制部11执行的系统程序、用于执行以后述的动态图像数据生成处理为首的各种处理的处理程序、这些程序的执行所需要的数据等。另外，在存储部12存储成为动态图像数据的源图像的摄影图像(静止图像，本实施方式中设为二维的图像)以及动态图像数据用的声音数据。另外，声音数据也可以是表征声音的文本数据。操作部13具备有光标键、字符输入键、数字键以及各种功能键等的键盘、鼠标等指向设备而构成，将通过对键盘的键操作或鼠标操作而输入的指示信号输出给控制部11。另外，操作部13也可以在显示部14的显示画面具备触控面板，在该情况下，将经由触控面板输入的指示信号输出给控制部11。显示部14由LCD(Liquid Crystal Display，液晶显示器)或CRT(Cathode Ray Tube，阴极射线管)等监视器构成，按照从控制部11输入的显示信号的指示来显示各种画面。通信部15由调制解调器、路由器、网卡等构成，和与通信网络N连接的外部设备进行通信。[数字标牌装置2的构成]图3是表示数字标牌装置2的主控制构成的框图。数字标牌装置2是基于在图像处理装置1生成的动态图像数据来输出动态图像内容的装置。数字标牌装置2如图3所示那样具备：照射影像光的投影部21；和在背面接受从投影部21照射的影像光并将其投影到前面的屏幕部22。首先说明投影部21。投影部21具备：控制部23、投影仪24、存储部25、和通信部26。投影仪24、存储部25、通信部26如图3所示那样与控制部23连接。控制部23具备：执行存储于存储部25的程序存储部251的各种程序来进行给定的运算和各部的控制的CPU；和成为程序执行时的工作区域的存储器(均省略图示)。投影仪24是将从控制部23输出的图像数据变换成影像光并向屏幕部22照射的投影装置。投影仪24例如能运用DLP(Digital Light Processing，数字光处理)(注册商标)投影仪，其利用了作为显示元件的DMD(数字微反射镜器件)，该DMD通过使阵列状排列的多个(XGA的情况下为横1024像素×纵768像素)的微小反射镜的各倾斜角度各自高速地进行启用/关闭动作来进行显示动作，由此用该反射光形成光像。存储部25由HDD(Hard Disk Drive，硬盘驱动器)或非易失性的半导体存储器等构成。在存储部25如图3所示那样设置程序存储部251。在程序存储部251存储在控制部23中执行的系统程序、各种处理程序、执行这些执行所需要的数据等。另外，在存储部25中设置有存储从图像处理装置1发送的动态图像数据的动态图像数据存储部252。动态图像数据由多个帧图像以及与各帧图像对应的声音数据构成。接下来说明屏幕部22。图4是表示屏幕部22的概略构成的主视图。如图4所示那样，在屏幕部22具备：图像形成部27、和支承图像形成部27的底座28。图像形成部27是在例如亚克力板的成形为人型的一片透光板29贴附层叠了薄膜状的菲涅耳透镜的背面投影用的薄膜屏幕而构成的屏幕，其中该透光板29与影像光的照射方向大致正交地配置。由该图像形成部27和前述的投影仪24构成输出单元。在底座28设置按钮式的操作部32、和输出声音的扬声器等的声音输出部33。操作部32具备各种操作按钮，检测操作按钮的按下信号并输出给控制部23。操作部32、声音输出部33如图3所示那样与控制部23连接。[图像输出系统100的动作]接下来说明图像输出系统100的动作。如上述那样，在图像输出系统100中，在图像处理装置1中基于1张摄影图像以及声音数据生成动态图像数据，基于生成的本文档来自技高网...

【技术保护点】
一种图像处理装置，具备如下那样的1个以上的处理器，该处理器：基于人脸的嘴的中央部分的图像信息、和人脸的嘴的中央部分的周边部分的图像信息来判定所述人脸的嘴是否张开，在张开的情况下，对所述人脸的嘴的中央部分的图像信息进行修正。

【技术特征摘要】
2015.03.18 JP 2015-0544001.一种图像处理装置，具备如下那样的1个以上的处理器，该处理器：基于人脸的嘴的中央部分的图像信息、和人脸的嘴的中央部分的周边部分的图像信息来判定所述人脸的嘴是否张开，在张开的情况下，对所述人脸的嘴的中央部分的图像信息进行修正。2.根据权利要求1所述的图像处理装置，其中，所述人脸的嘴的中央部分的图像信息是颜色映射信息，所述人脸的嘴的中央部分的周边部分的图像信息是颜色映射信息。3.根据权利要求1所述的图像处理装置，其中，所述处理器根据在所述人脸的嘴的中央部分的图像信息中是否有纵边缘信息来判定是否张开嘴。4.根据权利要求1所述的图像处理装置，其中，所述图像信息包含透过率信息，所述处理器将包含在所述人脸的嘴的中央部分的图像信息中的透过率信息修正为不描绘所述人脸的嘴的中央部分的颜色的值。5.根据权利要求3所述的图像处理装置，其中，所述图像信息包含透过率信息，所述处理器将包含在所述人脸的嘴的中央部分的图像信息中的透过率信息修正为不描绘所述人脸的嘴的中央部分的颜色的...

【专利技术属性】
技术研发人员：牧野哲司，
申请(专利权)人：卡西欧计算机株式会社，
类型：发明
国别省市：日本;JP