图像处理装置、程序和图像处理方法制造方法及图纸

本发明专利技术公开了一种图像处理装置、程序和图像处理方法。根据本发明专利技术的图像处理装置包括：识别单元，配置成识别存在于成像装置所捕捉的输入图像中的多个用户；信息获取单元，配置成获取将要与所述识别单元识别的每个用户相关联地显示的显示信息；以及输出图像生成单元，配置成通过在所述输入图像上覆盖所述信息获取单元获取的所述显示信息来生成输出图像。基于与每个用户离开成像装置的距离相对应的参数，输出图像生成单元可以确定与第一用户相关联的第一显示信息和与第二用户相关联的第二显示信息中的哪一个将要覆盖在前侧。

【技术实现步骤摘要】

本公开涉及。
技术介绍
近年来，一种被称为增强现实(AR)的技术已变得引人注意，这种技术覆盖关于通过捕捉真实空间而获得的图像的信息，并且将合成图像呈现给用户。使用AR技术在图像上覆盖的信息达到多种类型。例如，JP2010-158056A公开了这样一种技术，该技术将超级链接信息添加到正在存在于输入图像中的真实空间中移动的对象，并且呈现合成图像。
技术实现思路
然而，当输入图像包含若干个应当向其添加信息的对象时，存在要被显示的信息可能变得拥挤的可能性，这样一来就可能丧失向用户呈现的输出图像的可理解性。例如，在用户之间经由增强现实的图像进行交流时，如果关于主动参与交流的用户的信息和关于位于周围区域的别的用户的信息被不加区别地显示，则顺畅的交流可能由于拥挤的信息而受阻，这样一来就可能出现这样的状况不容易知道哪个信息是由哪个用户发出的。考虑到上述情况，希望提供一种新颖且改进的，其可以在多条信息拥挤于增强现实的图像中的状况下以更加可理解的方式来呈现信肩、ο根据本公开的实施例，提供了一种图像处理装置，该图像处理装置包括识别单元，配置成识别存在于成像装置所捕捉的输入图像中的多个用户；信息获取单元，配置成获取将要与所述识别单元识别的每个用户相关联地显示的显示信息；以及输出图像生成单元，配置成通过在所述输入图像上覆盖所述信息获取单元获取的所述显示信息来生成输出图像。基于与每个用户离开成像装置的距离相对应的参数，输出图像生成单元可以确定与第一用户相关联的第一显示信息和与第二用户相关联的第二显示信息中的哪一个将要覆盖在前侧。当第一显示信息和第二显示信息在输出图像中彼此叠加时，如果第一用户离开成像装置的距离短于第二用户离开成像装置的距离，则输出图像生成单元可以将第一显示信息放置在第二显示信息的前侧。识别单元可以进一步识别存在于输入图像中的每个用户的脸部区域的尺寸，并且输出图像生成单元可以使用识别单元识别的每个用户的脸部区域的尺寸作为参数。输出图像生成单元可以测量识别单元识别的每个用户存在于输入图像中的时间长度或者每个用户的移动速度，并且输出图像生成单元可以根据针对与显示信息相关联的用户测量的时间长度或移动速度来设置输入图像上覆盖的显示信息的透明度。输出图像生成单元可以将存在于输入图像中较长时间的用户的显示信息的透明度设置成较低水平。输出图像生成单元可以将移动速度较低的用户的显示信息的透明度设置成较低水平。识别单元可以进一步识别每个用户的姿势，并且输出图像生成单元可以临时减少做出预定姿势的用户的显示信息的透明度。识别单元可以进一步识别每个用户的姿势、面部表情或讲话状态，并且输出图像生成单元可以临时将与做出预定姿势或具有预定面部表情的用户相关联的显示信息或者与正在讲话的用户相关联的显示信息显示在前侧，而不管用户离开成像装置的距离。根据每个用户离开成像装置的距离，输出图像生成单元可以确定与每个用户相关联的显示信息的显示尺寸。信息获取单元可以获取经由文本输入装置输入的文本作为第一类型显示信息，并且获取经由语音输入装置输入的语音作为第二类型显示信息，并且输出图像生成单元可以将用于显示第一类型显示信息的对象形状设置成表示思考的形状，而将用于显示第二类型显示信息的对象形状设置成表示言语的形状。信息获取单元可以获取经由文本输入装置或语音输入装置输入的信息作为显示信息，输出图像生成单元可以分析信息获取单元获得的显示信息以确定显示信息是对应于用户的思考的第三类型显示信息还是对应于用户的言语的第四类型显示信息，并且输出图像生成单元可以将用于显示第三类型显示信息的对象形状设置成表示思考的形状，而将用于显示第四类型显示信息的对象形状设置成表示言语的形状。信息获取单元可以获取用户输入的信息作为第五类型显示信息，并且获取基于用户输入的信息或者用户的属性信息而从外部信息源获取的信息作为第六类型显示信息，并且输出图像生成单元可以使用具有不同形状的对象来显示第五类型显示信息和第六类型显不fe息。根据本公开的另一个实施例，提供了一种程序，用于使控制图像处理装置的计算机起到以下作用识别单元，配置成识别存在于成像装置所捕捉的输入图像中的多个用户； 信息获取单元，配置成获取将要与所述识别单元识别的每个用户相关联地显示的显示信息；以及输出图像生成单元，配置成通过在所述输入图像上覆盖所述信息获取单元获取的所述显示信息来生成输出图像。基于与每个用户离开成像装置的距离相对应的参数，输出图像生成单元可以确定与第一用户相关联的第一显示信息和与第二用户相关联的第二显示信息中的哪一个将要覆盖在前侧。当第一显示信息和第二显示信息在输出图像中彼此覆盖时，如果第一用户离开成像装置的距离短于第二用户离开成像装置的距离，则输出图像生成单元可以将第一显示信息放置在第二显示信息的前侧。识别单元可以进一步识别存在于输入图像中的每个用户的脸部区域的尺寸，并且输出图像生成单元可以使用识别单元识别的每个用户的脸部区域的尺寸作为参数。输出图像生成单元可以测量识别单元识别的每个用户存在于输入图像中的时间长度或者每个用户的移动速度，并且输出图像生成单元可以根据针对与显示信息相关联的用户测量的时间长度或移动速度来设置输入图像上覆盖的显示信息的透明度。输出图像生成单元可以将存在于输入图像中较长时间的用户的显示信息的透明度设置成较低水平。输出图像生成单元可以将移动速度较低的用户的显示信息的透明度设置成较低CN 102385697 A说明书3/18 页 水平。根据本公开的还有另一个实施例，提供了一种图像处理方法，该图像处理方法包括识别存在于成像装置所捕捉的输入图像中的多个用户；获取将要与识别的每个用户相关联地显示的显示信息；基于与每个用户离开所述成像装置的距离相对应的参数，确定与第一用户相关联的第一显示信息和与第二用户相关联的第二显示信息中的哪一个将要覆盖在前侧；以及通过在所述输入图像上覆盖获取的所述显示信息来生成输出图像。如上所述，根据本公开的实施例的允许在多条信息拥挤于增强现实的图像中的状况下以更加可理解的方式来呈现信息。附图说明图1是示出图像处理系统的概况的示意图；图2是示出使用图1的图像处理系统显示的输出图像的例子的说明图；图3是示出根据第一实施例的图像处理装置的示例性配置的框图；图4是示出用于登记新用户的用户界面的例子的说明图；图5是示出显示对象数据的示例性结构的说明图；图6A是示出显示对象的形状的第一例子的说明图；图6B是示出显示对象的形状的第二例子的说明图；图6C是示出显示对象的形状的第三例子的说明图；图6D是示出显示对象的形状的第四例子的说明图；图7是图示根据第一实施例的显示对象的显示位置的说明图；图8A是图示透明度设置过程的例子的说明图；图8B是图示透明度设置过程的另一个例子的说明图；图9A是图示层设置过程的例子的第一说明图；图9B是图示层设置过程的例子的第二说明图；图10是示出根据第一实施例的输出图像的例子的说明图；图11是示出根据第一实施例的图像处理的示例性流程的流程图；图12是示出根据第二实施例的图像处理装置的示例性配置的框图；图13是图示权重确定过程的例子的说明图；图14A是图示显示位置确定过程的第一例子的第一说明图；图14B是图示显示位置确定过程的第一例子的第二说明图；图14C是本文档来自技高网...

【技术保护点】

【技术特征摘要】
...

【专利技术属性】
技术研发人员：鹤见辰吾，望月俊助，前川宗周，
申请(专利权)人：索尼公司，
类型：发明
国别省市：