信息处理装置、信息处理方法及其程序制造方法及图纸

提供一种信息处理装置、信息处理方法及其程序，其能够提高用户的兴趣。[解决方案]信息处理装置包括识别单元和处理单元。识别单元被配置成识别真实空间中的物体。处理单元被配置成根据音乐的特征量对目标物体图像执行视觉效果处理，目标物体图像是由识别单元识别的物体的图像。

Information Processing Device, Information Processing Method and Procedure

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置、信息处理方法及其程序
本技术涉及主要使用AR(增强现实)的信息处理装置以及方法和用于该方法的程序。
技术介绍
专利文献1中描述的图像处理装置获取其中出现真实世界的输入图像，并对输入图像执行预定处理。例如，图像处理装置处理输入图像内的部分图像，该部分图像对应于用户在包括在三维模型中并存在于真实世界中(输入图像内)的物体中的搜索等指定的物体，并生成强调图像(说明书中的段落[0044]和[0058])。专利文献2公开了：存在一种应用，当在个人计算机等中捕获的音乐被再现时，该应用使监视器伴随再现显示适于要再现的音乐的图像(参见说明书中的段落[0002])。此外，专利文献2中描述的再现控制装置获取图像数据，该图像数据具有与添加至指示再现的声音数据相同的时间线，并使扬声器输出声音数据。然后，再现控制装置将适于声音数据的声音模式的效果应用于所获取的图像数据，并使显示器显示所得到的图像数据(参见说明书中的段落[0023])。引用列表专利文献专利文献1：日本专利申请公开第2012-79129号专利文献2：日本专利申请公开第2007-35121号
技术实现思路
技术问题近年来，已经开发了使用AR技术的各种装置和系统，但也存在着努力和改进的需求，通过所述努力和改进用户可以进一步得到乐趣。本公开的目的是提供一种信息处理装置，以及信息处理方法和用于该信息处理方法的程序，其能够实现用户的兴趣的增加。问题的解决方案为了实现上述目的，根据一个实施方式的信息处理装置包括识别单元和处理单元。识别单元被配置成识别真实空间中的物体。处理单元被配置成根据音乐的特征量对目标物体图像执行视觉效果处理，目标物体图像是由识别单元识别的物体的图像。因此，用户可以观看和欣赏图像，在该图像中真实空间中的物体以与音乐同步的方式显示，并且可以实现用户兴趣的增加。处理单元可以被配置成执行与物体的类型相关联的视觉效果处理。处理单元可以被配置成获取音乐的频带作为特征量，针对频带中的每个分配与多个物体对应的多个目标物体图像，并且对多个目标物体图像执行视觉效果处理。因此，用户可以感觉到针对频带中的每个分配的目标物体图像中的每个的视觉效果。处理单元可以被配置成获取音乐的声源的位置信息作为特征量，针对声源的位置中的每个分配与多个物体相对应的多个目标物体图像，并且执行对多个目标物体图像的视觉效果处理。因此，用户可以感觉到针对声源的位置中的每个分配的目标物体图像中的每个的视觉效果。处理单元可以被配置成分别对多个目标物体图像执行不同类型的视觉效果处理。因此，用户可以感觉到频带中的每个或声源的位置的不同视觉效果。处理单元被配置成获取音乐节奏的信息作为特征量，并根据节奏进行视觉效果处理。处理单元可以被配置成获取音乐的音调的信息作为特征量，并且根据音调执行视觉效果处理。处理单元可以被配置成获取附加至音乐数据的元信息，并根据元信息执行视觉效果处理。元信息可以包括视觉效果设置信息，该视觉效果设置信息与视觉效果处理有关。信息处理装置可以进一步包括从音乐的数据中提取特征量的特征量提取单元。换句话说，信息处理装置可以从音乐的数据中动态地提取特征量并执行视觉效果处理。信息处理装置可以进一步包括设置单元，其被配置成执行使用户设置特征量、物体或视觉效果处理的内容中的至少一个的处理。信息处理装置可以进一步包括周围环境信息获取单元，其被配置成获取信息处理装置的周围环境的信息。处理单元可以被配置成基于周围环境的信息进一步执行视觉效果处理。因此，信息处理装置可以显示与信息处理装置的周围环境对应的视觉效果。周围环境获取单元可以被配置成获取信息处理装置的位置信息、放置信息处理装置的自然环境的信息或者用户的生物信息作为周围环境的信息。根据另一实施方式的信息处理装置包括上述识别单元和处理单元。处理单元被配置成根据附加至音乐数据的元信息对目标物体图像执行视觉效果处理，目标物体图像是由识别单元识别的物体的图像。根据一个实施方式的信息处理方法包括识别真实空间中的物体。根据音乐的特征量对目标物体图像执行视觉效果处理，目标物体图像是所识别的物体的图像。根据另一实施方式的信息处理方法包括实现真实空间中的物体。根据附加至音乐数据的元信息对目标物体图像执行视觉效果处理，目标物体图像是所识别物体的图像。根据一个实施方式的程序使信息处理装置(计算机)执行上述信息处理方法。专利技术的有益效果在上文中，根据本技术，可以实现用户的兴趣的增加。应当注意，这里描述的效果不一定是有限的，并且可以是本公开中描述的任何一种效果。附图说明[图1]图1是示出根据本技术的实施方式1的信息处理装置的配置的框图。[图2]图2是示出图1所示的信息处理装置的操作的流程图。[图3]图3是示出实施方式1中的视觉效果处理的合成图像的示例1的图。[图4]图4示出了实施方式1中的视觉效果处理的合成图像的示例2。[图5]图5示出了实施方式1中的视觉效果处理的合成图像的示例3。[图6]图6示出了实施方式1中的视觉效果处理的合成图像的示例4。[图7]图7是示出根据本技术的实施方式2的信息处理装置的配置的框图。[图8]图8是示出图7中所示的信息处理装置的操作的流程图。[图9]图9是示出根据本技术的实施方式3的信息处理装置的配置的框图。[图10]图10是示出图9中所示的信息处理装置的操作的流程图。具体实施方式在下文中，将参照附图描述根据本技术的实施方式。1.实施方式11.1)信息处理装置的配置图1是示出根据本技术的实施方式1的信息处理装置的配置的框图。信息处理装置100例如是智能手机、平板电脑、头戴式显示装置或其它便携式、可穿戴式或非便携式计算机。或者，信息处理装置100可以是针对本技术优化的专用装置。信息处理装置100包括例如相机10、图像识别单元11、音乐数据存储单元15、再现处理单元16、特征量提取单元17、处理单元13、显示单元14、扬声器18和操作单元19。图像识别单元(识别单元)11具有分析利用相机10实时捕获的图像或过去捕获的图像的功能，即在其中出现真实空间的图像(以下称为真实空间图像)和识别真实空间内的物体。利用相机10捕获的真实空间图像可以是静止图像或运动图像。通过由公知算法处理和分析真实空间图像，图像识别单元11辨别并识别真实空间图像内的物体。公知算法的示例包括块处理、滤波处理、对比度处理、分割、傅里叶变换、离散余弦变换、物体分析和纹理分析。此外，图像识别单元11具有通过物体类型对分析的物体进行分类和辨别的功能。物体的类型例如是建筑物、桥梁、路灯、光源、车辆、人、山、河、海、花、桌子、椅子、书、笔、杯子和盘子，以及与每种物体类型中预先对应的标识符(ID)。以下，将其称为物体ID。物体ID可以预先被存储在信息处理装置100的存储器(未示出)中，或者可以被存储在信息处理装置100可访问的云上的服务器中。音乐数据存储单元15具有存储音乐(歌曲)的数据的功能。再现处理单元16具有再现存储在音乐数据存储单元15中的音乐数据并将其输出至扬声器18的功能。例如，再现处理单元16包括解码单元161和DAC(DA转换单元)163(未示出)。再现处理单元16通过解码单元161对以预定编解码器编码的音乐数据进行再现，并通过DAC163将模拟信号输出至扬声器18。代替扬本文档来自技高网...

【技术保护点】
1.一种信息处理装置，包括：识别单元，其被配置成识别真实空间中的物体；以及处理单元，其被配置成根据音乐的特征量对目标物体图像执行视觉效果处理，所述目标物体图像是由所述识别单元识别的所述物体的图像。

【技术特征摘要】
【国外来华专利技术】2017.01.27 JP 2017-0134941.一种信息处理装置，包括：识别单元，其被配置成识别真实空间中的物体；以及处理单元，其被配置成根据音乐的特征量对目标物体图像执行视觉效果处理，所述目标物体图像是由所述识别单元识别的所述物体的图像。2.根据权利要求1所述的信息处理装置，其中所述处理单元被配置成执行与所述物体的类型相关联的视觉效果处理。3.根据权利要求1所述的信息处理装置，其中所述处理单元被配置成获取所述音乐的频带作为所述特征量，针对所述频带中的每个分配对应于多个物体的多个目标物体图像，以及对所述多个目标物体图像执行所述视觉效果处理。4.根据权利要求1所述的信息处理装置，其中所述处理单元被配置成获取所述音乐的声源的位置信息作为所述特征量，针对所述声源的位置中的每个分配对应于多个物体的多个目标物体图像，以及对所述多个目标物体图像执行所述视觉效果处理。5.根据权利要求3所述的信息处理装置，其中所述处理单元被配置成分别对所述多个目标物体图像执行不同的多个视觉效果处理。6.根据权利要求1所述的信息处理装置，其中所述处理单元被配置成获取所述音乐的节奏的信息作为所述特征量，以及根据所述节奏执行所述视觉效果处理。7.根据权利要求1所述的信息处理装置，其中所述处理单元被配置成获取所述音乐的音调的信息作为所述特征量，以及根据所述音调执行所述视觉效果...

【专利技术属性】
技术研发人员：石川毅，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP