图像处理装置、图像处理方法和程序制造方法及图纸

本发明专利技术涉及图像处理装置、方法和程序，其使得能够更简单地向动态图像添加效果。在便携式终端设备中，当正在拍摄动态图像时，周围环境声音和由用户发出的语音通过不同的声音拾取单元拾取。关键字检测器从由用户发出的语音检测预定的关键字，并且效果生成器生成与检测到的关键字关联的效果图像和效果声音。效果添加单元在所拍摄的动态图像上叠加所生成的效果图像，并且将所生成的效果声音与环境声音合成，由此向动态图像施加图像效果和声音效果。根据便携式终端设备，可以仅通过在拍摄动态图像时发出关键字，容易地向动态图像施加期待的效果。本技术可以应用于移动电话。

【技术实现步骤摘要】
【国外来华专利技术】
本技术涉及图像处理装置、图像处理方法和程序，并且特别涉及能够更容易地向动态图像添加效果的图像处理装置、图像处理方法和程序。
技术介绍
移动电话、摄录像机、数码相机等作为能够拍摄动态图像的设备而熟知。例如，提出能够拍摄动态图像的移动电话，该移动电话通过在借助于两个麦克风拾取的声音中设置具有较高声级的声音作为关联于动态图像的声音来拍摄动态图像(例如，参考专利文件I)。引用列表专利文件专利文件1:日本专利申请特开2004-201015号
技术实现思路
本专利技术要解决的问题尽管存在向动态图像添加诸如声音效果之类的效果的情况，但是一般来说，经常在拍摄动态图像之后向动态图像添加效果，例如在编辑动态图像时。然而，向动态图像添加效果的这种工作是麻烦的。例如，当要在拍摄之后添加效果时，用户必须选择添加效果的场景并且进行操作以指定要添加的效果，同时重现动态图像。同样，随着在视频分发方式中最近的改变，实时分发所拍摄的动态图像的应用在增长。因而，要求容易和快速地向所拍摄的动态图像添加效果的技术。考虑这样的情形实现本技术，并且这更加容易地向动态图像添加效果。问题的解决方案向根据本技术的一个方面的图像处理装置提供关键字检测单元，其从由用户发出且由声音拾取单元拾取的语音预先确定的关键字，所述声音拾取单元不同于用于拾取环境声音的声音拾取单元，该环境声音是当拍摄动态图像时与动态图像关联的声音；和效果添加单元，其向动态图像或环境声音添加对于检测到的关键字确定的效果。可以进一步向图像处理装置提供声音效果生成单元，其基于检测到的关键字生成声音效果，其中该效果添加单兀可以合成声音效果和环境声音。可以进一步向图像处理装置提供图像效果生成单元，其基于检测到的关键字生成图像效果，其中效果添加单元可以将图像效果叠加在动态图像上。可以进一步向图像处理装置提供拍摄动态图像的拍摄单元；拾取环境声音的第一声音拾取单元；和拾取由用户发出的语音的第二声音拾取单元。可以进一步向图像处理装置提供接收动态图像、环境声音和由用户发出的语音的接收单元。根据本技术的一个方面的图像处理方法或程序包括如下步骤:从由用户发出且由声音拾取单元拾取的语音检测预先确定的关键字，所述声音拾取单元不同于用于拾取环境声音的声音拾取单元，该环境声音是当拍摄动态图像时与动态图像关联的声音；和向动态图像或环境声音添加对于检测到的关键字确定的效果。根据本技术的一个方面，从由用户发出且由声音拾取单元拾取的语音检测预先确定的关键字，所述声音拾取单兀不同于用于拾取环境声音的声音拾取单兀，该环境声音是当拍摄动态图像时与动态图像关联的声音；和向动态图像或环境声音添加对于检测到的关键字确定的效果。有益效果根据本技术的一个方面，可以更容易地向动态图像添加效果。附图说明图1是用于图示本技术的概要的视图。图2是图示向动态图像添加效果的视图。图3是图示便携式终端设备的配置示例的视图。图4是图示效果添加处理的流程图。图5是图不声音效果对应表格的不例的视图。图6是图不图像效果对应表格的不例的视图。图7是图示分发系统的配置示例的视图。图8是图示拍摄处理和效果添加处理的流程图。图9是图示计算机的配置示例的视图具体实施例方式以下参考附图描述应用本技术的实施例。〈第一实施例〉[技术概要]如图1所示，本技术向由便携式终端设备11拍摄的动态图像施加声音效果和图像效果，该便携式终端设备11例如由移动电话、摄录像机、数码相机等构成。在图1中的示例中，操作便携式终端设备11的用户12拍摄参与游泳比赛的选手的动态图像作为箭头All所指的被摄体。即，便携式终端设备11根据用户12的操作拍摄被摄体的动态图像(视频)并且拾取周围声音(以下，称为环境声音)作为与动态图像关联的声音。同样，在动态图像的拍摄期间，当用户希望向由动态图像和环境声音构成的内容添加效果时，用户12发出对要添加的效果预先确定的词、短语等(以下，称为关键字)以通过语音输入关键字。通过便携式终端设备11拾取以此方式由用户12发出的关键字。同时，由用户12发出的关键字和与动态图像关联的环境声音由不同声音拾取单兀拾取。例如，拾取环境声音的声音拾取单兀和拾取关键字的声音拾取单兀在便携式终端设备11的相对表面上提供。当在动态图像的拍摄期间从由声音拾取单元为了检测关键字而获得的声音关键字检测到关键字时，便携式终端设备11向通过拍摄获得的动态图像和环境声音添加由关键字指定的图像效果和声音效果。具体地，例如，假定，当游泳比赛的开始场景被拍摄时，声音Mll “各就各位”、声音M12 “嘟”、声音M13 “扑通”和声音M14 “啪嚓”被拾取为环境声音，如图2所示。同时，在图2中，水平方向代表时间方向并且在该时间方向上的每个位置上指示环境声音、关键字、声音效果和添加了效果的环境声音。例如，声音Mll和声音M12是指不比赛的开始的语音和哨声,并且声音M13和声音M14是在选手跳入泳池时生成的声音和当选手开始游泳时生成的声音。同样，在图2的示例中，在指示比赛的开始的哨的声音M12被拾取后立即拾取由用户发出的关键字Κ1Γ‘啵嘤”，并且基本上与在选手入水时声音M13的拾取同时地拾取由用户发出的关键字K12 “啪嚓”。进一步，假设引起被摄体跳水的状态的声音效果Ell “啵嘤”预先与关键字Kll关联，并且引起出现水花飞溅的状态的声音效果E12 “啪嚓”预先与关键字K12关联。在这样的情况下，便携式终端设备11将声音效果Ell和声音效果E12分别与由在输入关键字Kll和关键字K12的时候所拾取的声音Mll到M14构成的环境声音合成，以获得添加了效果的环境声音。因而，当重现添加了效果的、最终获得的环境声音时，声音Mil、声音M12、声音效果E11、声音M13、声音效果E12和声音M14以此顺序重现。同时，当用 于施加图像效果(以下，称为图像效果)的图像预先与关键字关联时，将与所检测的关键字关联的图像效果与通过拍摄获得的动态图像合成。[便携式终端设备的配置示例]接着，描述向所拍摄的动态图像施加效果的便携式终端设备11的具体配置。图3是图示便携式终端设备11的配置示例的视图。便携式终端设备11由拍摄单元21、声音拾取单元22及23、分离单元24、关键字检测单元25、效果生成单元26、效果添加单元27和传输单元28构成。拍摄单元21根据用户的操作拍摄便携式终端设备11周围的被摄体，并且向效果生成单元26提供作为结果获得的动态图像的图像数据。由麦克风等构成的声音拾取单元22例如在拍摄动态图像时拾取便携式终端设备11的周围声音作为环境声音，并且向分离单元24提供作为结果获得的声音数据。由麦克风等构成的声音拾取单元23例如在动态图像的拍摄期间拾取由操作便携式终端设备11的用户发出的语音(关键字)，并且向分离单元24提供作为结果获得的声音数据。同时，尽管在便携式终端设备11的不同表面上提供声音拾取单元22和23，但是例如不仅环境声音而且由用户发出的语音也到达声音拾取单元22，并且不仅由用户发出的语音而且环境声音也到达声音拾取单元23。因而，更详细地，由声音拾取单元22获得的声音不仅包括环境声音还略微包括由用户发出的关键字的语音，并且类似地，由声音拾取单元23获得的声音不仅包括关键字的语音还略微包括环境声音。分离单元24基于本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2011.08.16 JP 2011-1778311.一种图像处理装置，包括: 关键字检测单元，其从由用户发出且由声音拾取单元拾取的语音检测预先确定的关键字，该所述声音拾取单兀不同于用于拾取环境声音的声音拾取单兀，所述环境声音是当拍摄动态图像时与所述动态图像关联的声首；和 效果添加单元，其向所述动态图像或所述环境声音添加对于检测到的关键字确定的效果O2.根据权利要求1所述的图像处理装置，进一步包括: 声音效果生成单元，其基于检测到的关键字生成声音效果，其中 所述效果添加单元将所述声音效果与所述环境声音合成。3.根据权利要求2所述的图像处理装置，进一步包括: 图像效果生成单元，其基于检测到的关键字生成图像效果，其中 所述效果添加单元将所述图像效果叠加在所述动态图像上。4.根据权利要求3所述的图像处理装置，进一步包括: 拍摄单元，其拍摄所述动态图像； 第一声音拾取单兀，其拾取所述环境声音；和 第二声音拾取单元，其拾取由所述用户...

【专利技术属性】
技术研发人员：木原信之，樱庭洋平，山口健，加藤靖彦，
申请(专利权)人：索尼公司，
类型：
国别省市：