用于处理具有特征指示的合成视频图像的方法技术

提供了用于处理合成视频图像的第一和第二方法。这些方法一般包括通过第一图像捕获装置获得场景的第一图像以及生成合成图像，该合成图像包括用于将接收者的注意力引导至第一图像的至少一部分的视觉表示。优选地，该视觉表示可以是手臂、手、手指或用于指向的物体。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及处理视频图像的领域，包括处理合成图像的方法，该合成图像包括对合成图像中的至少一个特征的视觉指示。
技术介绍
全球宽带因特网访问的易获得性和可负担性已经使得如视频消息和视频会议之 类的通信方法的采用呈指数增长。来自诸如Microsoft、 Yahoo、 Skype和America Online 之类公司的用于使能这些通信方法的免费软件的多样性和可获得性也帮助增强了这些通 信方法的普及。当前，也有越来越多的装置被用于视频会议。这些装置可以采用或不采用 前述通信软件来进行视频会议。 —般而言，在视频会议期间，彼此通信的各方只看见彼此。第一方要想对第二方强 调/指出与在视频会议装置中的图像捕获装置的视野之外的对象相关的特征并仍然能够 看见彼此会存在某些不便。这种限制在多方之间的某些通信实例期间可能导致某些问题。
技术实现思路
在第一方面中，提供了一种用于处理合成视像的方法。该方法包括通过第一 图像捕获装置获得场景的第一图像，该第一图像包括用于将接收者的注意力引导至第一图 像的至少一部分的视觉表示。还通过第二图像捕获装置获得该第二图像捕获装置的用户的 外观的第二图像。第二图像优选地是在获得第一图像的同时获得的。第二图像可以是第二 图像捕获装置的用户的脸或上身。 随后生成包括第一图像和第二图像两者的合成图像，所述第一图像构成合成图像的主要部分，所述第二图像被放在产生用户正在向接收者作出所述视觉表示的感觉的位置上。合成图像随后被发送给接收者。合成图像可以在发送给接收者之前经过透视法凝视校正，经凝视校正的图像与第二图像捕获装置的用户观看第一图像的场景类似。 优选地，第一图像捕获装置和第二图像捕获装置包括例如如下种类的镜头标准的(50mm)、广角的和鱼眼的。第一和第二图像捕获装置中的至少一个具有固定的或可变的视野。第一图像捕获装置的第一视野与第二图像捕获装置的第二视野可以重合或不重合。 优选地，视觉表示可以是手臂、手、手指或用于指向的物体。视觉表示可以利用波阵面编码被视觉上增强以使其能够呈现为光学上聚焦的物体。 优选地，第一图像捕获装置和第二图像捕获装置被集成在单个设备中，该单个设 备例如是手持媒体播放器、移动电话、手持数码相机、网络相机等等。 提供了另一用于处理合成视频图像的方法。该方法包括通过第一图像捕获装置 的第一镜头获得场景的第一图像；使用所述第一图像的预览图像，并在预览图像上叠加用 于将接收者的注意力引导至所述场景的至少一部分的视觉表示；所述第一图像捕获装置被 关注点锁定到所述第一图像的至少一部分；所述关注点锁定使得所述视觉表示在所述第一 图像捕获装置的视野变化时移动。随后生成包括所述视觉表示的合成图像并将合成图像发送给接收者。 第一镜头可以具有例如标准的(50mm)、广角的、鱼眼的等类型。第一图像捕获装置 可以具有固定的或可变的视野。优选地，视觉表示具有例如箭头、交叉瞄准线、指针、十字等 形式。关注点锁定可以优选地保持第一图像的至少一部分在所述预览图像中的位置。 所述第一图像捕获装置的视野的变化可以使用用于检测第一图像捕获装置的移 动的技术来检测，例如用于检测使用轴承的水平摆动的电子罗盘、用于检测垂直倾动的惯 性仪、用于检测垂直倾动的倾动传感器、用于检测具体像素移动的光学流分析、等等。附图说明 为了可以全面地理解并容易实施本专利技术，现在将参考附图来以非限制性示例的方式描述仅仅本专利技术的优选实施例。图1示出本专利技术第一实施例的流程图。图2示出本专利技术第二实施例的流程图。 图3示出用于在优选实施例中使用的设备的第一设置。 图4示出用于在优选实施例中使用的设备的第二设置。 图5示出用于在优选实施例中使用的设备的第三设置。 图6示出用于在优选实施例中使用的设备的第四设置。 图7示出根据优选实施例产生的合成视频图像的第一示例。 图8示出根据优选实施例产生的合成视频图像的第二示例。 图9A-C示出第二实施例在使用中的表示。具体实施例方式图1示出记作方法20的用于处理合成视频图像的流程图。图7和8指示合成视 频图像98的示例。方法20包括通过第一图像捕获装置获取场景的第一图像102(22)。第 一图像102可以包括用于指示接收者关注第一图像102的至少一部分的视觉表示104。该 视觉表示104可以具有例如手臂(如图7和8所示)、手、手指、用于指向的物体、等等。 可以通过第二图像捕获装置获得第二图像捕获装置的用户的外貌的第二图像 106(24)。应该注意，第一图像102可以在获得第二图像106之后获得。获得第一图像102 和第二图像106的顺序是可变的。第二图像106还可以在获得第一图像102时同时获得。 第一和第二图像捕获装置可以包括各种镜头，例如，标准的(50mm)、广角的、鱼眼的等等。第 一和第二图像捕获装置中的至少一个可以具有固定的视野。类似地，第一和第二图像捕获 装置中的至少一个可以具有可变的视野。关于第一和第二图像捕获装置的进一步论述将在 随后的描述部分中提供。第一图像捕获装置和第二图像捕获装置两者可以被集成在单个设 备中，该单个设备可以例如是手持媒体播放器、移动电话、手持数码相机、网络相机等等。 随后，生成(26)包括第一图像102和第二图像106两者的合成图像98。第一图像 102可以构成合成图像98的绝大部分，而第二图像106被放在产生第二图像捕获装置的用 户正在向接收者作出视觉表示104的感觉的位置上。 参考图7，可以看出，第二图像捕获装置的用户正在作出对汽车的视觉表示(指向 汽车)。第二图像106可以是第二图像捕获装置的用户的脸或者上身。图7示出第二图像捕获装置的用户的上身。当第二图像106仅是一张脸时，可以将脸叠放在可以为人形的形 状上。例如，脸可以被叠放以替代一虚拟卡通人物的头部、或者脸可以被叠放在水果上等 等。在图7中，第二图像106被示出在合成图像98的第一侧108。第二图像106可以位于 合成图像98的另一部分，因为第二图像捕获装置的用户在合成图像中的位置取决于视觉 表示104在第一图像102中的位置。第二图像106可以使用已知的用于不重叠区域的图像 填充方法被(优选为无缝地)接合(110)到视觉表示104。如果视觉表示104的位置不断 改变，第二图像106甚至可以围绕合成图像98移动。当视觉表示104与第一图像102相比 可能失焦(out of focus)时，可以使用波阵面编码(wavefront coding)(常用于显微镜和 内诊镜)在视觉上增强视觉表示104以使其呈现为光学上聚焦的物体。 参考图8，示出了已经过凝视校正(gaze correction)的合成图像98。合成图像 98的凝视校正为接收者提供了与第二图像捕获装置的用户观看第一图像102的场景时类 似的视图。凝视校正一般在发送到接收者之前执行。经过凝视校正的合成图像98创建第二 图像捕获装置的用户向接收者呈现/指出第一图像102上的特征的外观。在图8中，第二 图像106被示出在合成图像98的第一侧108。第二图像106可以位于合成图像98的另一 部分，因为第二图像106在经凝视校正后的合成图像中的位置取决于视觉表示104在第一 图像102中的位置。第二图像106可以使用已知的用于不重叠区域的图像填本文档来自技高网...

【技术保护点】
一种用于处理合成视图图像的方法，该方法包括：通过第一图像捕获装置获得场景的第一图像，该第一图像包括用于将接收者的注意力引导至所述第一图像的至少一部分的视觉表示；通过第二图像捕获装置获得该第二图像捕获装置的用户的外观的第二图像；生成包括所述第一图像和所述第二图像两者的合成图像，所述第一图像构成所述合成图像的主要部分，所述第二图像被放在产生所述用户正在向所述接收者作出所述视觉表示的感觉的位置上；以及将所述合成图像发送给所述接收者。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：沈望傅，道恩德斯蒙德许，
申请(专利权)人：创新科技有限公司，
类型：发明
国别省市：SG[新加坡]