用于增强现实的书对象制造技术

本发明专利技术提供一种用于与交互程序介接的方法。所述方法包括：捕捉书对象的第一页和第二页的图像，沿着沿书的书脊定义的折叠轴接合第一页和第二页；分析捕捉的图像以识别第一页上的第一标签和第二页上的第二标签；通过分别跟踪第一标签和第二标签来跟踪第一页和第二页的运动；通过在捕捉的图像中用虚拟书代替书对象来生成增强图像，虚拟书具有对应于书对象的第一页的第一虚拟页，虚拟书具有对应于书对象的第二页的第二虚拟页；分别在第一虚拟页和第二虚拟页上呈现第一场景和第二场景；以及在显示器上演示增强图像。

【技术实现步骤摘要】
【国外来华专利技术】用于增强现实的书对象
本专利技术涉及用于利用用于增强现实的书对象与交互程序介接的方法和系统。
技术介绍
游戏技术的进展提供以丰富的图形和音频为特征的视频游戏。然而，寻求与视频游戏介接的新方法以改善玩家体验。本专利技术的实施方案正在这种情况下发生。
技术实现思路
本专利技术的实施方案提供用于利用用于增强现实的书对象与交互程序介接的方法和系统。应了解，本专利技术可以用多种方式来实施，例如，计算机可读介质上的过程、装置、系统、设备或方法。下文描述本专利技术的几个专利技术实施方案。在一个实施方案中，提供一种用于与交互程序介接的方法，其包括以下方法操作：捕捉书对象的第一页和第二页的图像，大体上沿着沿书的书脊定义的折叠轴接合第一页和第二页；分析捕捉的图像以识别第一页上的第一标签和第二页上的第二标签；通过分别跟踪第一标签和第二标签来跟踪第一页和第二页的运动；通过在捕捉的图像中用虚拟书代替书对象来生成增强图像，虚拟书具有对应于书对象的第一页的第一虚拟页，虚拟书具有对应于书对象的第二页的第二虚拟页，其中书对象的第一页和第二页的运动分别控制虚拟书的第一虚拟页和第二虚拟页的运动；分别在第一虚拟页和第二虚拟页上呈现第一场景和第二场景，第一场景或第二场景定义动画；以及在显示器上演示增强图像。在一个实施方案中，第一页和第二页的运动包括绕折叠轴翻转第二页，在翻转第二页期间保持呈现的第二场景相对于第二页的定向。在一个实施方案中，动画定义接近第一虚拟页或第二虚拟页的至少一个三维对象的运动，在第一虚拟页或第二虚拟页上定义用来定义动画的第一场景或第二场景。在一个实施方案中，动画在第二页集中于第一页上时提供三维对象的压缩的外观，或在第二页偏离第一页时提供三维对象的解压的外观。在一个实施方案中，绕折叠轴翻转第二页暴露在第二页的相对面上的第三页和大体上沿着折叠轴接合到第三页的第四页；分析捕捉的图像包括识别第三页上的第三标签和第四页上的第四标签；跟踪运动包括通过分别跟踪第三标签和第四标签来跟踪第三页和第四页的运动；虚拟书具有对应于书对象的第三页的第三虚拟页，虚拟书具有对应于书对象的第四页的第四虚拟页，其中书对象的第三页和第四页的运动分别控制虚拟书的第三虚拟页和第四虚拟页的运动；呈现包括分别在第三虚拟页和第四虚拟页上呈现第三场景和第四场景；以及在绕折叠轴翻转第二页期间，保持呈现的第三场景相对于第三虚拟页的定向。在另一实施方案中，提供一种用于与交互程序介接的系统，所述系统包括：用于捕捉书对象的第一页和第二页的图像的构件，大体上沿着沿书的书脊定义的折叠轴接合第一页和第二页；用于分析捕捉的图像以识别第一页上的第一标签和第二页上的第二标签的构件；用于通过分别跟踪第一标签和第二标签来跟踪第一页和第二页的运动的构件；用于通过在捕捉的图像中用虚拟书代替书对象来生成增强图像的构件，虚拟书具有对应于书对象的第一页的第一虚拟页，虚拟书具有对应于书对象的第二页的第二虚拟页，其中书对象的第一页和第二页的运动分别控制虚拟书的第一虚拟页和第二虚拟页的运动；用于分别在第一虚拟页和第二虚拟页上呈现第一场景和第二场景的构件，第一场景或第二场景定义动画；以及用于在显示器上演示增强图像的构件。在另一实施方案中，提供一种用于与交互程序介接的装置，所述装置包括：图像捕捉设备，其用于捕捉书对象的第一页和第二页的图像，大体上沿着沿书的书脊定义的折叠轴接合第一页和第二页；分析器模块，其用于分析捕捉的图像以识别第一页上的第一标签和第二页上的第二标签；跟踪模块，其用于通过分别跟踪第一标签和第二标签来跟踪第一页和第二页的运动；增强图像生成器，其用于通过在捕捉的图像中用虚拟书代替书对象来生成增强图像，虚拟书具有对应于书对象的第一页的第一虚拟页，虚拟书具有对应于书对象的第二页的第二虚拟页，其中书对象的第一页和第二页的运动分别控制虚拟书的第一虚拟页和第二虚拟页的运动；呈现模块，其用于分别在第一虚拟页和第二虚拟页上呈现第一场景和第二场景，第一场景或第二场景定义动画；以及演示器，其用于在显示器上演示增强图像。在另一实施方案中，提供一种用于与交互程序介接的系统，所述系统包括：书对象，其具有大体上沿着沿书对象的书脊定义的折叠轴接合的第一页和第二页；客户端设备，其用于捕捉书对象的第一页和第二页的图像；服务器，所述服务器包括分析器模块，其用于分析捕捉的图像以识别第一页上的第一标签和第二页上的第二标签；跟踪模块，其用于通过分别跟踪第一标签和第二标签来跟踪第一页和第二页的运动；增强图像生成器，其用于通过在捕捉的图像中用虚拟书代替书对象来生成增强图像，虚拟书具有对应于书对象的第一页的第一虚拟页，虚拟书具有对应于书对象的第二页的第二虚拟页，其中书对象的第一页和第二页的运动分别控制虚拟书的第一虚拟页和第二虚拟页的运动；呈现模块，其用于分别在第一虚拟页和第二虚拟页上呈现第一场景和第二场景，第一场景或第二场景定义动画；以及其中客户端设备包括演示器，其用于在显示器上演示增强图像。本专利技术的其他方面将从结合附图进行的以下详细描述中变得明显，详细描述通过实例说明本专利技术的原理。附图说明参照结合附图进行的以下描述可以最好地理解本专利技术，其中：图1和图2图示根据本专利技术的实施方案用于增强现实(AR)的书对象10。图3示出根据本专利技术的实施方案在书对象由图像捕捉设备捕捉并处理时显示在显示器上的书对象。图4示出根据本专利技术的实施方案来自呈现在显示器上的一系列增强捕捉的图像的帧。图5示出根据本专利技术的实施方案在3D(三维)场景填充显示器的屏幕时已变成小插图的摄像机视图。图6图示根据本专利技术的实施方案在图像捕捉设备检测到书对象时由用户控制的书对象。图6A示出根据本专利技术的实施方案用户坐在地板上并且操纵书对象同时操作运动控制器以指向在显示器上呈现的书的各种可选部分。图6B示出根据本专利技术的实施方案用户18操纵运动控制器19以控制显示器上的魔杖34。图7示出根据本专利技术的实施方案在书对象打开到各种页面时的书对象。图8图示根据本专利技术的实施方案用于导航和选择菜单选项的书对象。图9图示根据本专利技术的实施方案用户使用书对象来控制屏幕上的人物的运动以抓住下落对象。图10图示根据本专利技术的实施方案用于构建定制故事的书故事AR对象集合。图11A图示根据本专利技术的实施方案在打开书对象以显示两个AR标签的展开时的书对象，这两个AR标签由视频游戏系统可视和识别。图11B、图11C、图11D和图11E图示根据本专利技术的实施方案的翻页机制的不同阶段。图12图示根据本专利技术的实施方案具有图形区域和文本区域的虚拟书，可以通过操纵魔杖以便指向区域之一来选择这些区域中的每个。图13示出根据本专利技术的实施方案显示在书上的剧院。图14图示根据本专利技术的实施方案呈现在AR标签上的虚拟门户。图15图示根据本专利技术的实施方案的另一实例，其中虚拟门户呈现在AR标签上。图16示出根据本专利技术的实施方案被移动以引起显示在显示器上的虚拟场景的对应运动的书对象。图17图示根据本专利技术的一个实施方案可以用于提供与视频游戏的交互性的硬件和用户接口。图18图示根据本专利技术的一个实施方案可以用于处理指令的额外硬件。图19为根据本专利技术的一个实施方案场景A至场景E的示例性图示，其中各自的用户A至用户E与游戏客户端交互，游戏客户端连接到通过互联网处理的服务器。图20图示信息服本文档来自技高网...

【技术保护点】
一种用于与交互程序介接的方法，其包括：捕捉书对象的第一页和第二页的图像，大体上沿着沿所述书的书脊定义的折叠轴接合所述第一页和所述第二页；分析所述捕捉的图像以识别所述第一页上的第一标签和所述第二页上的第二标签；通过分别跟踪所述第一标签和所述第二标签来跟踪所述第一页和所述第二页的运动；通过在所述捕捉的图像中用虚拟书代替所述书对象来生成增强图像，所述虚拟书具有对应于所述书对象的所述第一页的第一虚拟页，所述虚拟书具有对应于所述书对象的所述第二页的第二虚拟页，其中所述书对象的所述第一页和所述第二页的运动分别控制所述虚拟书的所述第一虚拟页和所述第二虚拟页的运动；分别在所述第一虚拟页和所述第二虚拟页上呈现第一场景和第二场景，所述第一场景或所述第二场景定义动画；以及在显示器上演示所述增强图像。

【技术特征摘要】
【国外来华专利技术】2012.02.06 US 61/595,6851.一种用于与交互程序介接的方法，其包括：捕捉书对象和运动控制器的图像，书对象具有第一页和第二页，大体上沿着沿所述书的书脊定义的折叠轴接合所述第一页和所述第二页；分析所述捕捉的图像以识别所述第一页上的第一标签和所述第二页上的第二标签；通过分别跟踪所述第一标签和所述第二标签来跟踪所述第一页和所述第二页的运动；通过在所述捕捉的图像中用虚拟书代替所述书对象来生成增强图像，所述虚拟书具有对应于所述书对象的所述第一页的第一虚拟页，所述虚拟书具有对应于所述书对象的所述第二页的第二虚拟页，其中所述书对象的所述第一页和所述第二页的运动分别控制所述虚拟书的所述第一虚拟页和所述第二虚拟页的运动；分别在所述第一虚拟页和所述第二虚拟页上呈现第一场景和第二场景，所述第一场景或所述第二场景定义动画，其中所述动画定义接近所述第一虚拟页或所述第二虚拟页的至少一个三维对象的运动，在所述第一虚拟页或所述第二虚拟页上定义用来定义所述动画的所述第一场景或所述第二场景，并且其中所述动画在所述第二页集中于所述第一页上时提供所述三维对象的压缩的外观，或在所述第二页偏离所述第一页时提供所述三维对象的解压的外观；分析捕捉的图像以识别运动控制器的指向方向；处理运动控制器的指向方向以识别在虚拟书的第一或第二虚拟页上呈现的内容的部分的选择；以及在显示器上演示所述增强图像。2.如权利要求1所述的方法，其中所述第一页和所述第二页的所述运动包括绕所述折叠轴翻转所述第二页，在所述翻转所述第二页期间保持所述呈现的第二场景相对于所述第二页的定向。3.如权利要求1所述的方法，其中绕所述折叠轴翻转所述第二页暴露在所述第二页的相对面上的第三页和大体上沿着所述折叠轴接合到所述第三页的第四页；其中分析所述捕捉的图像包括识别所述第三页上的第三标签和所述第四页上的第四标签；其中跟踪运动包括通过分别跟踪所述第三标签和所述第四标签来跟踪所述第三页和所述第四页的运动；其中所述虚拟书具有对应于所述书对象的所述第三页的第三虚拟页，所述虚拟书具有对应于所述书对象的所述第四页的第四虚拟页，其中所述书对象的所述第三页和所述第四页的运动分别控制所述虚拟书的所述第三虚拟页和所述第四虚拟页的运动；其中呈现包括分别在所述第三虚拟页和所述第四虚拟页上呈现第三场景和第四场景；以及其中在所述绕所述折叠轴翻转所述第二页期间，保持所述呈现的第三场景相对于所述第三虚拟页的定向。4.一种用于与交互程序介接的系统，其包括：用于捕捉书对象和运动控制器的图像的构件，书对象具有第一页和第二页，大体上沿着沿所述书的书脊定义的折叠轴接合所述第一页和所述第二页；用于分析所述捕捉的图像以识别所述第一页上的第一标签和所述第二页上的第二标签的构件；用于通过分别跟踪所述第一标签和所述第二标签来跟踪所述第一页和所述第二页的运动的构件；用于通过在所述捕捉的图像中用虚拟书代替所述书对象来生成增强图像的构件，所述虚拟书具有对应于所述书对象的所述第一页的第一虚拟页，所述虚拟书具有对应于所述书对象的所述第二页的第二虚拟页，其中所述书对象的所述第一页和所述第二页的运动分别控制所述虚拟书的所述第一虚拟页和所述第二虚拟页的运动；用于分别在所述第一虚拟页和所述第二虚拟页上呈现第一场景和第二场景的构件，所述第一场景或所述第二场景定义动画，其中所述动画定义接近所述第一虚拟页或所述第二虚拟页的至少一个三维对象的运动，在所述第一虚拟页或所述第二虚拟页上定义用来定义所述动画的所述第一场景或所述第二场景，并且其中所述动画在所述第二页集中于所述第一页上时提供所述三维对象的压缩的外观，或在所述第二页偏离所述第一页时提供所述三维对象的解压的外观；其中用于分析的构件还被配置以分析捕捉的图像以识别运动控制器的指向方向；用于处理运动控制器的指向方向以识别在虚拟书的第一或第二虚拟页上呈现的内容的部分的选择的构件；以及用于在显示器上演示所述增强图像的构件。5.如权利要求4所述的系统，其中所述第一页和所述第二页的所述运动包括绕所述折叠轴翻转所述第二页，在所述翻转所述第二页期间保持所述呈现的第二场景相对于所述第二页的定向。6.如权利要求4所述的系统，其中绕所述折叠轴翻转所述第二页暴露在所述第二页的相对面上的第三页和大体上沿着所述折叠轴接合到所述第三页的第四页；其中分析所述捕捉的图像包括识别所述第三页上的第三标签和所述第四页上的第四标签；其中跟踪运动包括通过分别跟踪所述第三标签和所述第四标签来跟踪所述第三页和所述第四页的运动；其中所述虚拟书具有对应于所述书对象的所述第三页的第三虚拟页，所述虚拟书具有对应于所述书对象的所述第四页的第四虚拟页，其中所述书对象的所述第三页和所述第四页的运动分别控制所述虚拟书的所述第三虚拟页和所述第四虚拟页的运动；其中呈现包括分别在所述第三虚拟页和所述第四虚拟页上呈现第三场景和第四场景；以及其中在所述绕所述折叠轴翻转所述第二页期间，保持所述呈现的第三场景相对于所述第三虚拟页的定向。7.一种用于与交互程序介接的装置，其包括：图像捕捉设备，其用于捕捉书对象和运动控...

【专利技术属性】
技术研发人员：河内雅美，
申请(专利权)人：索尼电脑娱乐欧洲有限公司，
类型：发明
国别省市：英国;GB