一种增强现实设备及交互增强方法技术

本申请提供一种增强现实设备及交互增强方法，所述方法可以在用户输入显示融合画面的控制指令后，获取融合画面中的目标图像，即获取显示设备当前展示的图像。再通过对目标图像执行电子水印检测，在目标图像包含电子水印信息时，直接通过电子水印信息生成识别对象信息，以将识别对象信息显示在UI界面中。所述交互增强方法可以通过电子水印信息来获取部分识别对象信息，因此可以缓解显示设备的画面亮度、画质处理等对识别过程的影响，提高识别准确度。确度。确度。

【技术实现步骤摘要】
一种增强现实设备及交互增强方法


[0001]本申请涉及增强现实设备
，尤其涉及一种增强现实设备及交互增强方法。

技术介绍

[0002]增强现实(Augmented Reality，AR)技术是一种将虚拟画面与真实场景相融合的技术。可以将生成的虚拟物体，如文字、图像、三维模型以及视频画面模拟仿真并应用在真实场景画面中，为用户带来虚拟画面与真实画面相结合的观影感受。增强现实设备是一种应用增强现实技术的智能显示设备，可以在使用中实时获取真实场景画面和虚拟画面，再将虚拟画面与真实场景画面相融合，以呈现给用户最终的融合画面。
[0003]增强现实设备在呈现最终融合画面时，还可以在融合画面中显示一些辅助信息画面，对真实场景画面和/或虚拟画面进行标注，以便于用户观看、识别，提高用户体验。辅助信息画面可以是图案和文字的组合，例如，当融合画面中包括油画作品的内容时，可以通过对话气泡图案以及气泡中的文字内容，对油画作品的名称、作者以及内容进行标注。辅助信息画面的图案内容可以采用统一的UI界面定义，辅助信息画面的文字内容，则可以通过人工智能(Artificial Intelligence，AI)图片分类算法识别获得。
[0004]AI图片分类算法可以对融合画面对应的图像执行图像识别，识别出图像中所包含的关键要素，并生成辅助信息中的文字内容。但是，在融合画面中包括电视、广告机等电子设备屏幕所呈现的画面时，由于屏幕显示的画面亮度、画质处理的影响，所显示的内容与AI图片分类算法的训练场景差别较大，因此会降低对AI图片分类算法带有电子设备屏幕画面的融合画面进行识别时的准确度。

技术实现思路

[0005]本申请提供了一种增强现实设备及交互增强方法，以解决传统增强现实设备识别准确度低的问题。
[0006]一方面，本申请提供一种增强现实设备，包括：显示器、图像采集装置、通信器以及控制器。其中，显示器被配置为用户界面以及显示融合画面，所述融合画面包括真实场景画面和虚拟物体画面。图像采集装置被配置为获取真实场景画面。通信器被配置为连接显示设备。所述控制器被配置为执行以下程序步骤：
[0007]接收用户输入的用于显示增强现实画面的控制指令；
[0008]响应于所述控制指令，获取所述增强现实画面中的目标图像，所述目标图像为所述显示设备屏幕上展示的图像；
[0009]如果所述目标图像包含电子水印信息，根据所述电子水印信息生成识别对象信息；
[0010]控制所述显示器显示所述识别对象信息。
[0011]另一方面，本申请还提供一种交互增强方法，应用于上述增强现实设备，所述增强
现实设备包括显示器、图像采集装置、通信器以及控制器；所述增强现实设备通过所述通信器连接显示设备，所述交互增强方法包括以下步骤：
[0012]接收用户输入的用于显示增强现实画面的控制指令，所述融合画面包括真实场景画面和虚拟物体画面；
[0013]响应于所述控制指令，获取所述增强现实画面中的目标图像，所述目标图像为所述显示设备屏幕上展示的图像；
[0014]如果所述目标图像包含电子水印信息，根据所述电子水印信息生成识别对象信息；
[0015]控制所述显示器显示所述识别对象信息。
[0016]由以上技术方案可知，本申请提供的增强现实设备及交互增强方法可以在用户输入显示融合画面的控制指令后，获取融合画面中的目标图像，即获取显示设备当前展示的图像。再通过对目标图像执行电子水印检测，在目标图像包含电子水印信息时，直接通过电子水印信息生成识别对象信息，以将识别对象信息显示在UI界面中。所述交互增强方法可以通过电子水印信息来获取部分识别对象信息，因此可以缓解显示设备的画面亮度、画质处理等对识别过程的影响，提高识别准确度。
附图说明
[0017]为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0018]图1为本申请实施例中包括虚拟现实设备的显示系统结构示意图；
[0019]图2为本申请实施例中增强现实设备结构示意图；
[0020]图3为本申请实施例中带有镜片的增强现实设备结构示意图；
[0021]图4为本申请实施例中通过投影装置和镜片呈现增强现实画面的效果示意图；
[0022]图5为本申请实施例中VR场景全局界面示意图；
[0023]图6为本申请实施例中全局界面的推荐内容区域示意图；
[0024]图7为本申请实施例中全局界面的应用快捷操作入口区域示意图；
[0025]图8为本申请实施例中全局界面的悬浮物示意图；
[0026]图9为本申请实施例中AR画面示意图；
[0027]图10为本申请实施例中在AR画面中显示识别对象信息效果示意图；
[0028]图11为本申请实施例中交互增强方法流程示意图；
[0029]图12为本申请实施例中对目标图像检测电子水印信息的流程示意图；
[0030]图13为本申请实施例中根据是否包含电子水印信息显示识别对象的流程示意图；
[0031]图14为本申请实施例中识别对象信息叠加显示示意图；
[0032]图15为本申请实施例中检测亮度变化梯度的流程示意图；
[0033]图16为本申请实施例中查询电子水印信息的流程示意图；
[0034]图17为本申请实施例中获得识别对象信息流程示意图；
[0035]图18为本申请实施例中显示识别对象信息的流程示意图；
[0036]图19为本申请实施例中生成电子水印信息的流程示意图。
具体实施方式
[0037]为使本申请示例性实施例的目的、技术方案和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施例中的技术方案进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
[0038]基于本申请中示出的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
[0039]应当理解，本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
[0040]此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的那些组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
[0041]本申请中使用的术语“模块”，是指任何已知或后来开本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种增强现实设备，其特征在于，包括：显示器；图像采集装置，被配置为获取真实场景画面；通信器，被配置为连接显示设备；控制器，被配置为：接收用户输入的用于显示增强现实画面的控制指令；响应于所述控制指令，获取所述增强现实画面中的目标图像，所述目标图像为所述显示设备屏幕上展示的图像；如果所述目标图像包含电子水印信息，根据所述电子水印信息生成识别对象信息；控制所述显示器显示所述识别对象信息。2.根据权利要求1所述的增强现实设备，其特征在于，获取所述增强现实画面中的目标图像的步骤后，所述控制器被进一步配置为：如果所述目标图像不包含所述电子水印信息，对所述目标图像执行AI图片分类算法，以获得所述识别对象信息。3.根据权利要求2所述的增强现实设备，其特征在于，获得所述识别对象信息后，所述控制器被进一步配置为：根据所述识别对象信息生成电子水印信息；将所述电子水印信息添加至所述目标图像，以生成更新图像；向所述显示设备发送所述更新图像，以使所述显示设备展示和/或存储所述更新图像。4.根据权利要求1所述的增强现实设备，其特征在于，接收用户输入的用于显示增强现实画面的控制指令的步骤后，所述控制器被进一步配置为：获取所述融合画面对应的关键帧图像；检测所述关键帧图像的亮度变化梯度；如果所述亮度变化梯度大于或等于梯度阈值，通过所述通信器向所述显示设备发送图像获取请求，以获取所述增强现实画面中的目标图像；如果所述亮度变化梯度小于梯度阈值，对所述关键帧图像执行AI图片分类算法，以获得所述识别对象信息。5.根据权利要求1所述的增强现实设备，其特征在于，所述电子水印信息包括有效期限、显示位置以及标签名称；根据所述电子水印信息生成识别对象信息的步骤中，所述控制器被进一步配置为：从所述电子水印信息中提取所述有效期限，以及获取当前时间；对比所述有效期限和当前时间；如果所述当前时间未超出所述有效期限，从所述电子水印信息中提取所述显示位置以及标签名称，以生成识别对象信息；如果所述当前时间超出所述有效期限，对所述目标图像执行...

【专利技术属性】
技术研发人员：王大勇，王卫明，郝冬宁，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：