一种体素模型与图像生成方法、设备及存储介质技术

本发明专利技术涉及图像处理领域，公开了一种体素模型与图像生成方法、设备及存储介质，用于提高图像生成的效率和准确率。所述方法包括：对虚拟交互指令进行解析处理，得到用户操作信息集合；对用户操作信息集合进行信息编码处理，得到离散编码信息，并对离散编码信息进行矩阵转换，生成特征编码矩阵；分别对特征编码矩阵和多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据目标相似度，从多个候选交互模板中选取至少一个虚拟交互模板；根据至少一个虚拟交互模板，对用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合；将构图元素集合输入目标体素模型进行虚拟图像构建和图像检测，得到目标虚拟图像。拟图像。拟图像。

【技术实现步骤摘要】
一种体素模型与图像生成方法、设备及存储介质


[0001]本专利技术涉及图像处理领域，尤其涉及一种体素模型与图像生成方法、设备及存储介质。

技术介绍

[0002]随着虚拟现实行业的兴起，越来越多人开始尝试和体验虚拟现实设备。目前虚拟现实设备大致分为：外接式头戴设备、一体式头戴设备、移动端头显设备等。
[0003]现有方案采用基于多层感知机的神经网络对用户的虚拟空间构图操作进行图像重建，这种方式的效率较低，进而影响图像的合成效率，无法应用于对合成效率要求较高的场景，例如一些实时交互场景。

技术实现思路

[0004]本专利技术提供了一种体素模型与图像生成方法、设备及存储介质，用于提高图像生成的效率和准确率。
[0005]本专利技术第一方面提供了一种体素模型与图像生成方法，所述体素模型与图像生成方法包括：基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令，并对所述虚拟交互指令进行解析处理，得到用户操作信息集合；对所述用户操作信息集合进行信息编码处理，得到离散编码信息，并对所述离散编码信息进行矩阵转换，生成特征编码矩阵；分别对所述特征编码矩阵和预置的多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据所述目标相似度，从所述多个候选交互模板中选取至少一个虚拟交互模板；根据所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合；将所述构图元素集合输入所述目标体素模型进行虚拟图像构建和图像检测，得到目标虚拟图像。
[0006]结合第一方面，在本专利技术第一方面的第一实施方式中，所述基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令，并对所述虚拟交互指令进行解析处理，得到用户操作信息集合，包括：基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令；对所述虚拟交互指令进行用户操作解析，得到多个用户操作动作，其中，所述用户操作动作包括：组件调用动作、增添和删除动作以及存储和读取动作；对所述多个用户操作动作进行虚拟空间操作信息映射，生成用户操作信息集合。
[0007]结合第一方面，在本专利技术第一方面的第二实施方式中，所述对所述用户操作信息集合进行信息编码处理，得到离散编码信息，并对所述离散编码信息进行矩阵转换，生成特
征编码矩阵，包括：分别对所述用户操作信息集合中的每个用户操作动作进行信息编码处理，得到离散化的编码信息；对所述离散化的编码信息进行特征值转换和矩阵初始化处理，得到初始化特征矩阵；对所述初始化特征矩阵进行矩阵对齐，生成特征编码矩阵。
[0008]结合第一方面，在本专利技术第一方面的第三实施方式中，所述分别对所述特征编码矩阵和预置的多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据所述目标相似度，从所述多个候选交互模板中选取至少一个虚拟交互模板，包括：分别对所述特征编码矩阵进行矩阵元素提取，得到多个矩阵元素；获取多个候选交互模板，并对所述多个矩阵元素进行相似度计算，得到所述特征编码矩阵与每个候选交互模板之间的目标相似度；对所述目标相似度和预设目标值进行比较，得到比较结果；根据所述比较结果，从所述多个候选交互模板中选取至少一个虚拟交互模板。
[0009]结合第一方面，在本专利技术第一方面的第四实施方式中，所述根据所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合，包括：基于所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型映射，得到目标体素模型；分别查询所述用户操作信息集合对应的交互组件和交互元素，得到交互组件和交互元素；将所述交互组件和所述交互元素作为构图元素集合并输出。
[0010]结合第一方面，在本专利技术第一方面的第五实施方式中，所述将所述构图元素集合输入所述目标体素模型进行虚拟图像构建和图像检测，得到目标虚拟图像，包括：将所述构图元素集合输入所述目标体素模型进行图像构建，得到初始体素图像；对所述构图元素集合进行构图布局信息提取，得到目标构图布局信息；根据所述目标构图布局信息，对所述初始体素图像进行关系信息分析，得到目标关系信息；根据所述目标关系信息，对所述初始体素图像进行图像检测，得到图像检测结果；根据所述图像检测结果生成所述虚拟交互指令对应的目标虚拟图像。
[0011]结合第一方面，在本专利技术第一方面的第六实施方式中，所述体素模型与图像生成方法，还包括：将所述目标虚拟图像传输至所述虚拟现实设备，并通过所述虚拟现实设备接收所述目标虚拟图像；接收所述目标用户的图像渲染指令，并根据所述图像渲染指令对所述目标虚拟图像进行动画渲染，生成目标虚拟动画。
[0012]本专利技术第二方面提供了一种体素模型与图像生成装置，所述体素模型与图像生成装置包括：解析模块，用于基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令，并
对所述虚拟交互指令进行解析处理，得到用户操作信息集合；编码模块，用于对所述用户操作信息集合进行信息编码处理，得到离散编码信息，并对所述离散编码信息进行矩阵转换，生成特征编码矩阵；计算模块，用于分别对所述特征编码矩阵和预置的多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据所述目标相似度，从所述多个候选交互模板中选取至少一个虚拟交互模板；匹配模块，用于根据所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合；构建模块，用于将所述构图元素集合输入所述目标体素模型进行虚拟图像构建和图像检测，得到目标虚拟图像。
[0013]结合第二方面，在本专利技术第二方面的第一实施方式中，所述解析模块具体用于：基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令；对所述虚拟交互指令进行用户操作解析，得到多个用户操作动作，其中，所述用户操作动作包括：组件调用动作、增添和删除动作以及存储和读取动作；对所述多个用户操作动作进行虚拟空间操作信息映射，生成用户操作信息集合。
[0014]结合第二方面，在本专利技术第二方面的第二实施方式中，所述编码模块具体用于：分别对所述用户操作信息集合中的每个用户操作动作进行信息编码处理，得到离散化的编码信息；对所述离散化的编码信息进行特征值转换和矩阵初始化处理，得到初始化特征矩阵；对所述初始化特征矩阵进行矩阵对齐，生成特征编码矩阵。
[0015]结合第二方面，在本专利技术第二方面的第三实施方式中，所述计算模块具体用于：分别对所述特征编码矩阵进行矩阵元素提取，得到多个矩阵元素；获取多个候选交互模板，并对所述多个矩阵元素进行相似度计算，得到所述特征编码矩阵与每个候选交互模板之间的目标相似度；对所述目标相似度和预设目标值进行比较，得到比较结果；根据所述比较结果，从所述多个候选交互模板中选取至少一个虚拟交互模板。
[0016]结合第二方面，在本专利技术第二方面的第四实施方式中，所述匹配模块具体用于：基于所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型映射，得到目标体素模型；分别查询所述用户操作信息集合对应的交互组件和交互元素，得到交互组件和交互元素；将所本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种体素模型与图像生成方法，其特征在于，所述体素模型与图像生成方法包括：基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令，并对所述虚拟交互指令进行解析处理，得到用户操作信息集合；对所述用户操作信息集合进行信息编码处理，得到离散编码信息，并对所述离散编码信息进行矩阵转换，生成特征编码矩阵；分别对所述特征编码矩阵和预置的多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据所述目标相似度，从所述多个候选交互模板中选取至少一个虚拟交互模板；根据所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合；将所述构图元素集合输入所述目标体素模型进行虚拟图像构建和图像检测，得到目标虚拟图像。2.根据权利要求1所述的体素模型与图像生成方法，其特征在于，所述基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令，并对所述虚拟交互指令进行解析处理，得到用户操作信息集合，包括：基于预置的虚拟现实设备接收目标用户输入的虚拟交互指令；对所述虚拟交互指令进行用户操作解析，得到多个用户操作动作，其中，所述用户操作动作包括：组件调用动作、增添和删除动作以及存储和读取动作；对所述多个用户操作动作进行虚拟空间操作信息映射，生成用户操作信息集合。3.根据权利要求2所述的体素模型与图像生成方法，其特征在于，所述对所述用户操作信息集合进行信息编码处理，得到离散编码信息，并对所述离散编码信息进行矩阵转换，生成特征编码矩阵，包括：分别对所述用户操作信息集合中的每个用户操作动作进行信息编码处理，得到离散化的编码信息；对所述离散化的编码信息进行特征值转换和矩阵初始化处理，得到初始化特征矩阵；对所述初始化特征矩阵进行矩阵对齐，生成特征编码矩阵。4.根据权利要求1所述的体素模型与图像生成方法，其特征在于，所述分别对所述特征编码矩阵和预置的多个候选交互模板之间进行相似度计算，得到多个目标相似度，并根据所述目标相似度，从所述多个候选交互模板中选取至少一个虚拟交互模板，包括：分别对所述特征编码矩阵进行矩阵元素提取，得到多个矩阵元素；获取多个候选交互模板，并对所述多个矩阵元素进行相似度计算，得到所述特征编码矩阵与每个候选交互模板之间的目标相似度；对所述目标相似度和预设目标值进行比较，得到比较结果；根据所述比较结果，从所述多个候选交互模板中选取至少一个虚拟交互模板。5.根据权利要求1所述的体素模型与图像生成方法，其特征在于，所述根据所述至少一个虚拟交互模板，对所述用户操作信息集合进行体素模型和构图元素匹配，得到目标体素模型和构图元素集合，包括：基于所述至少一个虚拟...

【专利技术属性】
技术研发人员：张雪兵，
申请(专利权)人：深圳优立全息科技有限公司，
类型：发明
国别省市：