一种查看3D可视化数据的方法、AR眼镜、系统及存储介质技术方案

本发明专利技术实施例公开一种查看3D可视化数据的方法，所述方法包括：获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体；将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；获取使用者手势指令，根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息。本发明专利技术实施例能够让医生在手术过程中无需改变体位，实时查看患者各个角度的信息，整个手术台以三维空间的方式复现眼前，医生只需佩戴AR眼镜，通过手势指令即可得到任意角度任意方向上的患者信息，精准找到目标点，加快了手术进程，降低了手术风险。降低了手术风险。降低了手术风险。

【技术实现步骤摘要】
一种查看3D可视化数据的方法、AR眼镜、系统及存储介质


[0001]本专利技术实施例涉及AR
，具体涉及一种查看3D可视化数据的方法、AR眼镜、系统及存储介质。

技术介绍

[0002]数字孪生：是充分利用物理模型、传感器更新、运行历史等数据，集成多学科、多物理量、多尺度、多概率的仿真过程，在虚拟空间中完成映射，从而反映相对应的实体装备的全生命周期过程。
[0003]数字孪生体：就是在一个设备或系统的基础上，创造一个数字版的“克隆体”。
[0004]这个“克隆体”，也被称为“数字孪生体”。它被创建在信息化平台上，是虚拟的。
[0005]传统手术过程中，医生时常会碰到手术视野被遮挡，血液致使操作区域模糊不清，体内找寻异物困难的情况。医生需要在手术过程中无改变患者体位，实时查看患者各个角度的信息，难以精准找到目标点，减缓了了手术进程，提高了手术风险。

技术实现思路

[0006]鉴于上述问题，本专利技术实施例提供了一种查看3D可视化数据的方法、AR眼镜、系统及存储介质。
[0007]本专利技术实施例的第一方面，提供了一种查看3D可视化数据的方法，所述方法包括步骤：
[0008]获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体；
[0009]采用slam技术和Mark技术将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；
[0010]获取使用者手势指令，根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息。
[0011]在一种可选的方式中，在所述的获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体之前包括步骤：
[0012]采集若干组标准手势指令；
[0013]建立每个标准手势指令与调整指令的映射关系，形成用于调整数字孪生体显示状态的指令数据库。
[0014]在一种可选的方式中，所述的获取使用者手势指令，根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息具体包括步骤：
[0015]将所获取的手势指令与所述指令数据库进行匹配，获取所述手势指令对应的调整指令；
[0016]根据所述调整指令对显示状态进行调整显示。
[0017]根据本专利技术实施例的另一方面，提供了一种查看3D可视化数据的AR眼镜，包括：
[0018]创面获取单元，所述创面获取单元用于获取患者的创面信息；
[0019]生成单元，所述生成单元与所述创面获取单元连接，用于根据所述创面信息生成创面对应的数字孪生体；
[0020]定位单元，所述定位单元与所述生成单元连接，用于将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；
[0021]手势获取单元，获取使用者手势指令；
[0022]处理单元，所述处理单元与所述手势获取单元连接，用于根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息。
[0023]在一种可选的方式中，包括：
[0024]采集单元，所述采集单元用于采集若干组标准手势指令；
[0025]建立单元，所述建立单元与所述采集单元连接，用于建立每个标准手势指令与调整指令的映射关系，形成用于调整数字孪生体显示状态的指令数据库。
[0026]在一种可选的方式中，包括：
[0027]匹配单元，所述匹配单元与所述指令获取单元连接，用于将所获取的手势指令与所述指令数据库进行匹配，获取所述手势指令对应的调整指令；
[0028]显示单元，所述显示单元与所述匹配单元连接，用于根据所述调整指令对显示状态进行调整显示。
[0029]本专利技术实施例的第二方面，提供一种查看3D可视化数据的AR眼镜，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
[0030]所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行上述任意一项查看3D可视化数据的方法的操作。
[0031]本专利技术实施例的第三方面，提供一种计算机可读存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令在查看3D可视化数据的AR眼镜上运行时，使得查看3D可视化数据的AR眼镜执行上述任意一项查看3D可视化数据的方法的操作。
[0032]本专利技术实施例基于数字孪生技术和AR增强显示技术，将患者本体创造得到的数字孪生体映射到AR眼镜中，通过传感器的数据传输，在手术操作过程中，实际的操作进程，包括手术器械与患者本体的相对位置关系、角度，患者创面各个角度的信息，都可以通过手势指令调整AR眼镜中数字孪生体的显示角度得到；能够让医生在手术过程中无需改变体位，实时查看患者各个角度的信息，整个手术台以三维空间的方式复现眼前，医生只需佩戴AR眼镜，通过手势指令即可得到任意角度任意方向上的患者信息，精准找到目标点，加快了手术进程，降低了手术风险。
[0033]上述说明仅是本专利技术实施例技术方案的概述，为了能够更清楚了解本专利技术实施例的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术实施例的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。
附图说明
[0034]附图仅用于示出实施方式，而并不认为是对本专利技术的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
[0035]图1示出了本专利技术实施例提供的一种查看3D可视化数据的方法第一实施例的流程
图；
[0036]图2示出了本专利技术实施例提供的一种查看3D可视化数据的方法第二实施例的流程图；
[0037]图3示出了本专利技术实施例提供的一种查看3D可视化数据的方法第三实施例的流程图；
[0038]图4
‑
5示出了本专利技术实施例提供的一种查看3D可视化数据的方法第四实施例的流程图；
[0039]图6示出了本专利技术实施例提供的一种查看3D可视化数据的系统的结构示意图。
具体实施方式
[0040]下面将参照附图更详细地描述本专利技术的示例性实施例。虽然附图中显示了本专利技术的示例性实施例，然而应当理解，可以以各种形式实现本专利技术而不应被这里阐述的实施例所限制。
[0041]图1示出了本专利技术一种查看3D可视化数据的方法实施例的流程图，如图1所示，该方法包括以下步骤：
[0042]S100获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体；
[0043]S200采用slam技术和Mark技术将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；
[0044]利用slam技术获取世界坐标系，在世界坐标系下通过AR眼镜上的摄像头寻找到Mark的位置，作为精准的参考坐标，数字孪生的数据通过坐标变换对应到世界坐标系，通过AR眼镜里的成像单元显示呈现。...

【技术保护点】

【技术特征摘要】
1.一种查看3D可视化数据的方法，其特征在于，包括步骤：S100获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体；S200采用slam技术和Mark技术将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；S300获取使用者手势指令，根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息。2.根据权利要求1所述的一种查看3D可视化数据的方法，其特征在于，在所述的S100获取患者的创面信息，根据所述创面信息生成创面对应的数字孪生体之前包括步骤：S10采集若干组标准手势指令；S11建立每个标准手势指令与调整指令的映射关系，形成用于调整数字孪生体显示状态的指令数据库。3.根据权利要求1所述的一种查看3D可视化数据的方法，其特征在于，所述的S300获取使用者手势指令，根据所述手势指令旋转所述AR眼镜显示区域内的数字孪生体，进行查看所述患者各个面的创面信息具体包括步骤：S301将所获取的手势指令与所述指令数据库进行匹配，获取所述手势指令对应的调整指令；S302根据所述调整指令对显示状态进行调整显示。4.一种查看3D可视化数据的AR眼镜，其特征在于，包括：创面获取单元，所述创面获取单元用于获取患者的创面信息；生成单元，所述生成单元与所述创面获取单元连接，用于根据所述创面信息生成创面对应的数字孪生体；定位单元，所述定位单元与所述生成单元连接，用于将所述数字孪生体映射至AR眼镜中，并将所述数字孪生体锚定在所述AR眼镜的显示区域；手...

【专利技术属性】
技术研发人员：林瓊，王建华，朱明，施旭，
申请(专利权)人：上海诠视传感技术有限公司，
类型：发明
国别省市：