用于与虚拟模型进行交互的触摸屏用户界面制造技术

本申请公开了用于与虚拟模型进行交互的触摸屏用户界面。提供了方法和系统，这些方法和系统可以包括利用包括触摸屏的可视化工具访问对象的三维(3D)模型，经由触摸屏显示3D模型的图像，检测触摸屏处的基于压力的输入和/或基于接触的输入，以及由于输入而改变3D模型的第一部件的显示参数。选择部件和/或改变显示可以通过视觉信号和/或触觉信号指示。本申请提供一种方法，该方法可以包括：选择性地使3D模型的部件透明或不透明；以及基于剩余的不透明部件来改变3D模型的旋转中心。本申请提供一种方法，该方法可以包括经由立体相机识别选择工具的姿势以及基于检测到的姿势来改变显示参数。示参数。示参数。

【技术实现步骤摘要】
用于与虚拟模型进行交互的触摸屏用户界面
[0001]本申请是2018年7月30日提交的名称为：“用于与虚拟模型进行交互的触摸屏用户界面”的中国专利申请2018800465344(PCT/US2018/044412)的分案申请。
[0002]相关申请的交叉引用
[0003]本申请要求2017年8月1日提交的美国临时申请62/539,849的权益，其全部内容通过引用合并于此。


[0004]本公开涉及用于经由可视化工具的触摸屏用户界面浏览虚拟三维(3D)模型并与3D模型的部件进行交互的系统和方法。

技术介绍

[0005]虚拟3D模型可用于研究复杂系统。可以使用包括计算机辅助设计(CAD)软件的各种软件应用程序来产生各种复杂系统的虚拟3D模型，这些复杂系统包括车辆组装件/子组装件、建筑结构、机器人系统和解剖系统/子系统。可以从由包括例如计算机断层摄影(CT)系统或磁共振成像(MRI)系统的成像系统获得的图像产生对象或系统(诸如人体解剖结构和/或人体解剖结构的一些部分)的解剖3D模型。3D模型可以包含有部件，这些部件包括模型的层、本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种方法，其包括：利用具有触摸屏的可视化工具访问对象的三维模型即3D模型，所述3D模型包括第一部件和第二部件；经由所述触摸屏显示所述第一部件和所述第二部件的图像；在所述触摸屏处检测第一基于接触的输入；响应于所述第一基于接触的输入来选择所述第一部件；在所述触摸屏上显示第一图标，所述第一图标表示所述第一基于接触的输入在所述触摸屏上的方位；响应于所述第一基于接触的输入，在所述触摸屏上显示第二图标和第三图标；检测所述第一基于接触的输入沿所述触摸屏的移动；跟踪所述第一图标随所述第一基于接触的输入的所述移动的移动；从跟踪的移动确定所述第一图标与所述第二图标和所述第三图标中的一个至少部分地重叠；响应于确定所述重叠，选择所述第一部件的显示参数；在所述触摸屏处检测第二基于接触的输入；以及响应于检测到的所述第二基于接触的输入沿所述触摸屏的移动，调整所选择的显示参数。2.根据权利要求1所述的方法，其中选择所述第一部件包括生成触觉信号。3.根据权利要求1所述的方法，还包括响应于所述第二基于接触的输入而显示第四图标，所述第四图标表示所述第二基于接触的输入在所述触摸屏上的方位，其中所述第四图标跟踪所述第二基于接触的输入沿所述触摸屏的移动。4.根据权利要求1所述的方法，其中所述3D模型包括对应于所述3D模型的横截面区域的第三部件，其中所述可视化工具显示所述第三部件以及所述第一部件和所述第二部件两者中的每一个的横截面部分，其中所述第一部件和所述第二部件中的每一个的横截面部分也对应于所述3D模型的所述横截面区域。5.根据权利要求4所述的方法，其中调整所选择的显示参数包括调整所述第三部件的开窗。6.根据权利要求5所述的方法，其中所述第二基于接触的输入的所述移动包括在第一方向上的移动，并基于在所述第一方向上的所述移动以一种方式调整所述第三部件的所述开窗，并且其中所述第二基于接触的输入的所述移动包括在第二方向上的移动，并基于在所述第二方向上的所述移动以另一种方式调整所述第三部件的所述开窗。7.根据权利要求1所述的方法，其中调整所选择的显示参数包括调整所述第一部件的透明度。8.根据权利要求7所述的方法，其中基于检测到的所述第二基于接触的输入的移动，所述第一部件的所述透明度在0％至100％之间可调整。9.根据权利要求8所述的方法，其中响应于将所述第一部件的所述透明度调整为100％，改变所述3D模型的旋转中心。10.根据权利要求1所述的方法，其中所述第二图标表示第一可调整显示参数，并且所述第三图标表示第二可调整显示参数。
11.根据权利要求1所述的方法，其中显示所述第二图标和所述第三图标包括将所述第三图标显示为在视觉上不同于所述第二图标。12.一种方法，其包括：利用包括触摸屏的可视化工具访问对象的三维模型即3D模型，所述3D模型包括多个部件；经由所述触摸屏显示所述部件的子集的图像，其中在所述部件的所述子集中包括所述3D模型中的具有小于100％的透明度的所述部件中的每个部件；在所述触摸屏处检测第一基于接触的输入；在所述触摸屏上显示第一图标，所述第一图标表示所述第一基于接触的输入在所述触摸屏上的方位；通过所述第一图标跟踪所述第一基于接触的输入的移动来检测所述第一基于接触的输入沿所述触摸屏的移动；以及响应于检测到的移动，使所述部件的所述子集绕旋转中心旋转。13.根据权利要求12所述的方法，其中所述部件的所述子集的所述旋转中心由所述部件的所述子集中包括的所述部件中的一个或多个确定。14.根据权利要求13所述的方法，其中所述部件的所述子集建立矩形棱镜，其中所述部件的所述子集被包含在所述矩形棱镜内，并且其中所述部件的所述子集中的最外面的部件建立所述矩形棱镜的外边界。15.根据权利要求14所述的方法，还包括当所述部件的所述子集中的至少一个部件由于所述部件中的一个或多个的透明度从小于100％改变为等于100％或者从等于100％改变为小于100％而改变，并且所述矩形棱镜的体积由于所述子集中的部件的数量改变而改变时，改变所述旋转中心。16.根据权利要求15所述的方法，其中所述旋转包括绕X、Y和Z笛卡尔轴中的至少一个旋转，其中所述X、Y和Z笛卡尔轴与所述旋转中心相交。17.根据权利要求12所述的方法，进一步包括：在所述触摸屏处检测基于第二接触的输入；检测所述基于第一接触的输入和所述基于第二接触的输入沿着所述触摸屏的同时移动；并且响应于检测到的所述基于第一接触的输入和所述基于第二接触的输入的同时移动，线性平移所述部件的所述子集的所述图像。18.根据权利要求17所述的方法，其中检测所述基于第一接触的输入和所述基于第二接触的输入的同时移动包括检测所述基于第一接触的输入与所述基于第二接触的输入之间的距离被保持。19.根据权利要求17所述的方法，还包括响应于检测到的所述基于第一接触的输入和所述基于第二接触的输入的同时移动来调整所述部件的所述子集的所述图像的大小。20.根据权利要求19所述的方法，其中检测所述基于第一接触的输入和所述基于第二接触的输入的同时移...

【专利技术属性】
技术研发人员：W，
申请(专利权)人：直观外科手术操作公司，
类型：发明
国别省市：