显微镜、投影方法、装置、计算机设备及存储介质制造方法及图纸

本申请关于一种显微镜、投影方法、装置、计算机设备及存储介质，涉及增强现实技术领域。显微镜包括：目镜组件、投影组件、图像采集组件、以及第一分束器；所述第一分束器设置在所述目镜组件与目标物之间的第一光路上；所述投影组件设置在所述第一分束器的一侧，且所述投影组件发出的光线经过所述第一分束器的反射后，沿所述第一光路向所述目镜组件传播；所述图像采集组件设置在所述第一分束器的另一侧，且从所述目标物出发的光线经过所述第一分束器的反射后，向所述图像采集组件传播。本方案能够结合增强现实和人工智能，辅助操作人员更准确的识别目标物中的细微组织，从而提高通过显微镜进行细微组织识别的准确性。显微镜进行细微组织识别的准确性。显微镜进行细微组织识别的准确性。

【技术实现步骤摘要】
显微镜、投影方法、装置、计算机设备及存储介质


[0001]本申请涉及增强现实
，特别涉及一种显微镜、投影方法、装置、计算机设备及存储介质。

技术介绍

[0002]手术显微镜是一种应用于外科手术或者教学实验中，辅助操作人员准确观察细微血管以及神经等组织的医疗器械。
[0003]在相关技术中，手术显微镜中包含目镜组件，操作人员通过调节目镜组件的方向和焦点等操作，使得目镜组件对准手术部位，并通过目镜组件观察手术部位的细微组织，以便更准确的进行手术操作。
[0004]然后，上述方案中手术显微镜需要操作人员根据人工经验来分辨目镜视野下的细微组织，对操作人员的限制较高，影响对细微组织的分辨的准确性。

技术实现思路

[0005]本申请实施例提供了一种显微镜、投影方法、装置、计算机设备及存储介质，可以提高辅助操作人员对显微镜下的细微组织进行识别，提高细微组织识别的准确性，该技术方案如下。
[0006]一方面，提供了一种显微镜，所述显微镜包括：目镜组件、投影组件、图像采集组件、以及第一分束器；
[0007]所述第一分束器设置在所述目镜组件与目标物之间的第一光路上；
[0008]所述投影组件设置在所述第一分束器的一侧，且所述投影组件发出的光线经过所述第一分束器的反射后，沿所述第一光路向所述目镜组件传播；
[0009]所述图像采集组件设置在所述第一分束器的另一侧，且从所述目标物出发的光线经过所述第一分束器的反射后，向所述图像采集组件传播；
[0010]其中，所述投影组件，用于显示投影影像，所述投影影像是基于从所述图像采集组件采集到的实时图像中识别出的信息生成的。
[0011]又一方面，提供了一种投影方法，所述方法由处理器执行，所述处理器与显微镜中的投影组件以及图像采集组件分别电性相连，所述显微镜是如上述方面所述的显微镜，所述方法包括：
[0012]获取显微镜中的图像采集组件实时采集的器官图像；
[0013]对所述器官图像进行组织识别，获得所述指定类型器官组织在所述目镜视野中的位置；
[0014]基于所述指定类型器官组织在显微镜的目镜视野中的位置生成所述指示信息对应的AR影像；
[0015]将所述AR影像发送给显微镜中的投影组件。
[0016]又一方面，提供了一种投影装置，所述装置用于处理器中，所述处理器与显微镜中
的投影组件以及图像采集组件分别电性相连，所述显微镜是如上述方面所述的显微镜，所述装置包括：
[0017]图像获取模块，用于获取显微镜中的图像采集组件实时采集的器官图像；
[0018]识别模块，用于对所述器官图像进行组织识别，获得所述指定类型器官组织在所述目镜视野中的位置；
[0019]影像生成模块，用于基于所述指定类型器官组织在显微镜的目镜视野中的位置生成所述指示信息对应的AR影像；
[0020]影像发送模块，用于将所述AR影像发送给显微镜中的投影组件。
[0021]再一方面，提供了一种计算机设备，所述计算机设备中的处理器与显微镜中的投影组件以及图像采集组件分别电性相连，所述显微镜是如上述方面所述的显微镜；
[0022]所述计算机设备包含存储器，所述存储器中存储有至少一条计算机指令，所述至少一条计算机指令由所述处理器加载并执行以实现如上所述的投影方法。
[0023]又一方面，提供了一种计算机可读存储介质，所述存储介质中存储有至少一条计算机指令，所述至少一条计算机指令由计算机设备中的处理器加载并执行以实现如上所述的投影方法；
[0024]其中，所述处理器与显微镜中的投影组件以及图像采集组件分别电性相连，所述显微镜是如上述方面所述的显微镜。
[0025]又一方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述投影方法；其中，所述计算机设备中的处理器与显微镜中的投影组件以及图像采集组件分别电性相连，所述显微镜是如上述方面所述的显微镜。
[0026]本申请实施例提供的技术方案带来的有益效果至少包括：
[0027]通过在目镜组件和目标物之间设置一个分束器，将目标物的影像反射到图像采集组件，同时，将投影组件投影的影像反射至目镜组件，通过投影组件显示投影影像(基于图像采集组件采集到的实时图像中识别出的信息生成)，从而实现在目镜视野下，在目标物上直接叠加当前目标物对应的投影图像，由于投影组件发出的投影影像，以及当前目标物的自然图像通过同一个分束器传播到目镜组件中，因此AR影像和自然图像之间可以直接叠加，从而可以通过增强现实的方式，在目镜视野下实时显示当前目镜视野下的目标物对应的相关信息，辅助操作人员更准确的识别目标物中的细微组织，从而提高通过显微镜进行细微组织识别的准确性。
[0028]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
[0029]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
[0030]图1是根据一示例性实施例示出的一种显微镜的结构示意图；
[0031]图2是根据一示例性实施例示出的一种显微镜的结构示意图；
[0032]图3是图2所示实施例涉及的AR影像处理示意图；
[0033]图4是图2所示实施例涉及的一种显微镜的结构示意图；
[0034]图5是图2所示实施例涉及的一种显微系统的系统构成图；
[0035]图6是图2所示实施例涉及的显微系统的工作流程图；
[0036]图7是本申请一示例性实施例提供的投影方法的方法流程图；
[0037]图8是本申请一示例性实施例提供的投影装置的结构图；
[0038]图9是根据一示例性实施例示出的一种计算机设备的结构示意图。
具体实施方式
[0039]这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
[0040]增强现实(Augmented Reality，AR)
[0041]增强现实技术也被称为扩增现实，增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的
技术实现思路
，其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上，实施模拟仿真处理，叠加将虚拟信息内容在真实世界中加以有效应用，并且在这一过程中能够被人类感官所感知，从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后，能够在同一个画面以及空间中同时存在。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显微镜，其特征在于，所述显微镜包括：目镜组件、投影组件、图像采集组件、以及第一分束器；所述第一分束器设置在所述目镜组件与目标物之间的第一光路上；所述投影组件设置在所述第一分束器的一侧，且所述投影组件发出的光线经过所述第一分束器的反射后，沿所述第一光路向所述目镜组件传播；所述图像采集组件设置在所述第一分束器的另一侧，且从所述目标物出发的光线经过所述第一分束器的反射后，向所述图像采集组件传播；所述投影组件，用于向所述目镜组件投影增强现实AR影像；所述AR影像是基于对所述图像采集组件采集到的图像进行识别得到的图像识别结果生成的。2.根据权利要求1所述的显微镜，其特征在于，所述显微镜还包括：第一偏振片和第二偏振片；所述第一偏振片设置在所述第一分束器与所述投影组件之间；所述第二偏振片设置在所述第一分束器与所述图像采集组件之间；所述第一偏振片的偏振方向与所述第二偏振片的偏振方向垂直。3.根据权利要求1所述的显微镜，其特征在于，所述显微镜还包括光源；所述光源用于向所述目标物补光。4.根据权利要求3所述的显微镜，其特征在于，所述光源发出的光线包括宽光谱光线，所述图像采集组件为内置高光谱或多光谱相机。5.根据权利要求3所述的显微镜，其特征在于，所述显微镜还包括：光反射器；所述光源发的光线经过所述光反射器反射后，向所述目标物传播。6.根据权利要求1所述的显微镜，其特征在于，所述目镜组件包括第一目镜和第二目镜；所述第一分束器设置在所述第一目镜与所述目标物之间。7.根据权利要求6所述的显微镜，其特征在于，所述显微镜还包括第一透镜；所述第一透镜设置在第二目镜与所述目标物之间；从所述目标物出发的光线透过所述第一分束器的光程，与透过所述第一透镜的光程相同。8.根据权利要求7所述的显微镜，其特征在于，所述第一透镜的透光率，与所述第一分束器的透光率相同。9.根据权利要求1所述的显微镜，其特征在于，所述目标物为手术中器官；所述投影组件，用于向所述目镜组件投影指示信息的AR影像，所述指示信息用于指示所述器官中的指定类型器官组织在所述目镜视野中的位置。10.根据权利要求9所述的显微镜，其特征在于，所述投影组件以及所述图像采集组件分别与处理器电性相连；所述处理器，用于获取所述图像采集组件实时采集的器官图像，并对所述器官图像进行组织识...

【专利技术属性】
技术研发人员：廖俊，姚建华，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：