病理显微镜、显示模组、控制方法、装置及存储介质制造方法及图纸

本申请公开了一种病理显微镜、显示模组、控制方法、装置及存储介质，属于显微镜拍摄成像领域。病理显微镜包括：显微镜本体、图像采集组件、控制组件和增强现实AR投影组件。显微镜本体上形成有入射光路和出射光路，图像采集组件设置在入射光路上，控制组件的输入端与图像采集组件电性相连，控制组件的输出端与AR投影组件电性相连，AR投影组件设置在出射光路上。本申请通过病理显微镜得到AI分析信息，再通过AR投影组件将AI分析信息投影至显微镜本体的显微镜视野中，达到了医生能够在显微镜视野中同时观察到病理切片图像和AI分析信息，不需要来回切换视野，使观察过程更为直接，从而实现病理显微镜在使用过程中的高实时性。

Pathological microscope, display module, control method, device and storage medium

【技术实现步骤摘要】
病理显微镜、显示模组、控制方法、装置及存储介质
本申请涉及显微镜拍摄成像领域，特别涉及一种病理显微镜、显示模组、控制方法、装置及存储介质。
技术介绍
病理检查是用以检查机体器官、组织或细胞中的病理改变的病理形态学方法。在病理检查过程中，医生可切取一定大小的病变组织，采用病理组织学方法制成病理切片，然后使用病理显微镜观察病理切片来观察病变。相关技术中提供了一种病理显微镜，该病理显微镜上除了采用光学结构的显微镜本体之外，还设置有图像获取设备和AI分析模型。图像获取设备用于从显微镜本体的光路内采集得到病理切片的病理数字图像，AI分析模型用于对病理数字图像进行算法分析后得到AI病理切片图像。该AI病理切片图像可通过液晶显示屏进行显示。当医生在AI病理切片图像上发现了可疑病变区域后，如果需要在显微镜视野的病理切片图像中再次确认该可疑病变区域，则需要再次切换到显微镜视野，花费一定时间才可以在显微镜视野中找到该可疑病变区域，因此上述病理显微镜的使用较为不便且观察过程中的实时性较差。
技术实现思路
本申请实施例提供了一种病理显微镜、显示模组、控制方法、装置及存储介质，可以解决相关技术中医生需在显微镜视野和AI病理切片图像之间来回切换，因此病理显微镜的使用较为不便且观察过程中的实时性较差的问题。所述技术方案如下：根据本申请的一方面，提供了一种适用于病理显微镜的附加显示模组，所述附加显示模组包括：图像采集组件、控制组件和AR投影组件；所述图像采集组件用于设置在所述病理显微镜的入射光路上，所述控制组件的输入端与所述图像采集组件电性相连，所述控制组件的输出端与所述AR投影组件电性相连，所述AR投影组件用于设置在所述病理显微镜的出射光路上；所述图像采集组件，用于从所述入射光路上采集病理数字图像；所述控制组件，用于将所述病理数字图像进行人工智能AI分析，生成AI分析信息；所述AR投影组件，用于在所述出射光路上将所述AI分析信息投影至所述病理显微镜的显微镜视野中。可选地，所述控制组件，还用于获取至少一个AI分析模型；确定与所述病理数字图像的使用场景对应的目标AI分析模型；调用所述目标AI分析模型对所述病理数字图像进行AI分析，生成所述AI分析信息；和/或，所述控制组件，还用于将所述病理数字图像发送至服务器，所述服务器存储有AI分析模型，所述服务器用于通过所述AI分析模型对所述病理数字图像进行AI分析得到AI分析信息；所述控制组件，还用于接收所述服务器发送的所述AI分析信息。其中，所述控制组件，还用于当所述病理数字图像的使用场景是肿瘤区域检测时，确定肿瘤区域检测AI模型为所述目标AI分析模型；调用所述肿瘤区域检测AI模型对所述病理数字图像进行AI分析得到肿瘤分析信息；和/或，所述控制组件，还用于当所述病理数字图像的使用场景是细胞检测时，确定细胞检测AI模型为所述目标AI分析模型；调用所述细胞检测AI模型对所述病理数字图像进行AI分析得到细胞检测信息；和/或，所述控制组件，还用于当所述病理数字图像的使用场景是传染病检测时，确定传染病检测AI模型为所述目标AI分析模型；调用所述传染病检测AI模型对所述病理数字图像进行AI分析得到传染病检测信息。可选地，所述附加显示组件还包括：与所述控制组件相连的语音采集组件。所述语音采集组件，用于采集外部的语音信号。所述控制组件，用于识别所述语音信号的控制指令；根据所述控制指令对所述AI分析的分析过程进行控制。所述控制组件，用于当所述控制指令是模型选择指令时，根据所述模型选择指令选择所述目标AI分析模型。可选地，所述附加显示组件还包括：与所述控制组件相连的网络组件；所述控制组件，还用于当所述控制指令是模型下载指令时，通过所述网络组件下载至少一个AI分析模型；或，所述控制组件，还用于未存储有所述目标AI分析模型时，通过所述网络组件下载所述目标AI分析模型。所述控制组件，用于当所述控制指令是第一生成指令时，生成病理报告，所述病理报告包括所述AI分析信息；或，所述控制组件，用于当所述控制指令是第二生成指令时，生成病历报告，所述病历报告包括所述AI分析信息和病人信息，所述病人信息是从病理切片上的文字或图形码上识别得到的。所述控制组件还用于从所述语音信号中识别出文字内容，根据所述文字内容生成所述病理报告或所述病历报告中的医生记录。可选地，所述附加显示组件还包括：与所述控制组件相连的网络组件；所述控制组件，还用于通过所述网络组件将所述病理报告或所述病历报告上传至第一目标设备；和/或，所述控制组件，还用于通过所述网络组件将叠加有所述AI分析信息的显微镜图像上传至第二目标设备或分享至预设分享渠道。可选地，所述附加显示模组还包括：与所述控制组件相连的语音播放组件；所述控制组件，还用于控制所述语音播放组件播放所述AI分析信息。根据本申请的另一方面，提供了一种病理显微镜，所述病理显微镜包括：显微镜本体和附加显示模组；所述附加显示模组是如上文所述的附加显示模组；所述显微镜本体上包括：与入射光路对应的第一机体部分和与出射光路对应的第二机体部分。可选地，所述附加显示模组中的全部或部分组件集成在所述显微镜本体中；或者，所述第一机体部分上形成有第一物理接口，所述第一物理接口是用于安装图像采集组件的接口，所述图像采集组件是用于从所述入射光路上采集病理数字图像的组件；所述第二机体部分上形成有第二物理接口，所述第二物理接口是用于安装增强现实AR投影组件的接口，所述AR投影组件是用于将人工智能AI分析信息投影至显微镜视野的组件，所述AI分析信息是对所述病理数字图像进行AI分析得到的。根据本申请的另一方面，提供了一种显示控制方法，应用于上述控制组件中，所述方法包括：获取图像采集组件从入射光路上采集病理数字图像；将所述病理数字图像进行人工智能AI分析，生成AI分析信息；控制AR投影组件在出射光路上将所述AI分析信息投影至病理显微镜的显微镜视野中。可选地，获取至少一个AI分析模型；在所述至少一个AI分析模型中，确定与所述病理数字图像的使用场景对应的目标AI分析模型；调用所述目标AI分析模型对所述病理数字图像进行AI分析，生成所述AI分析信息；和/或，将所述病理数字图像发送至服务器，所述服务器中存储有AI分析模型，所述服务器用于通过所述AI分析模型对所述病理数字图像进行AI分析得到AI分析信息；接收所述服务器发送的所述AI分析信息。其中，当所述病理数字图像的使用场景是肿瘤区域检测时，确定肿瘤区域检测AI模型为所述目标AI分析模型；调用所述肿瘤区域检测AI模型对所述病理数字图像进行AI分析得到肿瘤分析信息；和/或，当所述病理数字图像的使用场景是细胞检测时，确定细胞检测AI模型为所述目标AI分析模型；调用所述细胞检测AI模型对所述病理数字图像进行AI分析得到细胞检测信息；和/或，当所述病理数字图像的使用场景是传染病检测时，确定传染病检测AI模型为所述目标AI分析模型；调用所述传染病检测AI模型对所述病理数字图像进行AI分析得到传染病检测信息。可选地，所述方法，还包括：识别从语音采集组件的语音信号采集的控制指令；根据所述控制指令对所述AI分析的分析过程进行控制。当所述控制指令是模式选择指令时，根据所述模型选择指令选择所述目标AI分析模型。当所述控本文档来自技高网...

【技术保护点】
1.一种适用于病理显微镜的附加显示模组，其特征在于，所述附加显示模组包括：图像采集组件、控制组件和增强现实AR投影组件；所述图像采集组件用于设置在所述病理显微镜的入射光路上，所述控制组件的输入端与所述图像采集组件电性相连，所述控制组件的输出端与所述AR投影组件电性相连，所述AR投影组件用于设置在所述病理显微镜的出射光路上；所述图像采集组件，用于从所述入射光路上采集病理数字图像；所述控制组件，用于将所述病理数字图像进行人工智能AI分析，生成AI分析信息；所述AR投影组件，用于在所述出射光路上将所述AI分析信息投影至所述病理显微镜的显微镜视野中。

【技术特征摘要】
1.一种适用于病理显微镜的附加显示模组，其特征在于，所述附加显示模组包括：图像采集组件、控制组件和增强现实AR投影组件；所述图像采集组件用于设置在所述病理显微镜的入射光路上，所述控制组件的输入端与所述图像采集组件电性相连，所述控制组件的输出端与所述AR投影组件电性相连，所述AR投影组件用于设置在所述病理显微镜的出射光路上；所述图像采集组件，用于从所述入射光路上采集病理数字图像；所述控制组件，用于将所述病理数字图像进行人工智能AI分析，生成AI分析信息；所述AR投影组件，用于在所述出射光路上将所述AI分析信息投影至所述病理显微镜的显微镜视野中。2.根据权利要求1所述的附加显示模组，其特征在于，所述控制组件，还用于获取至少一个AI分析模型；确定与所述病理数字图像的使用场景对应的目标AI分析模型；调用所述目标AI分析模型对所述病理数字图像进行AI分析，生成所述AI分析信息；和/或，所述控制组件，还用于将所述病理数字图像发送至服务器，所述服务器存储有AI分析模型，所述服务器用于通过所述AI分析模型对所述病理数字图像进行AI分析得到AI分析信息；所述控制组件，还用于接收所述服务器发送的所述AI分析信息。3.根据权利要求2所述的附加显示模组，其特征在于，所述控制组件，还用于当所述病理数字图像的使用场景是肿瘤区域检测时，确定肿瘤区域检测AI模型为所述目标AI分析模型；调用所述肿瘤区域检测AI模型对所述病理数字图像进行AI分析得到肿瘤分析信息；和/或，所述控制组件，还用于当所述病理数字图像的使用场景是细胞检测时，确定细胞检测AI模型为所述目标AI分析模型；调用所述细胞检测AI模型对所述病理数字图像进行AI分析得到细胞检测信息；和/或，所述控制组件，还用于当所述病理数字图像的使用场景是传染病检测时，确定传染病检测AI模型为所述目标AI分析模型；调用所述传染病检测AI模型对所述病理数字图像进行AI分析得到传染病检测信息。4.根据权利要求1所述的附加显示模组，其特征在于，所述附加显示模组还包括：与所述控制组件相连的语音采集组件；所述语音采集组件，用于采集外部的语音信号；所述控制组件，用于识别所述语音信号的控制指令；根据所述控制指令对所述AI分析的分析过程进行控制。5.根据权利要求4所述的附加显示模组，其特征在于，所述控制组件，用于当所述控制指令是模型选择指令时，根据所述模型选择指令选择所述目标AI分析模型。6.根据权利要求5所述的附加显示模组，其特征在于，所述附加显示模组还包括：与所述控制组件相连的网络组件；所述控制组件，还用于当所述控制指令是模型下载指令时，通过所述网络组件下载至少一个AI分析模型；或，所述控制组件，还用于未存储有所述目标AI分析模型时，通过所述网络组件下载所述目标AI分析模型。7.根据权利要求4所述的附加显示模组，其特征在于...

【专利技术属性】
技术研发人员：姚建华，韩骁，黄俊洲，刘伟，王彦襄，蔡德，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东,44