配置人工智能芯片的医用内窥镜系统及图像处理方法技术方案

本发明专利技术提供一种配置人工智能芯片的医用内窥镜系统及图像处理方法。通过数据处理模块筛选置信度超过预定阀值的图像，传送给远程服务模块，降低通信负载。包含该模块的内窥镜需要传输的数据量也会得到降低。通过远程服务模块将具有预定特征区域进行标注和分类，从而将特定的图像信息展示给相关的工作人员，减少了图像识别的工作量，提高了工作效率。包含该模块的内窥镜也能够将具有特定的图像信息的图像展示给相关的工作人员，提高工作效率。通过实时指导模块低延时的接收指导命令，实现了实时接受远程指导，提高图像采集处理的效率。包含该模块的内窥镜也能够实现低延时的接收指导命令，从而提高了内窥镜检测的有效性。

Medical endoscope system with artificial intelligence chip and image processing method

The invention provides a medical endoscope system and an image processing method for configuring an artificial intelligence chip. Through the data processing module, the image with a confidence threshold exceeding the predetermined threshold is screened and transmitted to the remote service module to reduce the communication load. The endoscope that contains the module will also reduce the amount of data it needs to transmit. Through the remote service module, the specified area is labeled and classified, and the specific image information is displayed to the relevant staff, which reduces the workload of the image recognition and improves the efficiency of the work. The endoscope containing the module can also display the image with specific image information to the relevant staff, so as to improve the work efficiency. Through real-time guidance module low delay receiving guidance command, real-time acceptance of remote guidance is achieved, and the efficiency of image acquisition and processing is improved. The endoscope containing the module can also achieve low latency receiving guidance commands, thereby improving the effectiveness of endoscopy detection.

【技术实现步骤摘要】
配置人工智能芯片的医用内窥镜系统及图像处理方法
本专利技术涉及图像处理以及医用领域，具体涉及一种配置人工智能芯片的医用内窥镜系统及该系统的图像处理方法。
技术介绍
内窥镜是集中了传统光学、人体工程学、数学、精密机械、微电子设别以及软件等于一体的检测仪器。内窥镜具有图像传感器、光学镜头、光源照明等，它可以经人体的天然孔道，或者是经手术做的小切口进入人体内，采集图像，并将采集的图像传输到医护人员可以看到的显示终端上，例如内窥镜经口腔进入胃内。利用内窥镜可以使医护人员看到X射线不能显示的病变，对医生诊断以及病人的治疗都非常有用。目前内窥镜利用光源照明，利用光学镜头以及图像传感器采集人体内的图像，并将采集的图像传输给显示终端，供医护人员进行诊断。现在的内窥镜虽然能够采集并传输图像，但是其采集、处理并传输的是从内窥镜进入人体到离开人体这段时间内的所有图像，大量的图像数据的传输造成了相当大的通信负载。同时，现有的内窥镜将采集到的所有图像都以原始的状态存储或展示给相关的工作人员，不能够提供特定的图像信息，不仅浪费了存储空间，并且增大了相关人员识别图像的工作量，降低了工作效率。另外，内窥镜远程通信存在一定程度的延时，因此内窥镜在使用过程中不能实时接收远程终端的指导命令，影响了内窥镜对图像采集处理的效率，并且降低了内窥镜检测的有效性。
技术实现思路
(一)解决的技术问题针对现有技术的不足，本专利技术提供了一种配置人工智能芯片的医用内窥镜系统及图像处理方法、，克服了现有技术中图像处理过程中通信负载大、不能提供特定的图像信息以及不能实时接收远程指导命令的缺陷。(二)技术方案为实现以上目的，本专利技术通过以下技术方案予以实现：第一方面，提供了一种配置人工智能芯片的医用内窥镜系统，所述系统包括：视像采集模块，用于按照预定路线连续采集待拍摄物体的图像，并将采集的图像传输给数据处理模块以及通信模块；数据处理模块，用于接收所述视像采集模块采集的图像，筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度，并将所述置信度超过预定阀值的所述预定特征区域对应的图像传输给通信模块；通信模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，并转发给远程服务模块，同时所述通信模块用于将所述视像采集模块采集到的图像数据传输给实时指导模块；远程服务模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，实现图像的云端存储；对所述预定特征区域进行标注，并对所述预定特征区域进行分类；实时指导模块，用于接收远程指导命令，并根据所述远程指导命令形成新的预定路线或重复拍摄图像。结合第一方面，在第一种可能的实现方式中，所述实时指导模块包括WebRTC子模块，所述WebRTC子模块用于接收所述远程指导命令，实现低延迟的视频通信。结合第一方面，在第二种可能的实现方式中，所述数据处理模块包括利用集成了深度神经网络模型的医用人工智能芯片，用于筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度。结合第一方面的第二种可能的实现方式，在第三种可能的实现方式中，数据处理模块包括控制器，所述控制器包括配置文件修改单元，所述配置文件修改单元用于修改所述控制器的配置文件，可实现将包含所述数据处理模块的配置人工智能芯片的医用内窥镜系统应用于不同场景下实现所述预定特征区域的识别。结合第一方面的第二种可能的实现方式，在第四种可能的实现方式中，所述系统还包括视像显示模块；所述视像采集模块将采集的图像传输给所述视像显示模块；所述数据处理模块将标注有所述预定特征区域的图像传递给所述视像显示模块；所述视像显示模块用于接收并显示所述视像采集模块采集的图像，并且接收并显示标注有所述预定特征区域的图像。结合第一方面，在第五种可能的实现方式中，所述远程服务模块包括卷积神经网络子模块，所述卷积神经网络子模块用于实现所述预定特征区域的识别和标注，并且用于将所述预定特征区域进行分类，同时带有预定特征区域的类别说明。结合第一方面，在第六种可能的实现方式中，所述远程服务模块包括存储子模块，用于存储接收的所述置信度超过预定阀值预定特征区域对应的图像。第二方面，提供了一种图像处理方法，所述方法包括如下步骤：按照预定路线连续采集待拍摄物体的图像；筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度；并选取所述置信度超过预定阀值的预定特征区域对应的图像，得到待处理图像；将所述待处理图像传输给给远程服务端；从所述待处理图像中的预定特征区域进行标注，并对所述预定特征区域进行分类；接收远程指导命令，根据所述指导命令形成新的预定路线或重复拍摄图像，并根据所述新的预定路线连续采集待拍摄物体的图像。结合第二方面，在第一种可能的实现方式中，所述方法还包括如下步骤：修改配置文件，实现在不同场景下对所述预定特征区域的识别。(三)有益效果本专利技术实施例提供了一种配置人工智能芯片的医用内窥镜系统及图像处理方法。具备以下有益效果：通过设置数据处理模块筛选置信度超过预定阀值的图像，并将这部分图像传送给远程服务模块，从而降低了需要传输的图像的数量，即降低了通信负载。包含该数据处理模块的内窥镜需要传输的数据量也相应的得到降低，从而降低了内窥镜的通信负载。通过设置远程服务模块，将具有预定特征区域进行标注和分类，从而将特定的图像信息展示给相关的工作人员，减少了相关人员识别图像的工作量，提高了工作效率。包含该远程服务模块的内窥镜也可以将具有特定的图像信息的图像展示给相关的工作人员，提高相关工作人员的工作效率。通过设置实时指导模块，能够低延时的接收远程服务模块发送的指导命令，实现了配置人工智能芯片的医用内窥镜系统实时接受远程指导，提高了图像采集处理的效率。包含该实时指导模块的内窥镜也能够实现低延时的接收远程服务模块发送的指导命令，从而提高了内窥镜检测的有效性。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术一实施例的配置人工智能芯片的医用内窥镜系统结构示意图；图2是本专利技术再一实施例的配置人工智能芯片的医用内窥镜系统结构示意图；图3是本专利技术又一实施例的配置人工智能芯片的医用内窥镜系统结构示意图图4是本专利技术一实施例的图像处理方法流程图；图5是本专利技术再一实施例的图像处理方法流程图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。应当说明的是本专利技术实施例的配置人工智能芯片的医用内窥镜系统中的部件可以但不限于用于内窥镜，可以用于其他任何图像处置装置。本专利技术的以下实施例以采用内窥镜作为例进行说明。一种配置人工智能芯片的医用内窥镜系统，如图1所示，该系统包括：视像采集模块，用于按照预定路线连续采集待拍摄物体的图像，并将采集的图像传输给数据处理模本文档来自技高网...

【技术保护点】
一种配置人工智能芯片的医用内窥镜系统，其特征在于，包括：视像采集模块，用于按照预定路线连续采集待拍摄物体的图像，并将采集的图像传输给数据处理模块以及通信模块；数据处理模块，用于接收所述视像采集模块采集的图像，筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度，并将所述置信度超过预定阀值的所述预定特征区域对应的图像传输给通信模块；通信模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，并转发给远程服务模块，同时所述通信模块用于将所述视像采集模块采集到的图像数据传输给实时指导模块；远程服务模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，实现图像的云端存储；对所述预定特征区域进行标注，并对所述预定特征区域进行分类；实时指导模块，用于接收远程指导命令，并根据所述远程指导命令形成新的预定路线或重复拍摄图像。

【技术特征摘要】
1.一种配置人工智能芯片的医用内窥镜系统，其特征在于，包括：视像采集模块，用于按照预定路线连续采集待拍摄物体的图像，并将采集的图像传输给数据处理模块以及通信模块；数据处理模块，用于接收所述视像采集模块采集的图像，筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度，并将所述置信度超过预定阀值的所述预定特征区域对应的图像传输给通信模块；通信模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，并转发给远程服务模块，同时所述通信模块用于将所述视像采集模块采集到的图像数据传输给实时指导模块；远程服务模块，用于接收所述置信度超过所述预定阀值的预定特征区域对应的图像，实现图像的云端存储；对所述预定特征区域进行标注，并对所述预定特征区域进行分类；实时指导模块，用于接收远程指导命令，并根据所述远程指导命令形成新的预定路线或重复拍摄图像。2.根据权利要求1所述的系统，其特征在于，所述实时指导模块包括WebRTC子模块，所述WebRTC子模块用于接收所述远程指导命令，实现低延迟的视频通信。3.根据权利要求1所述的系统，其特征在于，所述数据处理模块包括利用集成了深度神经网络模型的人工智能芯片，用于筛选包括预定特征区域的图像，计算每个所述预定特征区域的置信度。4.根据权利要求3所述的系统，其特征在于，数据处理模块包括控制器，所述控制器包括配置文件修改单元，所述配置文件修改单元用于修改所述控制器的配置文件，可实现将包含所述数据处理模块的配置人工智能芯片...

【专利技术属性】
技术研发人员：丁帅，岳子杰，杨善林，王泽源，王浩，赵磊，
申请(专利权)人：合肥工业大学，
类型：发明
国别省市：安徽,34