本发明专利技术涉及一种计算机可读取存储介质、基于深度学习的远端舌诊方法及装置，其中该基于深度学习的远端舌诊方法由处理单元执行，包含：通过网络从客户端装置接收看病请求和看病信息，上述看病信息包含拍摄照片；将拍摄照片输入多个局部侦测卷积神经网络以获取关联于拍摄照片中的舌头的多个类型的分类结果；在显示屏上显示远程舌诊应用程序的画面，其中，上述画面包含多个类型的分类结果；获取相应于多个类型的分类结果的医嘱；以及通过网络回复医嘱给客户端装置。通过如上所述的使用多个局部侦测卷积神经网络进行舌诊，可提升远程医疗的正确性。正确性。正确性。
【技术实现步骤摘要】
计算机可读取存储介质、基于深度学习的远端舌诊方法及装置
[0001]本专利技术涉及智能疾病诊断，尤指一种计算机可读取存储介质、基于深度学习的远端舌诊方法及装置。
技术介绍
[0002]舌诊是一种通过目视检查舌头和其各种表现的疾病和病征的诊断方法，舌头提供反映体内器官状态的重要线索。就像中医的其他诊断方法，舌诊是以“外在反映内在”的原则为基础，外在的构造通常反映内在的构造，并且能够提供我们内部失和的重要信号。传统上，图像辨识方法常用于完成计算机化舌诊，然而，这只能辨识出与颜色相关的有限舌头特征。因此，本专利技术提出一种计算机可读取存储介质、基于深度学习的远端舌诊方法及装置，用于辨认出较图像辨识方法更多的舌头特征。
技术实现思路
[0003]有鉴于此，如何减轻或消除上述相关领域的缺陷，实为有待解决的问题。
[0004]本专利技术涉及一种基于深度学习的舌诊方法，由处理单元执行，包含：通过网络从客户端装置接收看病请求和看病信息，上述看病信息包含拍摄照片；将拍摄照片输入多个局部侦测卷积神经网络以获取关联于拍摄照片中的舌头的多个类型的分类结果，其中，上述多个局部侦测卷积神经网络的数目等于上述多个类型的数目，每个局部侦测卷积神经网络只用于产生一个类型的分类结果；在显示屏上显示远程舌诊应用程序的画面，其中，所述画面包含多个类型的分类结果；获取相应于多个类型的分类结果的医嘱；以及通过网络回复医嘱给客户端装置。
[0005]本专利技术还涉及一种计算机可读取存储介质，用于存储能够被处理单元加载并执行的程序代码，并且所述程序代码被所述处理单元执行时实现如上所述的基于深度学习的远端舌诊方法。
[0006]本专利技术还涉及一种基于深度学习的舌诊装置，包含通信接口、显示屏和处理单元。处理单元耦接通信接口和显示屏，用于通过所述通信接口和网络从客户端装置接收看病请求和看病信息，看病信息包含拍摄照片；将拍摄照片输入多个局部侦测卷积神经网络以获取关联于拍摄照片中的舌头的多个类型的分类结果，其中，上述多个局部侦测卷积神经网络的数目等于上述多个类型的数目，上述每个局部侦测卷积神经网络只用于产生上述一个类型的分类结果；在显示屏上显示远程舌诊应用程序的画面，其中，上述画面包含多个类型的分类结果；获取相应于多个类型的分类结果的医嘱；以及通过通信接口和网络回复医嘱给客户端装置。
[0007]上述实施例的优点之一，通过以上所述的使用多个局部侦测卷积神经网络进行舌诊，可提升远程医疗的正确性。
[0008]本专利技术的其他优点将配合以下的说明和附图进行更详细的解说。
附图说明
[0009]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。
[0010]图1为依据本专利技术实施例的电子装置的两阶段示意图。
[0011]图2为依据本专利技术实施例的舌诊示意图。
[0012]图3为依据本专利技术实施例的舌诊应用程序的画面示意图。
[0013]图4为依据本专利技术实施例的训练装置和平板计算机的硬件架构图。
[0014]图5和图6为依据本专利技术实施例的深度学习的方法流程图。
[0015]图7和图8为依据本专利技术实施例的基于深度学习的舌诊方法的流程图。
[0016]图9为依据本专利技术实施例的远程舌诊系统的系统架构图。
[0017]图10为依据本专利技术实施例的远程看病应用程序的画面示意图。
[0018]图11为依据本专利技术实施例的就诊者自拍示意图。
[0019]图12为依据本专利技术实施例的药物容器示意图。
[0020]图13为依据本专利技术实施例的远程舌诊应用程序的画面示意图。
[0021]图14和图15为依据本专利技术实施例的基于深度学习的远程舌诊方法的流程图。
[0022]其中，附图中符号的简单说明如下：
[0023]110：训练装置；120：训练图像；130：舌诊模型；140：平板计算机；150：拍摄照片；30：舌诊应用程序的画面；310：预览窗口；320：存储按钮；330：离开按钮；340：结果窗口；350：类型名称提示；360：分类结果；410：处理单元；420：显示单元；430：输入设备；440：存储装置；450：存储器；460：通信接口；S510～S550：方法步骤；S610～S670：方法步骤；S710～S730：方法步骤；S810～S860：方法步骤；90：远程舌诊系统；910：远程舌诊计算机；930：桌面计算机；950：平板计算机；970：移动电话；1000：远程看病应用程序的画面；1010：照片预览窗口；1022：症状下拉菜单；1024：症状文字输入框；1030：用药情形文字输入框；1040：存储按钮；1050：上传按钮；1060：离开按钮；1100：就诊者；1200：QR码；1300：远程舌诊应用程序的画面；1312：预览窗口；1314：综合分析结果窗口；1322：打开按钮；1324：存储按钮；1326：回复病患按钮；1328：离开按钮；1330：类型名称提示；1340：分类结果；1350：症状窗口；1360：用药情形窗口；1370：医嘱文字输入框；S1410～S1450：方法步骤；S1532～S1538：方法步骤；。
具体实施方式
[0024]以下将配合相关附图来说明本专利技术的实施例。在这些附图中，相同的标号表示相同或类似的组件或方法流程。
[0025]必须了解的是，使用于本说明书中的“包含”、“包括”等词，是用于表示存在特定的技术特征、数值、方法步骤、作业处理、组件和/或组件，但并不排除可加上更多的技术特征、数值、方法步骤、作业处理、组件、组件，或以上的任意组合。
[0026]本专利技术中使用如“第一”、“第二”、“第三”等词是用来修饰权利要求中的组件，并非用来表示之间具有优先权顺序，先行关系，或者是一个组件先于另一个组件，或者是执行方法步骤时的时间先后顺序，仅用来区别具有相同名字的组件。
[0027]必须了解的是，当组件描述为“连接”或“耦接”至另一组件时，可以是直接连结、或
耦接至其他组件，可能出现中间组件。相反地，当组件描述为“直接连接”或“直接耦接”至另一组件时，其中不存在任何中间组件。用于描述组件之间关系的其他词语也可以类似方式解读，例如“介于”相对于“直接介于”，或者“邻接”相对于“直接邻接”等等。
[0028]为了克服图像辨识算法的缺点，本专利技术的实施例提出以深度学习为基础的舌诊方法，分为三个阶段：训练阶段、验证阶段和实时判断阶段。参考图1，在训练阶段，训练装置110接收多个包含舌头的图像120(又可称为训练图像)，以及每个图像在多个类型项目上的卷标。虽然图1的图像120是灰阶图片，但这只是作为示例说明，所属
人员可输入高分辨率的全彩图像作为训练的来源。类型项目可包含“舌色”、“舌型”、“苔色”、“舌苔”、“津液”、“齿痕舌”、“朱点”、“瘀点”及“裂纹舌”。的工程师可操作训练装置110的人机界面(Man Mach本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于深度学习的远端舌诊方法，由平板计算机的处理单元执行，其特征在于，所述基于深度学习的舌诊方法包含：通过网络从客户端装置接收看病请求和看病信息，所述看病信息包含拍摄照片；将所述拍摄照片输入多个局部侦测卷积神经网络以获取关联于所述拍摄照片中的舌头的多个类型的分类结果，其中，所述多个局部侦测卷积神经网络的数目等于所述多个类型的数目，所述每个局部侦测卷积神经网络只用于产生所述一个类型的分类结果；在显示屏上显示远程舌诊应用程序的画面，其中，所述画面包含所述多个类型的分类结果；获取相应于所述多个类型的分类结果的医嘱；以及通过所述网络回复所述医嘱给所述客户端装置。2.如权利要求1所述的基于深度学习的远端舌诊方法，其特征在于，相应于第i类的所述局部侦测卷积神经网络的产生包含以下步骤：依据多个训练图像的第i类的标签针对所述多个训练图像进行多次的卷积运算和池化运算以产生多个卷积层、多个池化层和多个关联权重；将所述多个卷积层、所述多个池化层和所述多个关联权重平化展开以产生相应于所述第i类的待验证局部侦测卷积神经网络；依据所述待验证局部侦测卷积神经网对多个验证图像的所述第i类的分类结果判断所述待验证局部侦测卷积神经网是否通过验证；以及当所述待验证局部侦测卷积神经网通过验证时，产生相应于所述第i类的所述局部侦测卷积神经网络。3.如权利要求1所述的基于深度学习的远端舌诊方法，其特征在于，所述医嘱的内容包含预约挂号系统的链接。4.如权利要求1所述的基于深度学习的远端舌诊方法，其特征在于，所述看病信息包含QR码，所述方法包含：根据所述QR码搜索药方数据库以获取药方；以及更新所述显示屏上的所述远程舌诊应用程序的所述画面，其中，所述画面包含所述药方。5.一种计算机可读取存储介质，用于存储能够被处理单元执行的程序代码，其特征在于，所述程序代码被所述处理单元执行时实现如权利要求1至4中任一项所述的基于深度学习的远端舌诊方法。6.一种基于深度学习的远端舌诊装置，其特征在...
【专利技术属性】
技术研发人员：顏士净，陈文鋕，邱显栋，叶士诚，林钰锦，李宸绫，
申请(专利权)人：东华大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。