一种基于计算机视觉的舌诊分析方法及系统技术方案

本发明专利技术公开了一种基于计算机视觉的舌诊分析方法及系统，可应用于智能健康咨询服务、基层医疗辅助诊断、中医教育培训、中医知识普及、远程医疗支持、中医科研辅助、健康管理平台等场景。本发明专利技术的基于计算机视觉的舌诊分析方法及系统，通过对输入的舌象图像进行舌体实例分割和特征分类，获得各项特征的分类结果并将各项特征的分类结果组合成一个特征向量，在规则哈希表中未查询到相应的特征向量时，将特征向量转化为自然语言描述后，利用基于RAG的LLM模型生成所述特征向量对应的舌诊分析结果，能够有效解决LLM在进行舌诊分析时存在的知识局限和幻觉问题，使LLM能够提供专业、准确且具有可解释性的进行舌诊分析结果。

【技术实现步骤摘要】

本专利技术涉及人工智能，尤其涉及一种基于计算机视觉的舌诊分析方法及系统。

技术介绍

1、舌诊是中医诊断的重要手段之一，通过观察舌质、舌苔的颜色、形态等特征，可以推断人体内部脏腑功能状态。近年来，随着人工智能和自然语言处理(nlp)技术的迅速发展，在海量语料库上训练的大型语言模型(llm)被应用于越来越多的场景，llm也常常被应用于医疗场景下进行舌诊分析。虽然诸如gpt、claude等通用大模型通常具备强大的上下文感知和语言理解能力，但缺乏对中医知识的有效掌握，因此，无法提供符合中医理论体系的准确舌诊分析结果。此外，llm在生成舌诊分析结果过程中还容易产生幻觉问题，即生成看似合理却不符合中医理论和临床事实的内容。

2、综上所述，llm在进行舌诊分析时存在知识局限和幻觉问题，从而导致无法提供专业、准确且具有可解释性的舌诊分析结果。

技术实现思路

1、本专利技术所要解决的技术问题在于提供一种基于计算机视觉的舌诊分析方法及系统，用以解决llm在进行舌诊分析时存在的知识局限和幻觉问题，使llm能够提供专业、本文档来自技高网...

【技术保护点】

1.一种基于计算机视觉的舌诊分析方法，其特征在于，包括如下步骤：

2.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于，所述将特征向量转化为自然语言描述后，利用基于RAG的LLM模型生成所述特征向量对应的舌诊分析结果，包括：

3.如权利要求2所述的基于计算机视觉的舌诊分析方法，其特征在于，所述中医知识图谱的构建方法，包括如下步骤：

4.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于，所述利用训练好的舌体分割网络，对预处理后的舌象图像进行舌体实例分割，包括：

5.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于...

【技术特征摘要】

1.一种基于计算机视觉的舌诊分析方法，其特征在于，包括如下步骤：

2.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于，所述将特征向量转化为自然语言描述后，利用基于rag的llm模型生成所述特征向量对应的舌诊分析结果，包括：

3.如权利要求2所述的基于计算机视觉的舌诊分析方法，其特征在于，所述中医知识图谱的构建方法，包括如下步骤：

4.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于，所述利用训练好的舌体分割网络，对预处理后的舌象图像进行舌体实例分割，包括：

5.如权利要求1所述的基于计算机视觉的舌诊分析方法，其特征在于，所述将分割后的舌体图像输入到各个特征分类网络中，得到各项特征的分类结果，并将各...

【专利技术属性】
技术研发人员：沈博琛，林煌博，陈伟松，
申请(专利权)人：广东省心能驿站科技有限公司，
类型：发明
国别省市：