基于图像和文本的多模态果蔬叶片病害识别方法及系统技术方案

技术编号:40465551 阅读:20 留言:0更新日期:2024-02-22 23:19
本发明专利技术涉及植物病害识别技术领域,尤其涉及基于图像和文本的多模态果蔬叶片病害识别方法及系统,该方法的步骤包括:获取叶片病害图像和文本信息,文本信息包括时间信息、地理位置信息、环境信息和用户输入的文本描述信息;对文本信息进行预处理,预处理包括缺失值填充和降噪;通过卷积神经网络提取叶片病害图像中的病斑特征信息并获取生长阶段信息;对文本信息和生长阶段信息进行文本特征分析,提取文本特征信息;对病斑特征信息和文本特征信息进行融合,输出病害识别结果。本发明专利技术通过对图像信息和文本信息进行多模态融合并对缺失的文本信息进行有效填充,提高了病害识别的可靠性和准确率。

【技术实现步骤摘要】

所属的技术人员知道,本专利技术可以实现为系统、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:可以是完全的硬件、也可以是完全的软件(包括固件、驻留软件、微代码等),还可以是硬件和软件结合的形式,本文一般称为“电路”、“模块”或“系统”。此外,在一些实施例中,本专利技术还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式,该计算机可读介质中包含计算机可读的程序代码。可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram),只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行本文档来自技高网...

【技术保护点】

1.基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,包括下述步骤:

2.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述文本信息与叶片病害图像为一对一映射关系,其中,时间信息为获取叶片病害图像的时间信息,地理位置信息为获取叶片病害图像的地理位置信息,环境信息为获取叶片病害图像的环境信息,用户输入的文本描述信息以叶片病害图像为描述对象。

3.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述环境信息包括气象信息和土壤信息,其中,气象信息包括天气类型、温度信息、湿度信息、日照时长信息和降水量信息,土...

【技术特征摘要】

1.基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,包括下述步骤:

2.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述文本信息与叶片病害图像为一对一映射关系,其中,时间信息为获取叶片病害图像的时间信息,地理位置信息为获取叶片病害图像的地理位置信息,环境信息为获取叶片病害图像的环境信息,用户输入的文本描述信息以叶片病害图像为描述对象。

3.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述环境信息包括气象信息和土壤信息,其中,气象信息包括天气类型、温度信息、湿度信息、日照时长信息和降水量信息,土壤信息包括土壤温度信息和土壤湿度信息。

4.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述文本描述信息包括果蔬种类、种植时间、病斑颜色和病斑面积占叶片面积的比例。

5.根据权利要求1所述的基于图像和文本的多模态果蔬叶片病害识别方法,其特征在于,所述生长阶段信息通过文本信息中的时间信息与用户输入的文本描述信息中的种植时间作差获取,生长阶段信息包括萌芽阶段、幼苗阶段、生长阶段和成熟...

【专利技术属性】
技术研发人员:熊小飞王鑫磊王汉军熊欣瑶熊甜黎彦军黎利华
申请(专利权)人:汉中中园农业科技发展集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1