垃圾分类处理方法、装置、终端及存储介质制造方法及图纸

本发明专利技术提供一种垃圾分类处理方法，通过物品分类模型识别图像中目标物品的第一物品种类；接收第二语音信息；当第二语音信息表示第一物品种类错误时，接收用户输入的第二物品种类；查询是否存在与第二物品种类对应的已知物品种类；当不存在时，控制智能垃圾桶打开所有垃圾投放入口，并检测是否感应生成物品投放信号；当检测到信号时，将垃圾投放入口标记为目标投放入口并获取目标投放入口对应的垃圾种类；将垃圾种类和目标物品的第二物品种类关联存储至垃圾分类数据库，并更新垃圾分类模型。本发明专利技术提供一种装置、终端及计算机可读存储介质。本发明专利技术能够提高垃圾分类准确性，并对垃圾分类模型进行实时自动更新。

Garbage classification treatment method, device, terminal and storage medium

【技术实现步骤摘要】
垃圾分类处理方法、装置、终端及存储介质
本专利技术涉及智能分类
，尤其涉及一种垃圾分类处理方法、装置、终端及存储介质。
技术介绍
近年来，随着人们生活质量的提高，人们越来越关注垃圾的分类处理。垃圾的分类处理已经在国内大中型城市逐步推广。由于考虑到垃圾的分类教育普及不够等问题，在实际的垃圾分类处理过程中，通过在智能垃圾桶产品中集成物体检测算法来进行垃圾的简单分类。然而，由于垃圾的物品种类繁多，传统的物体检测算法难以有效对垃圾进行准确分类，且传统的物体检测算法较固化，无法根据实际情况自动改进判断策略。因此，有必要提出一种能够对垃圾进行精确分类且能够根据实际情况自动改进判断策略的方法。
技术实现思路
鉴于以上内容，有必要提出一种垃圾分类处理方法、垃圾分类处理装置、终端及计算机可读存储介质，能够解决实际垃圾物品种类繁多时，传统的物体检测算法难以有效对垃圾进行准确分类，且传统的物体检测算法较固化，无法根据实际情况自动改进判断策略的问题。本专利技术实施例第一方面提供一种垃圾分类处理方法，应用于智能垃圾桶，所述垃圾分类处理方法包括：获取用户的第一语音信息，并通过语音检测模型检测所述第一语音信息是否满足预设激活条件；当检测结果为所述第一语音信息满足所述预设激活条件时，采集目标物品的图像，并通过物品分类模型识别所述图像中的目标物品的第一物品种类；将所述第一物品种类通过语音提示的方式输出至用户，并接收用户输入的第二语音信息，其中，所述第二语音信息用于表示所述第一物品种类是否正确；当所述第二语音信息表示所述第一物品种类正确时，通过垃圾分类模型得到所述第一物品种类对应的垃圾种类，并控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口以供用户进行投放；当所述第二语音信息表示所述第一物品种类错误时，接收用户输入的所述目标物品的第二物品种类；根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类；当不存在与所述第二物品种类对应的已知物品种类时，控制智能垃圾桶打开所有垃圾投放入口，并检测所述垃圾投放入口是否感应生成物品投放信号；当检测到所述垃圾投放入口生成物品投放信号时，将所述垃圾投放入口标记为目标投放入口并获取所述目标投放入口对应的垃圾种类；将所述垃圾种类和目标物品的第二物品种类关联存储至所述垃圾分类数据库，并根据更新后的垃圾分类数据库更新所述垃圾分类模型。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，在所述通过物品分类模型识别所述图像中的目标物品的第一物品种类的步骤之前，所述方法还包括：计算所述图像的质量评价值；检测所述质量评价值是否满足预设质量阈值；当检测结果为所述质量评价值不满足所述预设质量阈值时，重新采集所述目标物品的图像直到重新采集的图像的质量评价值满足所述预设质量阈值；将满足所述预设质量阈值的图像中的目标区域分割出来，得到目标图像；对所述目标图像进行后处理，所述后处理包括以下中的一种或多种：白平衡处理、均衡化处理。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，所述根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类的步骤包括：将所述第二物品种类输入至预先训练好的名称相似度获取模型中，得到关于所述第二物品种类的近义词集；检测所述近义词集中是否存在目标近义词与所述垃圾分类数据库中已知物品种类的物品种类名称一致；当检测结果为所述近义词集中存在目标近义词与所述垃圾分类数据库中已知物品种类的物品种类名称一致时，确定存在与所述第二物品种类对应的已知物品种类。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，所述方法还包括：当检测结果为存在与所述第二物品种类对应的已知物品种类时，将所述已知物品种类输入至垃圾分类模型中，得到所述目标物品对应的垃圾种类；控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口；检测所述垃圾投放入口是否感应生成物品投放信号；当检测到所述垃圾投放入口生成物品投放信号时，控制所述智能垃圾桶关闭所述垃圾投放入口。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，所述方法还包括：当所述第二语音信息表示所述第一物品种类错误时，将第一物品种类识别错误的图像及对应的第二物品种类存储至所述垃圾分类数据库中；计算预设时间段内存储的图像的数量；判断所述数量是否超出预设数量阈值；当判断结果为所述数量超出所述预设数量阈值时，将存储的图像及对应的第二物品种类作为新的训练数据集，并基于所述新的训练数据集更新所述物品分类模型。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，在所述通过语音检测模型检测所述第一语音信息是否满足预设激活条件的步骤之前，所述方法还包括：计算所述第一语音信息的清晰度；判断所述第一语音信息的清晰度是否超出预设清晰度阈值；当所述第一语音信息的清晰度没有超出所述预设清晰度阈值时，重新获取用户的第一语音信息。进一步地，在本专利技术实施例提供的上述垃圾分类处理方法中，所述物品分类模型的训练方法包括：爬取不同物品种类的多张物品图像得到原始数据集；将所述原始数据集分为训练集与验证集；将所述训练集输入至预设深度学习模型中进行训练，得到物品分类模型；将所述验证集输入至物品分类模型中进行验证，得到验证通过率；检测所述验证通过率是否超过预设通过率阈值；当检测结果为所述验证通过率超过预设通过率阈值时，确定物品分类模型训练完成。本专利技术实施例第二方面还提供一种垃圾分类处理装置，应用于智能垃圾桶，所述垃圾分类处理装置包括：条件检测模块，用于获取用户的第一语音信息，并通过语音检测模型检测所述第一语音信息是否满足预设激活条件；种类确定模块，用于当检测结果为所述第一语音信息满足所述预设激活条件时，采集目标物品的图像，并通过物品分类模型识别所述图像中的目标物品的第一物品种类；信息确认模块，用于将所述第一物品种类通过语音提示的方式输出至用户，并接收用户输入的第二语音信息，其中，所述第二语音信息用于表示所述第一物品种类是否正确；垃圾投放模块，用于当所述第二语音信息表示所述第一物品种类正确时，通过垃圾分类模型得到所述第一物品种类对应的垃圾种类，并控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口以供用户进行投放；种类接收模块，用于当所述第二语音信息表示所述第一物品种类错误时，接收用户输入的所述目标物品的第二物品种类；种类检测模块，用于根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类；入口打开模块，用于当不存在与所述第二物品种类对应的已知物品种类时，控制智能垃圾桶打开所有垃圾投放入口，并检测所述垃圾投放入口是否感应生成物品投放信号；类别确定本文档来自技高网...

【技术保护点】
1.一种垃圾分类处理方法，应用于智能垃圾桶，其特征在于，所述垃圾分类处理方法包括：/n获取用户的第一语音信息，并通过语音检测模型检测所述第一语音信息是否满足预设激活条件；/n当检测结果为所述第一语音信息满足所述预设激活条件时，采集目标物品的图像，并通过物品分类模型识别所述图像中的目标物品的第一物品种类；/n将所述第一物品种类通过语音提示的方式输出至用户，并接收用户输入的第二语音信息，其中，所述第二语音信息用于表示所述第一物品种类是否正确；/n当所述第二语音信息表示所述第一物品种类正确时，通过垃圾分类模型得到所述第一物品种类对应的垃圾种类，并控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口以供用户进行投放；/n当所述第二语音信息表示所述第一物品种类错误时，接收用户输入的所述目标物品的第二物品种类；/n根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类；/n当不存在与所述第二物品种类对应的已知物品种类时，控制智能垃圾桶打开所有垃圾投放入口，并检测所述垃圾投放入口是否感应生成物品投放信号；/n当检测到所述垃圾投放入口生成物品投放信号时，将所述垃圾投放入口标记为目标投放入口并获取所述目标投放入口对应的垃圾种类；/n将所述垃圾种类和目标物品的第二物品种类关联存储至所述垃圾分类数据库，并根据更新后的垃圾分类数据库更新所述垃圾分类模型。/n...

【技术特征摘要】
1.一种垃圾分类处理方法，应用于智能垃圾桶，其特征在于，所述垃圾分类处理方法包括：
获取用户的第一语音信息，并通过语音检测模型检测所述第一语音信息是否满足预设激活条件；
当检测结果为所述第一语音信息满足所述预设激活条件时，采集目标物品的图像，并通过物品分类模型识别所述图像中的目标物品的第一物品种类；
将所述第一物品种类通过语音提示的方式输出至用户，并接收用户输入的第二语音信息，其中，所述第二语音信息用于表示所述第一物品种类是否正确；
当所述第二语音信息表示所述第一物品种类正确时，通过垃圾分类模型得到所述第一物品种类对应的垃圾种类，并控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口以供用户进行投放；
当所述第二语音信息表示所述第一物品种类错误时，接收用户输入的所述目标物品的第二物品种类；
根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类；
当不存在与所述第二物品种类对应的已知物品种类时，控制智能垃圾桶打开所有垃圾投放入口，并检测所述垃圾投放入口是否感应生成物品投放信号；
当检测到所述垃圾投放入口生成物品投放信号时，将所述垃圾投放入口标记为目标投放入口并获取所述目标投放入口对应的垃圾种类；
将所述垃圾种类和目标物品的第二物品种类关联存储至所述垃圾分类数据库，并根据更新后的垃圾分类数据库更新所述垃圾分类模型。


2.根据权利要求1所述的垃圾分类处理方法，其特征在于，在所述通过物品分类模型识别所述图像中的目标物品的第一物品种类的步骤之前，所述方法还包括：
计算所述图像的质量评价值；
检测所述质量评价值是否满足预设质量阈值；
当检测结果为所述质量评价值不满足所述预设质量阈值时，重新采集所述目标物品的图像直到重新采集的图像的质量评价值满足所述预设质量阈值；
将满足所述预设质量阈值的图像中的目标区域分割出来，得到目标图像；
对所述目标图像进行后处理，所述后处理包括以下中的一种或多种：白平衡处理、均衡化处理。


3.根据权利要求1所述的垃圾分类处理方法，其特征在于，所述根据所述第二物品种类遍历垃圾分类数据库，查询是否存在与所述第二物品种类对应的已知物品种类的步骤包括：
将所述第二物品种类输入至预先训练好的名称相似度获取模型中，得到关于所述第二物品种类的近义词集；
检测所述近义词集中是否存在目标近义词与所述垃圾分类数据库中已知物品种类的物品种类名称一致；
当检测结果为所述近义词集中存在目标近义词与所述垃圾分类数据库中已知物品种类的物品种类名称一致时，确定存在与所述第二物品种类对应的已知物品种类。


4.根据权利要求1所述的垃圾分类处理方法，其特征在于，所述方法还包括：
当存在与所述第二物品种类对应的已知物品种类时，将所述已知物品种类输入至垃圾分类模型中，得到所述目标物品对应的垃圾种类；
控制所述智能垃圾桶打开与所述垃圾种类对应的垃圾投放入口以供用户进行投放。


5.根据权利要求1所述的垃圾分类处理方法，其特征在于，所述方法还包括：
当所述第二语音信息表示所述第一物品种类错误时，将第一物品种类识别错误的图像及对应的第二物品种类存储至所述垃圾分类数据库中；<...

【专利技术属性】
技术研发人员：田金戈，徐国强，
申请(专利权)人：深圳壹账通智能科技有限公司，
类型：发明
国别省市：广东;44