一种违法建筑识别方法、装置、设备及存储介质制造方法及图纸

本申请公开了一种违法建筑识别方法、装置、设备及存储介质，涉及云计算领域。具体实现方案为：获取目标图像，以及目标图像关联的参考图像；分别提取目标图像的目标建筑特征，以及参考图像的参考建筑特征；根据目标建筑特征和参考建筑特征，确定目标图像的违建识别结果。本申请实施例通过获取与目标图像关联的参考图像，进行目标图像和参考图像的绑定，并对绑定后的图像进行特征提取，从而基于参考图像的建筑特征对目标图像进行违建识别，实现了违法建筑的自动识别，并减少了违法建筑识别过程的数据处理量；同时，基于孪生思想对目标图像和参考图像进行建筑特征提取，进而根据提取的建筑特征进行违建识别，提高了识别结果的准确度。

【技术实现步骤摘要】
一种违法建筑识别方法、装置、设备及存储介质
本申请涉及图像处理技术，尤其涉及云计算领域，具体涉及一种违法建筑识别方法、装置、设备及存储介质。
技术介绍
在城市建设中，违法建筑成为破坏城市容貌重点关注对象，同时，违法建筑也对人们的生命安全带来比较大的威胁。现有技术中，通常通过城管部门选件的方式进行违法建筑检测。然而，上述方式需要投入大量的人力成本，同时人为检查的方式效率较低，容易发生遗漏的情况。
技术实现思路
本申请实施例提供了一种违法建筑识别方法、装置、设备及存储介质，以实现违法建筑的自动识别，降低识别成本，提高识别效率。第一方面，本申请实施例提供了一种违法建筑识别方法，包括：获取目标图像，以及所述目标图像关联的参考图像；分别提取所述目标图像的目标建筑特征，以及所述参考图像的参考建筑特征；根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果。本申请通过获取目标图像以及目标图像关联的参考图像；分别提取目标图像的目标建筑特征以及参考图像的参考建筑特征；根据目标建筑特征和参考建筑特征，确定目标图像的违建识别结果。上述技术方案通过获取与目标图像关联的参考图像，进行目标图像和参考图像的绑定，并对绑定后的图像进行特征提取，从而基于参考图像的建筑特征对目标图像进行违建识别，实现了违法建筑的自动识别，并减少了违法建筑识别过程的数据处理量；同时，基于siamese(孪生)思想对目标图像和参考图像进行建筑特征提取，进而根据提取的建筑特征进行违建识别，提高了识别结果的准确度。可选的，所述目标图像和所述参考图像的采集位置的距离差值小于设定距离阈值，和/或所述目标图像和所述参考图像的采集角度的角度差值小于设定角度阈值。上述申请中的一个可选实施方式，通过将目标图像和参考图像的采集位置的距离差值，和/或采集角度的角度差值进行限定，从而实现目标图像和参考图像的绑定，避免了基于多个参考图像对目标图像进行违建识别的情况，减少了数据运算量。可选的，分别提取目标图像的目标建筑特征，以及与所述目标图像关联的参考图像的参考建筑特征，包括：分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征；在设定的至少两个尺度下，分别对所述目标基础特征和所述参考基础特征进行特征提取，得到所述至少两个尺度下的所述目标建筑特征和所述参考建筑特征。上述申请中的一个可选实施方式，通过将建筑特征提取过程细化为进行基础特征的提取，并对基础特征在至少两个尺度下进一步进行特征提取，从而能够得到图像在不同尺度下的细节特征，进而基于至少两个尺度下的建筑特征进行违法建筑识别，提高了识别结果的准确度。可选的，根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果，包括：将每一尺度下的所述目标建筑特征和所述参考建筑特征，进行特征融合；根据至少两个尺度下的特征融合结果，确定所述目标图像的违建识别结果。上述申请中的一个可选实施方式，通过将违建识别结果确定过程，细化为将每个尺度下的建筑特征进行融合，并根据至少两个尺度下的特征内容和结果进行违建识别，从而完善了多尺度下的违法建制识别机制。可选的，将每一尺度下的所述目标建筑特征和所述参考建筑特征，进行特征融合，包括：将每一尺度下的所述目标建筑特征和所述参考建筑特征做差，并将差值作为该尺度下的特征融合结果。上述申请中各一个可选实施方式，通过将特征融合过程，细化为将每一尺度下的目标建筑特征和参考建筑特征的差值作为特征融合结果，完善了特征融合机制。可选的，分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征，包括：基于深度残差网络，分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征。上述申请中的一个可选实施方式，通过将基础特征提取过程，细化为基于深度残差网络进行基础特征提取，完善了特征提取方式，同时提高了特征提取结果的准确度。可选的，在提取所述参考图像的参考建筑特征之前，所述方法还包括：根据所述目标图像，对所述参考图像进行坐标变换；其中，所述坐标变换包括收缩变换、拉伸变换、旋转变换和平移变换中的至少一种。上述申请中的一种可选实施方式，通过在对参考图像进行特征提取之前，根据目标图像对参考图像进行收缩、拉伸、旋转和平移变换中的至少一种，使得变换后的图像与目标图像坐标匹配，从而为违建识别结果的准确度提供了保障。可选的，根据所述目标图像，对所述参考图像进行坐标变换，包括：分别提取所述目标图像的目标关键点和目标描述子，以及所述参考图像的参考关键点和参考描述子；根据所述目标描述子和所述参考描述子，对所述目标关键点和所述参考关键点进行匹配操作；根据匹配结果，确定变换矩阵，并根据所述变换矩阵对所述参考图像进行坐标变换。上述申请中的一个可选实施方式，通过将对参考图像进行坐标变化的过程，细化为对目标图像和参考图像进行关键点和描述子的提取，并根据目标图像和参考图像的描述子的匹配情况进行关键点匹配，从而根据关键点匹配结果确定变换矩阵，进而根据确定的变换矩阵进行参考图像的坐标变化，完善了对参考图像进行坐标变换的处理机制，从而为违建识别结果的准确度提供了保障。可选的，确定所述目标图像的违建识别结果，包括：确定所述目标图像中是否包括违建区域；若所述目标图像中包括违建区域，则确定所述违建区域的位置坐标。上述申请中的一个可选实施方式，通过将违建识别结果确定过程，细化为对目标图像中的建筑区域进行二分类，并在建筑区域包括违建区域时，对违建区域的位置坐标进行检测，丰富了违建识别结果的内容。第二方面，本申请实施例还提供了一种违法建筑识别装置，包括：图像获取模块，用于获取目标图像，以及所述目标图像关联的参考图像；建筑特征提取模块，用于分别提取所述目标图像的目标建筑特征，以及所述参考图像的参考建筑特征；识别结果确定模块，用于根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果。第三方面，本申请实施例还提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如第一方面实施例所提供的一种违法建筑识别方法。第四方面，本申请实施例还提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行第一方面实施例所提供的一种违法建筑识别方法。上述可选方式所具有的其他效果将在下文中结合具体实施例加以说明。附图说明附图用于更好地理解本方案，不构成对本申请的限定。其中：图1是本申请实施例一中的一种违法建筑识别方法的流程图；...

【技术保护点】
1.一种违法建筑识别方法，其特征在于，包括：/n获取目标图像，以及所述目标图像关联的参考图像；/n分别提取所述目标图像的目标建筑特征，以及所述参考图像的参考建筑特征；/n根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果。/n

【技术特征摘要】
1.一种违法建筑识别方法，其特征在于，包括：
获取目标图像，以及所述目标图像关联的参考图像；
分别提取所述目标图像的目标建筑特征，以及所述参考图像的参考建筑特征；
根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果。


2.根据权利要求1所述的方法，其特征在于，所述目标图像和所述参考图像的采集位置的距离差值小于设定距离阈值，和/或所述目标图像和所述参考图像的采集角度的角度差值小于设定角度阈值。


3.根据权利要求1所述的方法，其特征在于，分别提取目标图像的目标建筑特征，以及与所述目标图像关联的参考图像的参考建筑特征，包括：
分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征；
在设定的至少两个尺度下，分别对所述目标基础特征和所述参考基础特征进行特征提取，得到所述至少两个尺度下的所述目标建筑特征和所述参考建筑特征。


4.根据权利要求3所述的方法，其特征在于，根据所述目标建筑特征和所述参考建筑特征，确定所述目标图像的违建识别结果，包括：
将每一尺度下的所述目标建筑特征和所述参考建筑特征，进行特征融合；
根据至少两个尺度下的特征融合结果，确定所述目标图像的违建识别结果。


5.根据权利要求4所述的方法，其特征在于，将每一尺度下的所述目标建筑特征和所述参考建筑特征，进行特征融合，包括：
将每一尺度下的所述目标建筑特征和所述参考建筑特征做差，并将差值作为该尺度下的特征融合结果。


6.根据权利要求3所述的方法，其特征在于，分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征，包括：
基于深度残差网络，分别提取所述目标图像的目标基础特征，以及与所述目标图像关联的所述参考图像的参考基础特征。


7.根据权利要求1-6任一项所述的方法，其特征在于，在提取所述参考图像的参考建筑特征之前，所述方法还包括：
根据所述目标图像，对所述参考图像进行坐标变换；
其中，所述坐标变换包括收缩变换、拉伸变换、旋转变换和平移变换中的至少一种。


8.根据权利要求7所述的方法，其特征在于，根据所述目标图像，对所述参考图像进行坐标变换，包括：
分别提取所述目标图像的目标关键点和目标描述子，以及所述参考图像的参考关键点和参考描述子；
根据所述目标描述子和所述参考描述子，对所述目标关键点和所述参考关键点进行匹配操作；
根据匹配结果，确定变换矩阵，并根据所述变换矩阵对所述参考图像进行坐标变换。


9.根据权利要求1所述的方法，其特征在于，确定所述目标图像的违建识别结果，包括：
确定所述目标图像中是否包括违建区域；
若所述目标图像中包括违建区域，则确定所述违建区域的位置坐标。


10.一种违法建筑识别装置，其特征在于，包括：
图像获取模块，用于获取目标图像，以及所述目标图像关联的参考图像；
建筑特征提取模块，用于分别提取所述目标图像的目标建筑特征，以及所述参考图像的参考建筑特征；
识别结果确定模块，用于根据所述目标建筑特征和所述参考建筑特征...

【专利技术属性】
技术研发人员：王冠皓，叶芷，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京;11