一种图像处理方法技术

本申请公开了一种图像处理方法，包括：获取待处理的图像；提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，存储检索到的所有图片；在待处理图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户；接收用户选择的人物区域，并将选择的人物区域从所述待处理图像中删除；在所述删除后的待处理图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与所述设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到所述待处理图像被删除的区域中，形成处理后的图像。应用本申请，能够简单高效地在照片中去除不相关的内容。

An image processing method

【技术实现步骤摘要】
一种图像处理方法
本申请涉及人工智能领域的技术，特别涉及一种图像处理方法。
技术介绍
目前，随着人们生活水平的提高，外出旅行成为越来越多人的选择。在旅行过程中，大家都希望能用相机记录下难忘的时刻。但是，通常在拍照的过程中，可能会拍到原本计划外的内容，例如，在著名景点，游人众多，拍照时难免会拍到除目标人物之外的其他人。这种情况下，大家都希望能够对拍照的图像进行处理，去除无关人等的部分，并将背景补充完整。针对上述需求，在申请号为201711070941.2、专利技术名称为《一种基于超像素投票模型的照片多余物体去除方法》的专利技术专利申请中，公开了一种去除照片中多余物体的方法。在该方案中，通过拍摄多张同一地点同一角度的照片对比合成，得到一张去除运动物体后的照片。但是这种方式对于拍摄者及被拍摄者要求都较高，需要拍摄者维持拍摄角度的稳定，被拍摄者也需要保持相同姿势不变，只有同时满足这两个要求才能得到一张完美的合成图片。另外，在申请号为201910015933.0、专利技术名称为《一种基于视频获取纯景致背景的目标人物照片的方法》的专利技术专利申请中，也公开了一种基于视屏去除图像中无关人物从而获取到只包含目标人物照片的方法。在该方案中，通过拍摄一段视频，采用前后帧之间进行比对的方法，去除视频中运动的物体，最后得到一张只包含目标人物的照片。但是该方案存在的问题在于：如果在拍摄过程中拍摄者无法保持手部稳定，或者被拍摄者前后动作有变化也会被识别为动态的物体。所以在拍摄过程中也需要被拍摄者保持同一动作不变，否则就有能导致最后得到的照片不理想。
技术实现思路
本申请提供一种图像处理方法，能够简单高效地在照片中去除不相关的内容。为实现上述目的，本申请采用如下技术方案：一种图像处理方法，包括：获取待处理的图像；提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，存储检索到的所有图片；在所述待处理图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户；接收用户选择的人物区域，并将选择的人物区域从所述待处理图像中删除；在所述删除后的待处理图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与所述设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到所述待处理图像被删除的区域中，形成处理后的图像。较佳地，在识别出若干人物区域和非人物区域后、对人物区域进行区分标记前，该方法进一步包括：将所述图像进行灰度化和二值化处理。较佳地，所述不同的人物区域为：每连续的一片人物区域作为同一个人物区域，不连续的人物区域作为不同的人物区域。较佳地，所述预先建立的图片库为根据全球知名景点的3D全景地图库。较佳地，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片包括：根据所述待处理图像的拍摄地点、拍摄方位和/或背景特征，在所述3D全景地图库中检索图片。较佳地，在获取所述待处理图像时，获取所述待处理图像的拍摄地点的经纬度坐标信息。一种图像处理装置，包括：检索单元、存储单元、接口单元、图像修复单元；所述检索单元，用于获取待处理的图像，提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，将检索到的所有图片存储到所述存储单元中；所述图像修复单元，用于在所述图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并通过所述接口单元展示给用户；还用于通过所述接口单元接收用户选择的人物区域，并将选择的人物区域从所述待处理图像中删除；在删除后的所述待处理图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与所述设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到所述待处理图像被删除的区域中，形成处理后的图像。由上述技术方案可见，本申请中，获取待处理的图像；提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，存储检索到的所有图片；在图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户；接收用户选择的人物区域，并将选择的人物区域从所述图像中删除；在图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到图像中被删除的区域中，形成处理后的图像。通过上述方式，能够从图片库或网上找到与待替换的区域匹配的图像内容，从而替换原始图像中的部分区域，简单高效地在照片中去除不相关的内容。附图说明图1为本申请中图像处理方法的基本流程示意图；图2为本申请中图像处理装置的结构示意图。具体实施方式为了使本申请的目的、技术手段和优点更加清楚明白，以下结合附图对本申请做进一步详细说明。图1为本申请中图像处理方法的基本流程示意图，如图1所示，该方法包括：步骤101，获取待处理的图像。获取的图像可以是由用户终端上传到处理服务器上，或者，也可以是在终端本地处理。步骤102，提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与非人物区域具有设定相似程度的图片。预先设定好符合要求的相似程度，然后，在图片库或网上检索满足设定相似程度的图片。具体地，可以预先建立3D全景地图库作为图片库，利用全景图生成背景照片，用于与非人物区域进行比较。在具体进行检索时，可以根据待处理图像的拍摄地点、拍摄方位和/或背景特征，在3D全景地图库中检索图片。其中，三维全景地图可以定期更新和维护。另外，在步骤101中获取待处理图像时，还可以进一步获取拍摄地点的经纬度坐标信息，以方便在3D全景地图库检索相似的背景照片。例如，可以提示用户将经纬度坐标信息上传到处理服务器中。步骤103，存储检索到的所有图片。步骤104，在待处理图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户。其中，优选地，可以在识别出若干人物区域和非人物区域后、对人物区域进行区分标记前，进一步将待处理图像进行灰度化和二值化处理，以方便后续进行匹配的操作。在进行人物区域划分时，优选地，可以将每连续的一片人物区域作为同一个人物区域，不连续的人物区域作为不同的人物区域。当然，也可以按照其他规则进行人物区域划分，本申请对此不作限定。在对人物区域进行区分标记时，为不同的人物区域采用不同标记。步骤105，接收用户选择的人物区域，并将选择的人物区域从待处理图像中删除。用户选择需要移除的人物区域，处理器将用户选择的区域从图像中删除。步骤106，在删除部分区域后的图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与设定区域内的图像内容最匹配的区域。在步骤102检索出的本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取待处理的图像；/n提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，存储检索到的所有图片；/n在所述待处理图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户；/n接收用户选择的人物区域，并将选择的人物区域从所述待处理图像中删除；/n在所述删除后的待处理图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与所述设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到所述待处理图像被删除的区域中，形成处理后的图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取待处理的图像；
提取图像背景中的非人物区域，从预先建立的图片库或互联网上检索与所述非人物区域具有设定相似程度的图片，存储检索到的所有图片；
在所述待处理图像中通过卷积神经网络识别出若干人物区域和非人物区域，对不同的人物区域进行区分标记，并展示给用户；
接收用户选择的人物区域，并将选择的人物区域从所述待处理图像中删除；
在所述删除后的待处理图像中，提取删除区域周围设定区域内的图像内容，从存储的所有图片中选择与所述设定区域内的图像内容最匹配的区域，将选择出的区域图像填充到所述待处理图像被删除的区域中，形成处理后的图像。


2.根据权利要求1所述的方法，其特征在于，在识别出若干人物区域和非人物区域后、对人物区域进行区分标记前，该方法进一步包括：将所述图像进行灰度化和二值化处理。


3.根据权利要求1所述的方法，其特征在于，所述不同的人物区域为：每连续的一片人物区域作为同一个人物区域，不连续的人物区域作为不同的人物区域。


4.根据权利要求1所述的方法，其特征在于，所述预先建立的图片库为根据全球知名景点的3D全景地图库。

【专利技术属性】
技术研发人员：刘磊，王明豪，杨宇辰，宁蒙昌，唐裕伟，王建辉，
申请(专利权)人：三星电子中国研发中心，三星电子株式会社，
类型：发明
国别省市：江苏;32