本发明专利技术公开了一种基于空间结构的前景图像分割方法、装置、设备、介质，其中，方法包括：通过多张拍摄图像构建出目标三维模型；从目标三维模型中获取观测视角所对应的观测图像，从观测图像中确定候选区域；将候选区域反投影至三维空间得到各自对应的模型提取视椎，将多个模型提取视椎进行交运算确定目标区域；基于目标区域对待分割目标前景的目标图像进行渲染得到渲染图像，根据渲染图像确定目标图像的目标像素，将目标像素的集合确定为目标前景的图像。根据本实施例的技术方案，能够获取目标区域以表征目标前景的三维结构，再基于目标前景的三维结构从空间中对目标图像的目标前景进行分割，能够有效提高目标前景的分割效率。能够有效提高目标前景的分割效率。能够有效提高目标前景的分割效率。
【技术实现步骤摘要】
基于空间结构的前景图像分割方法、装置、设备、介质
[0001]本申请涉及3D建模
，具体涉及一种基于空间结构的前景图像分割方法、装置、设备、介质。
技术介绍
[0002]图像分割旨在将图像的内容根据某种一致性分割成多个区域，例如根据语义一致性对图像的前景和背景进行分割。目前,图像分割的主要方法是在2D图像上依据像素之间的相似性关系进行分割，这就导致图像分割的准确性非常依赖于对像素相似性的定义，当需要对一系列相关图像进行前景分割，例如对同一个场景下从多个角度进行拍摄得到的图像进行分割时，图像之间的相关性信息也不容易挖掘，像素相似性的定义非常困难，前景分割的准确性得不到保障。
技术实现思路
[0003]本申请实施例提供一种基于空间结构的前景图像分割方法、装置、设备、介质，至少能保证，本申请方案能够在三维空间对图像进行分割，通过图像的三维空间结构确定目标前景的区域，能够简单有效地对前景图像进行分割。
[0004]第一方面，本申请实施例提供了一种基于空间结构的前景图像分割方法，所述方法包括：
[0005]通过多张拍摄图像构建出目标三维模型，所述拍摄图像包括目标前景，所述目标三维模型包括各张所述拍摄图像的所述目标前景的三维投影；
[0006]获取多个预设的观测视角，从所述目标三维模型中获取各个所述观测视角所对应的观测图像，从各个所述观测图像中确定候选区域，所述候选区域用于指示所述目标前景在对应的所述观测图像的投影；
[0007]将各个所述候选区域反投影至三维空间得到各自对应的模型提取视椎，将多个所述模型提取视椎进行交运算得到的空间区域确定为目标区域；
[0008]获取待分割目标前景的目标图像，基于所述目标区域对所述目标图像进行渲染得到渲染图像，根据所述渲染图像确定所述目标图像的目标像素，将所述目标像素的集合确定为所述目标前景的图像。
[0009]根据本专利技术的一些实施例，所述从各个所述观测图像中确定候选区域，包括：
[0010]获取所述观测图像中的框选边框，所述框选边框用于框选所述目标前景在所述观测图像中的投影；
[0011]将所述框选边框所对应的区域确定为所述候选区域。
[0012]根据本专利技术的一些实施例，所述目标三维模型为辐射场模型，所述通过多张拍摄图像构建出目标三维模型，包括：
[0013]根据多张所述拍摄图像构建出辐射场，其中，所述辐射场的每个辐射场像素沿辐射场观测方向的颜色积分是根据所述辐射场像素的不透明度确定的；
[0014]将所述辐射场中不透明度大于预设的不透明度阈值的区域所组成的几何结构确定为所述辐射场模型。
[0015]根据本专利技术的一些实施例，所述基于所述目标区域对所述目标图像进行渲染得到渲染图像，包括：
[0016]确定所述目标图像在所述辐射场模型的目标观测方向；
[0017]基于所述目标观测方向，确定所述目标图像的每个图像像素在所述辐射场模型的颜色积分的路径；
[0018]将所述颜色积分的路径与所述目标区域相交的所述图像像素确定为渲染像素，将所述渲染像素的集合确定为所述渲染图像。
[0019]根据本专利技术的一些实施例，所述根据所述渲染图像确定所述目标图像的目标像素，包括：
[0020]根据每个所述渲染像素的像素参数值确定所述渲染图像所对应的分割掩码；
[0021]根据所述分割掩码确定所述目标图像的所述目标像素。
[0022]根据本专利技术的一些实施例，所述将多个所述模型提取视椎进行交运算得到的空间区域确定为目标区域，包括：
[0023]当将多个所述模型提取视椎进行交运算得到多个空间区域，根据预设的膨胀参数对多个所述空间区域进行膨胀；
[0024]对膨胀后的多个所述空间区域进行连通运算，将连通运算得到的连通区域确定为所述目标区域。
[0025]根据本专利技术的一些实施例，所述将连通运算得到的连通区域确定为所述目标区域，包括：
[0026]当所述连通区域内包括孤立区域，将所述孤立区域从所述连通区域中删除；
[0027]将删除所述孤立区域后得到的所述连通区域确定为所述目标区域。
[0028]第二方面，本申请实施例提供了一种基于空间结构的前景图像分割装置，包括至少一个控制处理器和用于与所述至少一个控制处理器通信连接的存储器；所述存储器存储有可被所述至少一个控制处理器执行的指令，所述指令被所述至少一个控制处理器执行，以使所述至少一个控制处理器能够执行如第一方面所述的基于空间结构的前景图像分割方法。
[0029]第三方面，本申请实施例提供了一种电子设备，包括第二方面所述的基于空间结构的前景图像分割装置。
[0030]第四方面，本申请实施例提供了一种计算机可读存储介质，存储有计算机可执行指令，计算机可执行指令用于执行如第一方面所述的基于空间结构的前景图像分割方法。
[0031]本申请至少具有以下有益效果：通过多张拍摄图像构建出目标三维模型，所述拍摄图像包括目标前景，所述目标三维模型包括各张所述拍摄图像的所述目标前景的三维投影；获取多个预设的观测视角，从所述目标三维模型中获取各个所述观测视角所对应的观测图像，从各个所述观测图像中确定候选区域，所述候选区域用于指示所述目标前景在对应的所述观测图像的投影；将各个所述候选区域反投影至三维空间得到各自对应的模型提取视椎，将多个所述模型提取视椎进行交运算得到的空间区域确定为目标区域；获取待分割目标前景的目标图像，基于所述目标区域对所述目标图像进行渲染得到渲染图像，根据
所述渲染图像确定所述目标图像的目标像素，将所述目标像素的集合确定为所述目标前景的图像。根据本实施例的技术方案，能够在通过目标三维模型获取目标区域以表征目标前景的三维结构，再基于目标前景的三维结构从空间中对目标图像分割出目标前景，能够有效提高目标前景的分割效率。
附图说明
[0032]图1为本申请一实施例提出的基于空间结构的前景图像分割方法的流程图；
[0033]图2为本申请另一实施例提出的基于空间结构的前景图像分割方法中，通过框选边框确定候选区域的流程图；
[0034]图3为本申请另一实施例提出的基于空间结构的前景图像分割方法中，构建辐射场模型的流程图；
[0035]图4为本申请另一实施例提出的基于空间结构的前景图像分割方法中，进行图像渲染的流程图；
[0036]图5为本申请另一实施例提出的基于空间结构的前景图像分割方法中，通过分割掩码实现前景分割的流程图；
[0037]图6为本申请另一实施例提出的基于空间结构的前景图像分割方法中，对空间区域进行膨胀腐蚀的流程图；
[0038]图7为本申请另一实施例提出的基于空间结构的前景图像分割方法中，删除空间区域的孤立区域的流程图；
[0039]图8为本申请另一实施例提出的基于空间结构的前景图像分割装置的结构图。
具体实施方式
[0040]为了使本申请的目的、技术方案及优点更加清楚明白，本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于空间结构的前景图像分割方法，其特征在于，所述方法包括：通过多张拍摄图像构建出目标三维模型，所述拍摄图像包括目标前景，所述目标三维模型包括各张所述拍摄图像的所述目标前景的三维投影；获取多个预设的观测视角，从所述目标三维模型中获取各个所述观测视角所对应的观测图像，从各个所述观测图像中确定候选区域，所述候选区域用于指示所述目标前景在对应的所述观测图像的投影；将各个所述候选区域反投影至三维空间得到各自对应的模型提取视椎，将多个所述模型提取视椎进行交运算得到的空间区域确定为目标区域；获取待分割目标前景的目标图像，基于所述目标区域对所述目标图像进行渲染得到渲染图像，根据所述渲染图像确定所述目标图像的目标像素，将所述目标像素的集合确定为所述目标前景的图像。2.根据权利要求1所述的基于空间结构的前景图像分割方法，其特征在于，所述从各个所述观测图像中确定候选区域，包括：获取所述观测图像中的框选边框，所述框选边框用于框选所述目标前景在所述观测图像中的投影；将所述框选边框所对应的区域确定为所述候选区域。3.根据权利要求1所述的基于空间结构的前景图像分割方法，其特征在于，所述目标三维模型为辐射场模型，所述通过多张拍摄图像构建出目标三维模型，包括：根据多张所述拍摄图像构建出辐射场，其中，所述辐射场的每个辐射场像素沿辐射场观测方向的颜色积分是根据所述辐射场像素的不透明度确定的；将所述辐射场中不透明度大于预设的不透明度阈值的区域所组成的几何结构确定为所述辐射场模型。4.根据权利要求3所述的基于空间结构的前景图像分割方法，其特征在于，所述基于所述目标区域对所述目标图像进行渲染得到渲染图像，包括：确定所述目标图像在所述辐射场模型的目标观测方向；基于所述目标观测方向，确定所述目标图像的每个图像像素在所...
【专利技术属性】
技术研发人员：徐亚波，陈倩影，
申请(专利权)人：广东横琴全域空间人工智能有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。