一种3D小行星动态图的生成方法、装置及便携式终端制造方法及图纸

本发明专利技术提供了一种3D小行星动态图的生成方法、装置及便携式终端。所述方法包括：获取全景图像；对全景图像识别并分割成天空区域、人体区域和地面区域；针对天空区域、人体区域和地面区域计算全景深度图；将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；生成虚拟视点下的小行星视图；渲染生成3D小行星动态图。本发明专利技术技术方案通过自动生成虚拟视点下的小行星视图并合成渲染，实现了将一幅全景图像生成有3D效果的小行星动态图。

A Method, Device and Portable Terminal for Generating 3D Asteroid Dynamic Map

【技术实现步骤摘要】
一种3D小行星动态图的生成方法、装置及便携式终端
本专利技术属于图像领域，尤其涉及一种3D小行星动态图的生成方法、装置及便携式终端。
技术介绍
目前，已经有一些方法可以实现将一张图像生成具有3D效果的视图，例如采用微透镜技术来生成3D视图。微透镜的透镜为放大镜阵列，该放大镜阵列被设计成当从稍微不同的角度观察时，放大不同的图像。为了生成3D视图，首先需要生成多视点图像，例如12视点或更多视点图像，接着将多视点图像混合成混合图像。混合多视点图像是一个从多视点图像中提取合适的像素合并成一个新图像的过程，新图像包含原始图像的多视点信息。微透镜的透镜用来在不同的视角显示这些多视点的视角，最后，透过微透镜板观看，观看者的左眼和右眼可以看到不同的图像，从而产生3D的效果，该方法的缺陷是需要借助微透镜板而不能裸眼观看。另一种常用的方法是手动将2D图像转换成多视点图像，操作者通常需要创建蒙皮从目标图像中提取对象，然后根据自己的判断给这些蒙皮确定深度信息。深度信息与原始2D图像具有同样尺寸的灰度图像，灰度图像用灰色表示图像的每个部分的深度。手动创建的深度信息用来引导计算机移动原始2D图像的像素以形成新的视点图，深度图可以产生强烈3D显示效果，但采用已有的这种方法生成3D视图需要耗时数小时甚至数天的时间。综上所述，现有的从一张图像生成3D视图的方法及系统具有需要借助工具或处理时间长等缺点，用户体验度不高。
技术实现思路
本专利技术提出一种3D小行星动态图的生成方法、装置及便携式终端，旨在通过自动生成虚拟视点下的小行星视图并合成渲染，实现将一幅全景图像生成有3D效果的小行星动态图，该方法效率高、图像质量效果好，用户体验度较高。第一方面，本专利技术提供了一种3D小行星动态图的生成方法，所述方法包括：获取全景图像；对全景图像识别并分割成天空区域、人体区域和地面区域；针对天空区域、人体区域和地面区域计算全景深度图；将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；生成虚拟视点下的小行星视图；渲染生成3D小行星动态图。第二方面，本专利技术提供了一种3D小行星动态图的生成装置，所述装置包括：获取模块，用于获取全景图像；分割模块，用于对全景图像识别并分割成天空区域、人体区域和地面区域；计算模块，用于根据所述天空区域、人体区域和地面区域计算全景深度图；变换模块，用于将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；生成模块：用于生成虚拟视点下的小行星视图；渲染模块：用于渲染生成3D小行星动态图。第三方面，本专利技术提供了一种计算机可读存储介质，所述计算机程序被处理器执行时实现如上述的一种3D小行星动态图的生成方法的步骤。第四方面，本专利技术提供了一种便携式终端，包括：一个或多个处理器；存储器；以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述处理器执行所述计算机程序时实现如上述的一种3D小行星动态图的生成方法的步骤。本专利技术技术方案通过计算图像深度图，自动生成虚拟视点下的小行星视图并合成渲染，实现了将一幅全景图像生成有3D效果的小行星动态图，不仅增强了视觉效果，还具有处理速度快等优点。附图说明图1是本专利技术实施例一提供的一种3D小行星动态图的生成方法流程图。图2是本专利技术实施例一提供的一个全景深度图示例。图3是本专利技术实施例一提供的小行星图像映射到全景图像的方法的流程图。图4是本专利技术实施例一提供的一种生成虚拟视点下的小行星视图方法的流程图。图5是本专利技术实施例二提供的一种3D小行星动态图的生成模块示意图。图6是本专利技术实施例三提供的便携式终端的结构示意图。具体实施方式为了使本专利技术的目的、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。为了说明本专利技术所述的技术方案，下面通过具体实施例来进行说明。实施例一：请参阅图1，本专利技术实施例一提供的一种3D小行星动态图的生成方法包括以下步骤：S101.获取全景图像；获取一幅全景图，所述全景图可以为由至少两个鱼眼镜头拍摄的多幅鱼眼图像经过光流拼接算法生成的一幅全景图像；全景图像的内容可以包括拍摄者举着全景相机拍摄的图片。S102.对全景图像识别并分割成天空区域、人体区域和地面区域；对全景图像内容识别出天空和人体并进行语义分割，主要分割出以下3个区域：天空区域、人体区域和地面区域；其中识别与分割天空部分可以采用经典的天空检测算法，天空检测算法不限于论文《SkyRegionDetectioninaSingleImageforAutonomousGroundRobotNavigation》和中国专利CN109003237A中公开的方法，识别与分割人体部分可以采用经典的图像目标检测算法，目标检测算法不限于《CascadeR-CNN:DelvingintoHighQualityObjectDetection》方法等；分割出天空区域和人体区域后，剩下的部分全部划分为地面区域，即地面区域可以包含高楼、房屋和树木等。S103.针对天空区域、人体区域和地面区域计算全景深度图；不同物体间的相对深度可以反映物体间的三维位置关系，物体的深度表示实际场景中物体与摄像机之间的距离，因此距离摄像机越远的物体，深度值越大，距摄像机越近的物体，深度值越小；根据所述天空区域、人体区域和地面区域计算全景深度图，方法如下：人体区域中像素(x1,y1)的深度值bodyDepth可由公式(1)计算得出：公式(1)中，y1为像素(x1,y1)在全景图像中的行坐标，x∈[minRowIdx,maxRowIdx]，minRowIdx为人体区域中像素行坐标的最小值，maxRowIdx为人体区域中像素横坐标的最大值，minBodyDepth为设定的人体区域像素深度值的最小值，maxBodyDepth为设定的人体区域像素深度值的最大值，bodyDepth∈[minBodyDepth，maxBodyDepth]；天空区域中所有像素的深度值设为固定值skyDepth，skyDepth∈(maxBodyDepth,255]；地面区域中像素(x2,y2)分为固定深度值区域和渐变深度值区域；固定深度区域的行坐标的范围为[2maxRowIdx-imgH,imgH]，其中imgH为图像的高度，即行坐标的最大值，令固定深度区域的像素的深度值为固定值maxBodyDepth；地面区域中除固定深度区域外为渐变深度值区域，渐变深度值区域中像素(x2,y2)的深度值可由公式(2)计算：公式(2)中，y2为像素(x2，y2)在全景图像中的行坐标，y2＜2maxRowIdx-imgH，edgeDepth为设定的固定值，edgeDepth∈[maxBodyDepth,skyDepth)。分别计算出人体区域深度值、天空区域深度值和地面区域深度值后，即可得全景深度图；全景深度图示例请参阅图2。S104.将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；请参阅图3，小行星图像映射到全景图像的方法如下：S1041：将小行星图像像素点从图像坐标系转换到物理坐标系；以单位球的南极点为三维坐标原点，x轴向右，y轴垂直向内，Z轴本文档来自技高网...

【技术保护点】
1.一种3D小行星动态图的生成方法，其特征在于，包括以下步骤：获取全景图像；对全景图像识别并分割成天空区域、人体区域和地面区域；针对天空区域、人体区域和地面区域计算全景深度图；将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；生成虚拟视点下的小行星视图；渲染生成3D小行星动态图。

【技术特征摘要】
1.一种3D小行星动态图的生成方法，其特征在于，包括以下步骤：获取全景图像；对全景图像识别并分割成天空区域、人体区域和地面区域；针对天空区域、人体区域和地面区域计算全景深度图；将全景图像和全景深度图分别变换生成小行星图像和小行星深度图；生成虚拟视点下的小行星视图；渲染生成3D小行星动态图。2.如权利要求1所述的一种3D小行星动态图的生成方法，其特征在于：所述的对全景图像进行识别并分割成天空区域、人体区域和地面区域具体为：识别出全景图像中的天空和人体，然后将全景图像分割出天空区域和人体区域，图像中剩余部分划分为地面区域。3.如权利要求1所述的一种3D小行星动态图的生成方法，其特征在于所述计算全景深度图具体为分别计算出所述天空区域、人体区域和地面区域的深度值；人体区域中像素(x1，y1)的深度值bodyDepth可由公式(1)计算得出：公式(1)中，y1为像素(x1,y1)在全景图像中的行坐标，x∈[minRowIdx，maxRowIdx]，minRowIdx为人体区域中像素行坐标的最小值，maxRowIdx为人体区域中像素横坐标的最大值，minBodyDepth为设定的人体区域像素深度值的最小值，maxBodyDepth为设定的人体区域像素深度值的最大值，bodyDepth∈[minBodyDepth,maxBodyDepth]；天空区域中所有像素的深度值设为固定值skyDepth，skyDepth∈(maxBodyDepth,255]；地面区域中像素(x2,y2)分为固定深度值区域和渐变深度值区域；固定深度区域的行坐标的范围为[2maxRowIdx-imgH,imgH]，其中imgH为图像的高度，即行坐标的最大值，令固定深度区域的像素的深度值为固定值maxBodyDepth；地面区域中固定深度区域外的区域为渐变深度值区域，渐变深度值区域中像素(x2，y2)的深度值可由公式(2)计算：公式(2)中，y2为像素(x2，y2)在全景图像中的行坐标，y2＜2maxRowIdx-imgH，edgeDepth为设定的固定值，edgeDepth∈[maxBodyDepth,skyDepth)。4.如权利要求1所述的一种3D小行星动态图的生成方法，其特征在于，所述生成虚拟视点下的小行星视图具体包括：设定虚拟视点坐标：小行星图像的真实视点在小行星图像的正上方，设定虚拟视点在以真实视点为中心，平行于小行星图像的单位圆形轨迹上，虚拟视点坐标(x...

【专利技术属性】
技术研发人员：高瑞东，姜文杰，朱力，
申请(专利权)人：深圳岚锋创视网络科技有限公司，
类型：发明
国别省市：广东,44