自然场景图片生成方法技术

本发明专利技术提供了一种自然场景图片生成方法，包括：根据图片中不同视觉元素或者不同图层之间的依赖关系，基于Hawkes过程建立自然场景生成模型；其中，所述自然场景生成模型包括：异步层生成网络和对抗生成网络；所述异步层生成网络用于生成标签序列；所述对抗生成网络用于根据所述标签序列生成对应的图层，并将生成的图层进行叠加处理后得到合成的自然场景图片；通过所述自然场景生成模型生成合成的自然场景图片。本发明专利技术中的方法充分考虑了图片中视觉元素的景深上的结构，使得生成的自然场景图片更加真实清晰。

Natural scene image generation method

The invention provides a method for generating natural scene pictures, which includes: establishing a natural scene generation model based on Hawkes process according to the dependencies between different visual elements or different layers in a picture; wherein the natural scene generation model includes: an asynchronous layer generation network and a confrontation generation network; and the asynchronous layer generation network; Layer generation network is used to generate a tag sequence; the confrontation generation network is used to generate a corresponding layer according to the tag sequence, and the generated layer is superimposed to obtain a composite natural scene picture; and the composite natural scene picture is generated by the natural scene generation model. The method of the invention fully considers the structure of the depth of field of the visual elements in the picture, and makes the natural scene picture generated more true and clear.

【技术实现步骤摘要】
自然场景图片生成方法
本专利技术涉及图像处理
，具体地，涉及自然场景图片生成方法。
技术介绍
自动生成自然场景图片是计算机视觉技术中一个非常重要的环节，而自然场景图片生成的主要难点在于如何很好地组织各视觉元素的空间布局。例如山、河、路、海等视觉元素之间在空间上的布局。视觉元素之间的空间关系通常是指在图像平面上的邻近信息和在景深方向上的顺序信息。例如在自然场景图片中，海和天空经常在图像中彼此邻近，河流通常更靠近观察者而山脉的景深位置则相河流对更远。因此，如何更好的编码各视觉元素在空间中的位置是生成逼真自然场景的关键。目前，虽然基于马尔可夫随机场的方法能够对二维空间内各元素的构图进行建模，但是现有的方法中仍然缺少在景深方向上对个视觉元素间高阶依赖关系建模的系统性方法。但是，在景深方向上各视觉元素的高阶依赖关系对于整张图片的合理性是十分重要的。这是因为，物体间的关系不仅仅体现在与其相邻的两层，即某一图层中的元素不仅仅依赖于和它相邻的两图层中的元素，还与这张图像整体的景深结构有关。例如，沙漠在场景远处，一些高大的树在画面中间而河流是距离观察者最近的元素，在这样的场景中如果只考虑相邻的元本文档来自技高网...

【技术保护点】
1.一种自然场景图片生成方法，其特征在于，包括：根据图片中不同视觉元素或者不同图层之间的依赖关系，基于Hawkes过程建立自然场景生成模型；其中，所述自然场景生成模型包括：异步层生成网络和对抗生成网络；所述异步层生成网络用于生成标签序列；所述对抗生成网络用于根据所述标签序列生成对应的图层，并将生成的图层进行叠加处理后得到合成的自然场景图片；通过所述自然场景生成模型生成合成的自然场景图片。

【技术特征摘要】
1.一种自然场景图片生成方法，其特征在于，包括：根据图片中不同视觉元素或者不同图层之间的依赖关系，基于Hawkes过程建立自然场景生成模型；其中，所述自然场景生成模型包括：异步层生成网络和对抗生成网络；所述异步层生成网络用于生成标签序列；所述对抗生成网络用于根据所述标签序列生成对应的图层，并将生成的图层进行叠加处理后得到合成的自然场景图片；通过所述自然场景生成模型生成合成的自然场景图片。2.根据权利要求1所述的自然场景图片生成方法，其特征在于，在通过所述自然场景生成模型生成合成的自然场景图片之前，还包括：获取自然场景图片训练集，所述自然场景图片训练集中的自然场景图片是指经过人工标注视觉元素且按照景深方向进行图片分层处理后的图片，自然场景图片训练集中的每张自然场景图片对应一个标签序列，所述标签序列是指按照景深方向排序的图层的类别信息和景深信息景深；将所述标签序列中的图层，以及该图层对应的类别信息和景深信息作为自然场景生成模型的输入，以使所述自然场景生成模型中建立不同视觉元素、不同图层之间的依赖关系，并得到目标图层序列；根据所述目标图层序列合成自然场景图片。3.根据权利要求2所述的自然场景图片生成方法，其特征在于，在根据所述目标图层序列合成自然场景图片之后，还包括：在所述自然场景生成模型的训练过程中，通过对抗生成网络中的判别器对自然场景生成模型合成的自然场景图片进行判别，若判别器判断所述合成自然场景图片不是真实图片，则对所述...

【专利技术属性】
技术研发人员：倪冰冰，张文冬，徐奕，杨小康，
申请(专利权)人：上海交通大学，
类型：发明
国别省市：上海,31