移动增强现实视频编辑系统技术方案

提供一种移动增强现实视频编辑系统，其包括：真实图像输入部分，其被配置为通过图像传感器接收真实图像；空间识别器，其被配置为分别识别真实图像内的空间和地面；对象提取与显示部分，其被配置为在真实图像中提取与显示对象；编辑工具显示部分，其被配置为向用户显示视频编辑工具；视频处理器，其被配置为在真实图像中删除提取与显示的对象之中由用户为删除所触摸的对象，并且通过用在相邻空间中的相同高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线；以及屏幕显示部分，其被配置为显示由视频处理器校正的真实图像。

Mobile augmented reality video editing system

【技术实现步骤摘要】
移动增强现实视频编辑系统
本专利技术涉及一种用于实现增强现实的系统，更具体地，涉及一种移动增强现实视频编辑系统。
技术介绍
随着移动市场的振兴以及诸如计算机视觉、传感器和视频处理等技术的发展，增强现实技术和虚拟现实技术在被改进，并且采用这些技术的应用程序的分布在加速。另外，随着计算机的数据处理速率的提高，基于机器学习的产品和各种软件逐渐蔓延，因此基于图像识别的产品和服务项目正在大量制作。然而，现有的增强现实技术是通过拍摄实际环境的图片、将虚拟空间覆盖在该图片上以及然后将虚拟对象合成到对应的空间中来实现。换句话说，由于替换图像叠加在真实空间的拍摄图像上，因此需要高级技能来编辑拍摄的特定对象或形状，并且编辑花费很长时间。此外，在某些情况下，色度键(chroma-key)处理等需要额外的设备。另外，当编辑增强现实视频时，工作者要忍受在视频中选择要编辑的对象或形状以及重复诸如尺寸调整和边界设置的操作的不便。因此，需要一种新的移动型视频编辑工具或技术，其旨在消除编辑增强现实视频的低效率，使得即使非视频编辑专家也可以方便快速地获取他或她想要的视频。(相关技术文献)(专利文献)(专利文献1)韩国未审查专利公开No.10-2013-0107404。(专利文献2)韩国专利No.10-1788046。
技术实现思路
1.技术问题本专利技术的技术目的是提供一种移动增强现实视频编辑系统，其甚至使非视频编辑专家能够方便快速地在移动设备上编辑他或她想要的视频。本专利技术的另一个技术目的是提供一种移动增强现实视频编辑系统，其在原始视频中删除对象以编辑增强现实视频时，能够通过将最佳局部视频合成到已删除对象的位置中来获得自然的对象删除视频。本专利技术的另一个技术目的是提供一种移动增强现实视频编辑系统，其自由地改变视频中对象的位置，使得该对象可以根据改变的位置而调整比例并与周围对象协调。本专利技术的另一个技术目的是提供一种移动增强现实视频编辑系统，其能够通过用三维(3D)对象替换视频中的对象来实现增强现实，该三维(3D)对象真实且客观地最佳描绘了该对象。本专利技术的另一个技术目的是提供一种移动增强现实视频编辑系统，其通过合成3D对象并按比例自动调整3D对象使得该3D对象可以与合成视频协调来实现增强现实。2.技术方案根据本专利技术的示例性实施例的移动增强现实视频编辑系统可以以应用程序(app)的形式来实现，该应用程序(app)可以在移动设备中被下载并运行，并且移动增强现实视频编辑系统包括：真实图像(realimage)输入部分，其被配置为通过图像传感器接收真实图像；空间识别器，其被配置为分别识别真实图像内的空间和地面；对象提取与显示部分，其被配置为在所述真实图像中提取与显示对象；编辑工具显示部分，其被配置为向用户显示视频编辑工具；视频处理器，其被配置为在所述真实图像中删除提取与显示的对象之中由用户为删除所触摸的对象，并且通过用与相邻空间中相同高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线；以及屏幕显示部分，其被配置为显示由视频处理器校正的真实图像。在移动增强现实视频编辑系统中，视频处理器可以从真实图像中删除提取与显示的对象之中由用户为移动所触摸的对象，通过用与相邻空间中的相同高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线，使用与为对象移动所指定的位置相对应的像素的三维(3D)坐标值来调整为移动所触摸的对象的比例，从而产生对象已经被移动的校正视频。除了上述配置之外，另一个可修改配置的移动增强现实视频编辑系统还可以包括对象储存器，其被配置为将提取与显示的对象之中由用户为储存所触摸的对象与输入文件名进行匹配并且将所述对象储存在储存器中。在这种情况下，视频处理器可以用与为对象合成所指定的位置相对应的像素的3D坐标值来调整由用户从储存器中选择的对象的比例，将选中对象合成到真实图像中，从而产生对象已经被合到其中的校正视频。作为另一个可修改的实施例，上述移动增强现实视频编辑系统还可以包括：对象发送器，其被配置为经由通信网络而将提取与显示的对象之中由用户为增强现实所触摸的对象发送到互操作的外部设备；服务服务器(serviceserver)，其被配置为将为增强现实所触摸的对象的特征点与机器学习对象数据库(DB)进行比较，从机器学习对象DB读取与所述对象具有最高一致率的代表性3D对象，并且将代表性3D对象发送到视频处理器。在移动增强现实视频编辑系统中，视频处理器通过将代表性3D对象合成到真实图像中来产生校正视频，所述校正视频的比例已经根据为增强现实所触摸的对象的比例值来相对于屏幕进行调整。另外，视频处理器可以根据来自视频编辑工具的用户命令而产生校正视频，所述校正视频中3D对象的大小、位置和颜色已经被调整。3.有益效果根据上述技术方案，本专利技术使得通过简单操纵而方便快速地编辑从移动设备获取的真实图像成为可能。此外，本专利技术可以使在从移动设备获取的真实图像中编辑对象时可以从边缘部分感觉到的差异感或不自然感最小化。另外，本专利技术在从移动设备获取的真实图像中自动识别对象之中由用户选择的对象的特征，并用标准化、授权或逼真的代表性3D对象替换该对象，从而可以以新形式获得增强现实视频。此外，当使用根据本专利技术的示例性实施例的系统时，可以获得将标准化代表性3D对象插入到真实图像中的视频。因此，可以体验在仅实际存在于真实空间中的对象被自动识别和重新改造时而被感觉到的存在感、3D效果和真实感。另外，可以根据代表性3D对象的特征获得最真实、美观或精彩的编辑视频。附图说明图1示出了根据本专利技术的示例性实施例的移动增强现实视频编辑系统的配置的示例；图2示出了图1的安装在移动设备上的用户端移动增强现实视频编辑系统的框图的示例；图3是根据本专利技术的示例性实施例的编辑移动增强现实视频的流程图；图4示出了根据本专利技术的示例性实施例的分别识别地面和空间的流程图的示例；图5A和5B示出了根据本专利技术的示例性实施例的真实图像的示例；图6A和6B示出了针对对象删除之前的场景与对象删除之后的场景之间的比较的示例视图；图7A和7B示出了针对对象移动之前的场景与对象移动之后的场景之间的比较的示例视图；以及图8A和8B示出了针对对象合成处理之前的场景与对象合成处理之后的场景之间的比较的示例视图。具体实施方式在下文中，将参考附图来详细描述本专利技术的示例性实施例。当与本专利技术相关的已知功能或元件可能不必要地模糊本专利技术的主旨时，将省略其详细描述。图1示出了根据本专利技术的示例性实施例的移动增强现实视频编辑系统的配置的示例。根据本专利技术的示例性实施例的移动增强现实视频编辑系统可以被分为用户端移动增强现实视频编辑系统100和服务服务器端移动增强现实视频编辑系统200，用户端移动增强现实视频编辑系统100可以在用户的移本文档来自技高网...

【技术保护点】
1.一种移动增强现实视频编辑系统，包括：/n真实图像输入部分，其被配置为通过图像传感器接收真实图像；/n空间识别器，其被配置为分别识别所述真实图像内的空间和地面；/n对象提取与显示部分，其被配置为在所述真实图像中提取与显示对象；/n编辑工具显示部分，其被配置为向用户显示视频编辑工具；/n视频处理器，其被配置为：在所述真实图像中删除提取与显示的对象之中由所述用户为删除所触摸的对象，以及通过用与相邻空间中的水平线的高度相同的高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线；以及/n屏幕显示部分，其被配置为显示由所述视频处理器校正的所述真实图像。/n

【技术特征摘要】
20181212 KR 10-2018-01601891.一种移动增强现实视频编辑系统，包括：
真实图像输入部分，其被配置为通过图像传感器接收真实图像；
空间识别器，其被配置为分别识别所述真实图像内的空间和地面；
对象提取与显示部分，其被配置为在所述真实图像中提取与显示对象；
编辑工具显示部分，其被配置为向用户显示视频编辑工具；
视频处理器，其被配置为：在所述真实图像中删除提取与显示的对象之中由所述用户为删除所触摸的对象，以及通过用与相邻空间中的水平线的高度相同的高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线；以及
屏幕显示部分，其被配置为显示由所述视频处理器校正的所述真实图像。


2.根据权利要求1所述的移动增强现实视频编辑系统，
其中，所述视频处理器从所述真实图像中删除所述提取与显示的对象之中由所述用户为移动所触摸的对象，通过用与相邻空间中的水平线的像素值相同的高度的像素值代替构成删除对象的区域的水平线中的每个水平线来校正构成删除对象的区域的水平线，使用与为对象移动所指定的位置相对应的像素的三维3D坐标值来调整为移动所触摸的对象的比例，从而产生对象已经被移动的校正视频。


3.根据权利要求1所述的移动增强现实视频编辑系统，
还包括对象储存器，其被配置为将所述提取与显示的对象之中由所述用户为储存所触摸的对象与输入文件名进行匹配并且将对象储存在储存器中，
其中，所述视频处理器用与为对象合成所指定的位置相对应的像素的3D坐标值来调整由所述用户从所述储存器中选择的对象的比例，将选中对象合成到所述真实图像中，从而产生对象已经被合到其中...

【专利技术属性】
技术研发人员：李俊昊，高弘植，李正煜，梁尹楹，朴相娟，李世允，
申请(专利权)人：株式会社海思力迪，
类型：发明
国别省市：韩国;KR