影像传送方法及影像显示方法技术

本发明专利技术公开了一种影像传送方法及影像显示方法，在包括处理器和存储有能够借由所述处理器执行的指令的内存的影像传送装置中，借由所述指令执行的方法包括如下步骤：接收视频；从所述输入的视频中识别对象；生成所述识别的对象的元数据；使用所述生成的元数据来计算所述识别的对象的分数；在所述分数超过基准值的情况下，将所述识别的对象选择为主要对象；传送针对所述选择的主要对象的所述元数据；传送在所述视频中包括所述主要对象的影像帧以及从所述影像帧裁剪的最佳照片中的一个。从所述影像帧裁剪的最佳照片中的一个。从所述影像帧裁剪的最佳照片中的一个。

【技术实现步骤摘要】
影像传送方法及影像显示方法


[0001]本专利技术涉及一种监控系统，更具体而言，涉及一种用于在从输入的影像中识别的对象中选择代表所识别的对象的主要对象并检索、显示所选择的主要对象的装置及方法。

技术介绍

[0002]可分析对象的CCTV在收集影像数据时，除了影像数据之外，还具有在所述影像数据内提取通过对象识别而获得的元数据的功能。这种元数据用于用户检索影像数据，也在触发(trigger)事件并通过应用程序产生警报时使用。
[0003]然而，现有的对象识别技术针对多个视频应用统一的标准，因此被识别的对象的数量庞大，用户由此难以监控满足特定条件的对象或执行详细的检索。
[0004]鉴于此，提出了将庞大的视频压缩为少量的影像的视频摘要(videosynopsis)技术，或在视频内剪切最能表现特定对象的部分图像而提供的所谓最佳照片(best shot)技术。
[0005]但是，这种最佳照片技术在摄像装置中生成与所述最佳照片相对应的部分图像并与所述后端装置的要求无关地提供，因此，在生成多种后端装置的所述最佳照片中，不能反映后端装置的要求。此外，在摄像装置的配置不充分的情况下，还存在由于生成所述最佳照片的计算负担而导致摄像装置的基本性能下降的问题。

技术实现思路

[0006]本专利技术所要实现的技术问题是，能够根据后端请求或资源条件来可变地确定选择主要对象的标准，或选择要传送的元数据集，或在影像帧及最佳照片中选择要传送的对象。
[0007]此外，本专利技术所要实现的另一技术问题是，能够根据用户的检索命令而基于所述元数据、视频帧及所述传送的最佳照片来执行直观且快速的检索。
[0008]根据用于实现上述的技术问题的本专利技术的一实施例的影像传送方法，作为在包括处理器和存储有能够借由所述处理器执行的指令的内存的影像传送装置中借由所述指令执行的方法，所述方法包括如下步骤：接收视频；从所述输入的视频中识别对象；生成所述识别的对象的元数据；使用所述生成的元数据来计算所述识别的对象的分数；在所述分数超过基准值的情况下，将所述识别的对象选择为主要对象；传送针对所述选择的主要对象的所述元数据；以及传送在所述视频中包括有所述主要对象的影像帧以及从所述影像帧裁剪的最佳照片中的一个。
[0009]根据用于实现所述技术课题的本专利技术的另一实施例的影像显示方法，作为在包括处理器和存储有能够借由所述处理器执行的指令的内存的影像接收装置中借由所述指令执行的方法，所述包括如下步骤：在通过网络与所述影像接收装置连接的影像传送装置中接收针对所选择的主要对象的元数据；在所述影像传送装置获取的视频中接收包括有所述主要对象的影像帧或从所述影像帧裁剪的最佳照片中的一个；在接收到包括有所述主要对象的影像帧的情况下，利用针对所述主要对象的元数据来在所述影像帧内裁剪所述主要对
象占据的部分图像，从而生成最佳照片；以及在画面上显示所述接收到的最佳照片及所述裁剪的最佳照片中的至少一个。
[0010]根据本专利技术，在影像传送装置中选择主要对象时，通过可变地反映影像传送装置的当前资源和/或影像接收装置的请求事项，可以选择最适合于当前情况的主要对象，并确定要传送到影像接收装置的元数据及影像条件。
[0011]并且，根据本专利技术，由于影像传送装置可以传送针对所述主要对象的元数据和包含所述主要对象的影像帧，并且可以在影像接收装置中进行最佳照片的裁剪，因此可以减少在诸如低配置摄像机之类的影像传送装置中的计算负担。
[0012]此外，根据本专利技术，由于影像接收装置能够接收针对主要对象的元数据及包括主要对象的影像帧本身，因此在根据用户检索条件检索主要对象时，不仅可以考虑所述主要对象本身的属性，还可以考虑所述主要对象所处的状况来执行检索。
附图说明
[0013]图1是示出根据本专利技术的一实施例的影像监控系统的构成的图。
[0014]图2是示出根据本专利技术的一实施例的影像传送装置的构成的图。
[0015]图3是根据本专利技术的一实施例的包括有对象的影像帧的示例。
[0016]图4是示出根据本专利技术的一实施例的影像接收装置的构成的图。
[0017]图5是在影像接收装置的画面上显示的所述图形用户界面的示例。
[0018]图6是示例出实现影像传送装置及影像接收装置的计算装置的硬件构成的图。
[0019]图7a及图7b是示出在影像传送装置中选择并传送包括主要对象的影像帧和最佳照片中的一个的场景的图。
[0020]图8a及图8b是示出在影像传送装置中选择包括主要对象的影像帧和最佳照片中的一个并在多种元数据集中也选择一个的场景的图。
[0021]图9a及图9b是示出在没有选择过程的情况下在影像传送装置中传送包括主要对象的影像帧和/或元数据集的场景的图。
[0022]图10是示意性地示出在根据本专利技术的一实施例的影像监控系统中执行的影像监控方法的流程图。
具体实施方式
[0023]图1是示出根据本专利技术的一实施例的影像监控系统1的构成的图。根据图1，所述系统1包括多个网络摄像装置50：50A、50B、50C及多种种类的影像接收装置200：200A、200B、200C，所述装置相互之间可以通过诸如互联网、内联网之类的网络10来连接。
[0024]所述摄像装置50可以是布置于特定场所的固定位置的拍摄用电子装置，也可以是能够沿着预定路径自动或手动进行移动的拍摄用电子装置，还可以是能够借由人或机器人等进行移动的拍摄用电子装置。摄像装置50可以是连接到有线/无线互联网来使用的IP摄像机。摄像装置50可以是具有平移(pan)、倾斜(tilt)及缩放(zoom)功能的PTZ摄像机。摄像装置50可以具有对监控区域进行录像或拍摄照片的功能。摄像装置50可以具有对在监控区域中产生的声音进行录音的功能。在监控的区域中发生移动或声音等变化的情况下，摄像装置50可以具有对此产生通知、录像或拍摄照片的功能。
[0025]此外，所述网络10可以包括诸如局域网(LAN：Local Area Networks)、广域网(WAN：Wide Area Network)、城域网(MAN：Metropolitan AreaNetworks)、综合业务数字网(ISDN：Integrated Service Digital Networks)等的有线网络，或诸如无线局域网、码分多址(CDMA)、蓝牙、卫星通信等的无线网络。
[0026]影像接收装置200可以是接收并存储通过摄像装置50拍摄的影像本身和/或通过编辑相应影像而获得的影像的装置。影像接收装置200可以分析所述接收的影像而对应于接收的用途。例如，影像接收装置200可以利用对象检测算法来检测影像中的对象。所述对象检测算法可以应用基于人工智能(AI)的算法，并且可以应用预先学习的人工神经网络模型来检测对象。
[0027]此外，影像接收装置200可以分析接收到的影像而生成元数据和针对该元数据的索引信息。影像接收装置200可以同时或单独分析包括在接收到本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种影像传送方法，作为在包括处理器和存储有能够借由所述处理器执行的指令的内存的影像传送装置中借由所述指令执行的方法，所述方法包括如下步骤：接收视频；从输入的所述视频中识别对象；生成所述识别的对象的元数据；使用所述生成的元数据来计算所述识别的对象的分数；在所述分数超过基准值的情况下，将所述识别的对象选择为主要对象；传送针对所述选择的主要对象的所述元数据；以及传送在所述视频中包括有所述主要对象的影像帧以及从所述影像帧裁剪的最佳照片中的一个。2.根据权利要求1所述的影像传送方法，其中，识别所述对象的步骤包括如下步骤：通过运动感测或人工智能学习来识别所述对象。3.根据权利要求1所述的影像传送方法，其中，所述主要对象按彼此不同的所识别的对象进行选择，所述元数据包括用于识别所述主要对象的共性的标识符。4.根据权利要求1所述的影像传送方法，其中，所述影像帧是包括在所述视频中的关键帧，所述关键帧是即使不参照其他影像帧也能够复原的帧。5.根据权利要求1所述的影像传送方法，其中，用于计算所述分数的元数据包括多个元数据，所述分数计算为将所述多个元数据分别乘以各自的加权值后相加而获得的加权和。6.根据权利要求1所述的影像传送方法，其中，所述多个元数据包括对象的概率、对象的种类、对象的属性、对象的子属性、对象的出现时间、对象的尺寸及位置中的...

【专利技术属性】
技术研发人员：林廷恩，许鎭旭，卢承仁，
申请(专利权)人：韩华泰科株式会社，
类型：发明
国别省市：