抑制多个影像/声音数据对于多个显示系统设备的同步偏差。具备：编码数据调整部(312)或影像声音数据调整部(314)，其基于预定的帧调整指示进行以下的帧调整，即在时间序列的多个帧数据中插入预定的帧数据，或者从多个帧数据中删除一部分帧数据；影像声音数据输出部(315)，其依次输出进行了帧调整的各帧数据；以及影像声音数据输出时刻调整部(316)，其将用于分别输出各帧数据的基准时刻与分别输出了各帧数据的输出时刻进行比较，影像声音数据输出时刻调整部(316)在输出时刻比基准时刻提前了阈值以上时，进行插入预定的帧数据的帧调整指示，在输出时刻比基准时刻延迟了阈值以上时，进行删除一部分帧数据的帧调整指示。进行删除一部分帧数据的帧调整指示。进行删除一部分帧数据的帧调整指示。
【技术实现步骤摘要】
【国外来华专利技术】同步控制装置、同步控制方法以及同步控制程序
[0001]本专利技术涉及对影像/声音数据进行同步控制的技术。
技术介绍
[0002]在企业领域，存在多个监视据点汇集化的倾向，远程对多个监视据点进行影像监视的远程影像监视技术的需要正在扩大。例如，迫切期望一种远程影像监视系统，实现能够在一个据点监视多个机场的航空管制、能够统一监视机场大厅、火车站、体育场的公共空间监视、能够远程监视泥石流、海啸、水库的防灾监视。
[0003]该远程影像监视系统为了不仅对多个监视据点进行综合监视，而且还有效掌握各个监视据点的宽广监视区域的状况，例如为了迅速实现防恐对策的强化、大规模自然灾害的预防，具有实时地向监视侧传送高清晰且宽视角的影像的功能。
[0004]例如，据点侧的远程影像监视装置从多个摄像系统设备分别接收多个摄像机影像(影像/声音数据)，对接收到的多个影像/声音数据进行合成，使用MMT(MPEG Media Transport媒体传输)协议经由IP网络向监视侧的远程影像监视装置同步传送合成后的全景影像的影像/声音数据以及从影像数据中检测出的对象信息。
[0005]另外，监视侧的远程影像监视装置在接收到全景影像的影像/声音数据以及对象信息之后，将接收到的影像/声音数据分别向多个显示系统设备(多屏幕)同步输出，并且将接收到的目标对象信息与影像/声音数据同步地分别输出到该多个显示系统设备。
[0006]在这样的远程影像监视系统中，在IP网络的传输区间使用NTP(Network Time Protocol：网络时间协议)，因此能够确保影像/声音数据与对象信息的同步控制(非专利文献1)。
[0007]现有技术文献
[0008]非专利文献
[0009]非专利文献1：
“デジタル
放送
における
MMT
によるメディアトランスポート
方式”、標準規格、ARIB STD
‑
B60、1.13版、一般社団法人電波産業会、2018年10月
技术实现思路
[0010]专利技术要解决的课题
[0011]然而，在监视侧的远程影像监视装置与多个显示系统设备之间存在如下课题：难以完全同步控制从该监视侧的远程影像监视装置输出的多个影像/声音数据。
[0012]具体而言，如图8所示，监视侧的远程影像监视装置B所具备的多个输出用设备(输出用电路板)分别以独自的内部时钟进行动作。因此，多个影像/声音数据的输出时间间隔产生偏差，针对多个显示系统设备的提示时刻也产生偏差，产生在该多个显示系统设备中无法保证影像/声音数据同步再生的影响。最初即使是同步的影像/声音数据，也会累积小的偏差，经过长时间后会使得整体偏差变大。例如，在由内部时钟的偏差造成的影响是每1秒为10μsec的情况下，当再生帧速率为60fps的影像时，约每1667秒(≈28分钟)产生1帧的
偏差。
[0013]本专利技术是鉴于上述情况而做出的，其目的在于抑制影像/声音数据对于多个显示系统设备的同步偏差。
[0014]用于解决课题的手段
[0015]为了解决上述课题，本专利技术的同步控制装置对多个数据进行同步，所述数据是影像数据、声音数据、或影像及声音数据，同步控制装置具备：帧数据取得部，其从所述数据取得时间序列的多个帧数据；数据调整部，其基于预定的帧调整指示进行以下的帧调整，即对所述多个帧数据插入预定的帧数据，或者从所述多个帧数据删除一部分帧数据；数据输出部，其依次输出进行了所述帧调整的各帧数据；以及数据输出时刻调整部，其将用于分别输出所述各帧数据的基准时刻与分别输出了所述各帧数据的输出时刻进行比较，所述数据输出时刻调整部在所述输出时刻比所述基准时刻提前了阈值以上时，进行插入所述预定帧数据的所述帧调整指示，在所述输出时刻比所述基准时刻延迟了阈值以上时，进行删除所述一部分帧数据的所述帧调整指示。
[0016]在所述同步控制装置中，将所述各帧数据进行了编码，所述数据调整部判定所述各帧数据的种类，在所述预定的帧调整指示是帧数据插入指示时，插入全帧，在所述预定的帧调整指示是帧数据删除指示时，删除全帧前一个的差分帧。
[0017]另外，本专利技术的同步控制方法是由对多个数据进行同步的同步控制装置进行的同步控制方法，所述数据是影像数据、声音数据、或影像以及声音数据，所述同步控制方法进行以下步骤：从所述数据取得时间序列的多个帧数据的第一步骤；基于预定的帧调整指示进行以下帧调整的第二步骤，即向所述多个帧数据插入预定的帧数据，或者从所述多个帧数据删除一部分帧数据；依次输出进行了所述帧调整的各帧数据的第三步骤；以及将用于分别输出所述各帧数据的基准时刻与分别输出了所述各帧数据的输出时刻进行比较的第四步骤，在所述第四步骤中，在所述输出时刻比所述基准时刻提前了阈值以上时，进行插入所述预定的帧数据的所述帧调整指示，在所述输出时刻比所述基准时刻延迟了阈值以上时，进行删除所述一部分帧数据的所述帧调整指示。
[0018]另外，本专利技术的同步控制程序使计算机执行所述同步控制方法。
[0019]专利技术效果
[0020]根据本专利技术，能够将影像/声音数据对于多个显示系统设备的同步偏差抑制为最小限度。
附图说明
[0021]图1表示远程影像监视系统的结构例。
[0022]图2表示解码装置的结构例。
[0023]图3表示通过编码帧进行的同步控制处理流程。
[0024]图4表示插入处理后的帧数据的图像。
[0025]图5表示删除处理后的帧数据的图像。
[0026]图6表示通过影像帧进行的同步控制处理流程。
[0027]图7表示插入处理后的帧数据的图像。
[0028]图8表示课题的图像。
具体实施方式
[0029]以下，使用附图对用于实施本专利技术的一个实施方式进行说明。
[0030]在本实施方式中，为了解决上述课题，公开了同步控制装置、同步控制方法以及同步控制程序(以下，在本段落中简称为“同步控制装置”)。在本实施方式中，作为例子说明将该同步控制装置应用于远程影像监视系统的情况。但是，该同步控制装置例如也可用于在娱乐领域的公众观看中使用的信息处理系统等远程监视以外的用途。
[0031][远程影像监视系统][0032]首先，对本实施方式的远程影像监视系统进行说明。
[0033]在远程影像监视系统中，据点侧的远程影像监视装置使用MMT协议将合成了多个摄像机影像(影像/声音数据)而得到的全景影像的影像/声音数据以及从影像数据检测出的对象信息经由IP网络向监视侧的远程影像监视装置同步传送。在IP网络的传输区间，使用NTP从而低延迟地实现影像/声音数据与对象信息的同步控制。
[0034]图1表示本实施方式的远程影像监视系统1的结构例。该远程影像监视系统1具备配置在据点侧的据点侧远程影像监视装置A和配置在监视侧的监视侧远程影像监视装置B。
[0035]首先，对据点侧的远程影像监视装置A本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种同步控制装置，其对多个数据进行同步，其特征在于，所述数据是影像数据、声音数据、或影像及声音数据，所述同步控制装置具备：帧数据取得部，其从所述数据取得时间序列的多个帧数据；数据调整部，其基于预定的帧调整指示进行以下帧调整，即对所述多个帧数据插入预定的帧数据，或者从所述多个帧数据删除一部分帧数据；数据输出部，其依次输出进行了所述帧调整的各帧数据；以及数据输出时刻调整部，其将用于分别输出所述各帧数据的基准时刻与分别输出了所述各帧数据的输出时刻进行比较，所述数据输出时刻调整部在所述输出时刻比所述基准时刻提前了阈值以上时，进行插入所述预定的帧数据的所述帧调整指示，在所述输出时刻比所述基准时刻延迟了阈值以上时，进行删除所述一部分帧数据的所述帧调整指示。2.根据权利要求1所述的同步控制装置，其特征在于，将所述各帧数据进行了编码，所述数据调整部判定所述各帧数据的种类，在所述预定的帧调整指示是帧数据插入指示时，插入全帧，在所述预定...
【专利技术属性】
技术研发人员：小野正人，星出高秀，松原靖，深津真二，南宪一，
申请(专利权)人：日本电信电话株式会社，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。