基于时间戳记的音频与视频处理方法及其系统技术方案

本发明专利技术提出一种基于时间戳记的音频与视频处理方法及其系统，此方法适用于具有影像捕获设备以及收音装置的电子装置并且包括下列步骤。首先，于同一时间区间内，分别利用影像捕获设备以及收音装置撷取影像信号以及声音信号，以分别产生视频资料以及音频资料，并且将时间区间转换为时间戳记资料，其中视频资料包括不具有固定档案大小的单一视频画面，音频资料包括具有固定档案大小的多个音档。之后，将视频资料、音频资料以及时间戳记资料整合为传输资料。

【技术实现步骤摘要】
基于时间戳记的音频与视频处理方法及其系统
本专利技术是有关于一种音频与视频处理方法及其系统，且特别是有关于一种基于时间戳记的音频与视频处理方法及其系统。
技术介绍
随着电子科技以及通讯网络不断地发展，视频的硬设备、软件技术及操作功能已大幅提升。现今的视频可随时提供多个用户通过例如是计算机、智能型手机、平板计算机等电子装置进行同步联机，以让用户之间在进行语音通话时，更可以通过屏幕看到其它用户的动态影像，从而增强交流的真实感以及临场感。基此，视频会议已逐渐应用于商业沟通上，由此企业得以进行跨地域的内外部沟通。一般而言，影像与声音在进行网络传输时，为了求取最小资料量，会先将影像与声音分离、编码以及压缩后传送到远程。由于影像与声音的封包资料量不同，传送所需耗费的时间也随之不同，故接收端在接收到封包进行影音播放时，往往会出现影像与声音不同步的现象，进而影响到沟通上的质量与效率。
技术实现思路
有鉴于此，本专利技术提供一种基于时间戳记的音频与视频处理方法及其系统，其是以特定资料格式的音频资料、视频资料以及时间戳记资料来做为传输资料，以使接收传输资料的装置可借以达到影音同步的要求。本专利技术提出一种基于时间戳记的音频与视频处理方法，适用于电子装置，包括下列步骤。首先，于同一时间区间内，撷取影像信号以及声音信号，以分别产生视频资料以及音频资料，并且将时间区间转换为时间戳记资料，其中视频资料包括不具有固定档案大小的单一视频画面，音频资料包括具有固定档案大小的多个音档。之后，将视频资料、音频资料以及时间戳记资料整合为传输资料。在本专利技术的一实施例中，上述撷取影像信号，以产生视频资料的步骤包括撷取影像信号，以及将影像信号数字转换并且压缩为不具有固定档案大小的视频资料。在本专利技术的一实施例中，上述将视频资料、音频资料以及时间戳记整合为传输资料的步骤包括利用视频资料、音频资料以及时间戳记资料，产生影音封包，以做为传输资料。在本专利技术的一实施例中，上述将视频资料、音频资料以及时间戳记整合为传输资料的步骤包括利用视频资料，产生视频封包，又利用音频资料以及时间戳记资料，产生音频封包，以及以视频封包以及音频封包做为传输资料。在本专利技术的一实施例中，上述将视频资料、音频资料以及时间戳记整合为传输资料的步骤之后，还包括将传输资料传送到另一电子装置。本专利技术提出一种基于时间戳记的音频与视频处理方法，适用于电子装置，包括下列步骤。首先，取得第一来源的第一传输资料，其中第一传输资料包括第一视频资料、第一音频资料以及第一时间戳记资料，其中第一视频资料包括不具有固定档案大小的单一视频画面，第一音频资料包括具有固定档案大小的多个音档。之后，根据第一传输资料中的第一时间戳记资料，播放第一视频资料以及第一音频资料。在本专利技术的一实施例中，第一传输资料为包括第一视频资料、第一音频资料以及第一时间戳记资料的影音封包，电子装置具有包括多个第一暂存位置的第一资料缓冲器，而在取得第一来源的第一传输资料的步骤之后，上述方法还包括根据第一影音封包中的第一时间戳记资料，将第一影音封包依序递补至第一暂存位置中。在本专利技术的一实施例中，上述根据第一传输资料中的第一时间戳记资料，播放第一音频资料以及第一视频资料的步骤包括当第一影音封包排序于第一暂存位置中的第一个时，播放第一影音封包的第一视频资料以及第一音频资料。在本专利技术的一实施例中，电子装置更具有包括多个第二暂存位置的第二资料缓冲器，而上述方法还包括以下步骤。取得第二来源的第二传输资料，其中第二传输资料为包括第二视频资料、第二音频资料以及包括第二时间戳记资料的第二影音封包，其中第二视频资料包括不具有固定档案大小的单一视频画面，第二音频资料包括具有固定档案大小的多个音档。接着，根据第二影音封包中的第二时间戳记资料，将第二影音封包依序递补至第二暂存位置中。当第一影音封包排序于第一暂存位置中的第一个以及第二影音封包排序于第二暂存位置中的第一个时，同时播放第一影音封包的第一视频资料、第一音频资料以及第二影音封包的第二视频资料、第二音频资料。在本专利技术的一实施例中，电子装置是以分割画面或是子母画面同时播放第一视频资料以及第二视频资料。在本专利技术的一实施例中，第一传输资料为包括第一视频资料的第一视频封包以及包括第一音频资料、第一时间戳记资料的第一音频封包，电子装置具有包括第一视频暂存位置的第一视频缓冲器以及包括多个第一音频暂存位置的第一音频缓冲器，而在取得第一来源的第一传输资料的步骤之后，上述方法还包括将第一视频封包递补至第一视频暂存位置中，以及根据第一音频封包中的第一时间戳记资料，将第一音频封包依序递补至第一音频暂存位置中。在本专利技术的一实施例中，上述将第一视频封包递补至第一视频暂存位置中的步骤包括当第一视频暂存位置中存在另一封包时，以第一视频封包覆盖该另一封包。在本专利技术的一实施例中，上述根据第一音频封包中的第一时间戳记资料，将第一音频封包依序递补至第一暂存位置中的步骤包括直接播放第一视频暂存位置中的第一视频封包的第一视频资料，而当第一音频封包排序于第一暂存位置中的第一个时，播放第一音频封包的第一音频资料。在本专利技术的一实施例中，电子装置更具有包括第二视频暂存位置的第二视频缓冲器以及包括多个第二音频暂存位置的第二音频缓冲器，而上述方法还包括下列步骤。取得第二来源的第二传输资料，其中第二传输资料为包括第二视频资料的第二视频封包以及包括第二音频资料、第二时间戳记资料的第二音频封包，其中第二音频资料包括具有固定档案大小的多个音档，第二视频资料包括不具有固定档案大小的单一视频画面。将第二视频封包递补至第二视频暂存位置中，并且根据第二音频封包中的第二时间戳记资料，将第二音频封包依序递补至所述第二音频暂存位置中。选择第一视频封包的第一视频资料以及第二视频封包的第二视频资料两者之一，以做为筛选后的视频资料。当第一音频封包以及第二音频封包分别排序于第一音频暂存位置以及第二音频暂存位置中的第一个时，整合第一音频封包的第一音频资料以及第二音频封包的第二音频资料，以做为整合后的音频资料。之后，同时播放筛选后的视频资料以及整合后的音频资料。在本专利技术的一实施例中，选择第一视频封包的第一视频资料以及第二视频封包的第二视频资料两者之一，以做为筛选后的视频资料的步骤包括分别计算第一音频资料的平均音量以及第二音频资料的平均音量，以取得第一平均音量以及第二平均音量，当第一平均音量大于第二平均音量时，选择第一视频资料做为筛选后的视频资料，而当第二平均音量大于第一平均音量时，选择第二视频资料做为筛选后的视频资料。本专利技术提出一种基于时间戳记的音频与视频处理系统，包括至少一客户端装置以及主机装置。各个客户端装置分别产生包括客户端视频资料、客户端音频资料以及客户端时间戳记资料的客户端传输资料，其中客户端视频资料包括不具有固定档案大小的单一视频画面，客户端音频资料包括具有固定档案大小的多个音档。主机装置联机于各个客户端装置，其自各个客户端装置接收客户端传输资料，以及根据客户端传输资料中的客户端时间戳记资料，播放对应的客户端视频资料以及客户端音频资料。在本专利技术的一实施例中，主机装置更产生包括主机视频资料、主机音频资料以及主机时间戳记资料的主机传输资料，其中主机视频资料包括不具有固定档案大小的单一视频画面，主本文档来自技高网...

【技术保护点】
一种基于时间戳记的音频与视频处理方法，其特征在于，适用于具有影像捕获设备以及收音装置的电子装置，该方法包括下列步骤：于同一时间区间内，分别利用影像捕获设备以及收音装置撷取影像信号以及声音信号，以产生视频资料以及音频资料，其中该视频资料包括不具有固定档案大小的单一视频画面，该音频资料包括具有固定档案大小的多个音档；转换该时间区间为时间戳记资料；以及整合该视频资料、该音频资料以及该时间戳记资料为传输资料。

【技术特征摘要】
2015.01.12 US 62/102,5331.一种基于时间戳记的音频与视频处理方法，其特征在于，适用于具有屏幕以及播音装置的电子装置，该方法包括：取得第一来源的第一传输资料以及第二来源的第二传输资料，其中该第一传输资料为包括第一视频资料、第一音频资料以及第一时间戳记资料的第一影音封包，其中该第一视频资料包括不具有固定档案大小的单一视频画面，该第一音频资料包括具有固定档案大小的多个音档，其中该第二传输资料为包括第二视频资料、第二音频资料以及第二时间戳记资料的第二影音封包，其中该第二视频资料包括不具有固定档案大小的单一视频画面，该第二音频资料包括具有固定档案大小的多个音档，其中该电子装置具有包括多个第一暂存位置的第一资料缓冲器以及包括多个第二暂存位置的第二资料缓冲器；根据该第一影音封包中的该第一时间戳记资料，依序递补该第一影音封包至所述第一暂存位置中，并且根据该第二影音封包中的该第二时间戳记资料，依序递补该第二影音封包至所述第二暂存位置中；以及当该第一影音封包排序于所述第一暂存位置中的第一个以及该第二影音封包排序于所述第二暂存位置中的第一个时，同时根据该第一传输资料中的该第一时间戳记资料以及该第二传输资料中的该第二时间戳记资料，分别利用该屏幕以及该播音装置播放该第一影音封包中的该第一视频资料、该第一音频资料以及该第二影音封包中的该第二视频资料、该第二音频资料。2.如权利要求1所述的基于时间戳记的音频与视频处理方法，其特征在于，该电子装置利用该屏幕以分割画面或是子母画面同时播放该第一视频资料以及该第二视频资料。3.一种基于时间戳记的音频与视频处理方法，其特征在于，适用于具有屏幕以及播音装置的电子装置，该方法包括：取得第一来源的第一传输资料，其中该第一传输资料为包括第一视频资料的第一视频封包以及包括第一音频资料、第一时间戳记资料的第一音频封包，该第一视频资料包括不具有固定档案大小的单一视频画面，该第一音频资料包括具有固定档案大小的多个音档，其中该电子装置具有包括单一个第一视频暂存位置的第一视频缓冲器以及包括多个第一音频暂存位置的第一音频缓冲器；递补该第一视频封包至该第一视频暂存位置中；根据该第一音频封包中的该第一时间戳记资料，依序递补该第一音频封包至所述第一音频暂存位置中；以及根据该第一传输资料中的该第一时间戳记资料，分别利用该屏幕以及该播音装置播放该第一视频资料以及该第一音频资料。4.如权利要求3所述的基于时间戳记的音频与视频处理方法，其特征在于，递补该第一视频封包至该第一视频暂存位置中的步骤包括：当该第一视频暂存位置中存在另一封包时，以该第一视频封包覆盖该另一封包。5.如权利要求3所述的基于时间戳记的音频与视频处理方法，其特征在于，根据该第一传输资料中的该第一时间戳记资料，分别利用该屏幕以及该播音装置播放该第一音频资料以及该第一视频资料的步骤包括：利用该屏幕直接播放该第一视频暂存位置中的该第一视频封包的该第一视频资料；以及当该第一音频封包排序于所述第一音频暂存位置中的第一个时，利用该播音装置播放该第一音频封包的该第一音频资料。6.如权利要求3所述的基于时间戳记的音频与视频处理方法，其特征在于，该电子装置更具有包括单一个第二视频暂存位置的第二视频缓冲器以及包括多个第二音频暂存位置的第二音频缓冲器，而该方法还包括：取得第二来源的第二传输资料，其中该第二传输资料为包括第二视频资料的第二视频封包以及包括第二音频资料、第二时间戳记资料的第二音频封包，其中该第二视频资料包括不具有固...

【专利技术属性】
技术研发人员：程信杰，张堃铉，翁明哲，
申请(专利权)人：仁宝电脑工业股份有限公司，
类型：发明
国别省市：中国台湾;71