本申请案涉及用于实时控制具有多个流的远程视频制作的系统及方法。本发明专利技术涉及传递具有广播质量的实时或接近实时视频的基于云的视频制作系统及对应的方法。来自相同源的视频经编码为至少两个单独的流，一者具有低延迟，且另一者具有较高延迟及较高质量。每一流的对应帧具有相同的时间戳。所述两个流在单独的信号路径上发送。第一信号路径是具有低延迟的实时控制RTC路径，且用于将较低质量的视频内容从视频源传送到制作者用户接口。第二信号路径以比在所述第一信号路径上提供的视频质量更高的视频质量提供相同的视频内容，但具有更长的延迟。然后，可对较高延迟流执行基于较低延迟流的来自所述用户接口的命令。迟流的来自所述用户接口的命令。迟流的来自所述用户接口的命令。
【技术实现步骤摘要】
用于实时控制具有多个流的远程视频制作的系统及方法
[0001]本申请案要求2020年5月1日申请的第63/018,717号美国临时申请案的利益，且其是2019年3月29日申请的共同拥有且共同待决的第16/369,957号美国申请案的部分接续申请案，第16/369,957号美国申请案要求2018年4月5日申请的第62/652,978号美国临时申请案的利益，其中每一申请案为了所有目的以引用方式并入本文中并作为本文的一部分。
[0002]本申请案涉及用于实时控制具有多个流的远程视频制作的系统及方法。
技术介绍
[0003]本专利技术涉及视频制作的领域。更具体地说，本专利技术涉及一种基于云的视频制作系统，其使得能够对来自多个源的视频进行实时或接近实时的操纵。
[0004]特定来说，本专利技术涉及满足对于交互、预览及控制需要低延迟视频，而传递给消费者的信号的视频质量需要非常高的视频制作过程中的需求。应理解，本文公开的用于与基于云的视频制作搭配使用的相同技术还可用于正常视频制作。
[0005]为了传输广播质量视频信号，延迟常常比某些情况下(例如新闻主播或电视主持人实时地与一或多个远程嘉宾进行视频会议)的实时交互需求更长。然而，实时视频会议系统很难传递广播质量视频。
[0006]提供使得能够与视频内容进行实时或接近实时交互同时仍使得能够进行广播质量视频制作的方法及设备将是有利的。提供这些特征作为基于云的视频制作系统的部分以制作实况视频内容也将是有利的。
[0007]本专利技术的方法及设备提供前述及其它优点。
技术实现思路
[0008]本专利技术涉及一种基于云的视频制作系统，其使得能够对来自多个源的视频进行实时或接近实时的操纵。
[0009]根据用于使用多个流进行实时视频制作的方法的实例实施例，来自一或多个视频源中的每一者的视频内容经编码为至少两个单独的流，来自所述一或多个视频源中的每一者的第一视频流包括具有低延迟的所述视频内容的低质量版本，且来自所述一或多个视频源中的每一者的第二视频流包括具有较高延迟的所述视频内容的较高质量版本。所述第一视频流及所述第二视频流的对应视频帧具有相同的视频时间戳。提供第一信号路径，用于以所述低延迟将所述第一视频流从所述一或多个视频源传送到用户接口。提供第二信号路径，用于以所述较高延迟将所述第二视频流从所述一或多个视频源传送到所述用户接口。发送包括命令的控制信号(例如，从所述用户接口到控制单元)，用于从所述一或多个视频源选择并操纵所述视频内容。所述命令可基于在所述第一信号路径上接收的所述第一视频流中的一或多者。对来自在所述第二信号路径上接收的所述第二视频流中的一或多者的视频内容执行所述命令以制作视频节目。
[0010]可在一或多个缓冲器处缓冲所述第二视频流，以解决执行所述命令时的延迟。所述缓冲可启用倒带及即时重放特征。包括所述用户接口的用户装置可适于接收所述第一信号路径上的所述第一视频流。云制作服务器可适于接收所述第二信号路径上的所述第二视频流。所述命令可从所述用户装置传送到所述云制作服务器的控制单元。
[0011]所述用户装置可包括用于显示来自所述一或多个视频源的所述第一视频流的显示器。
[0012]所述控制信号可进一步包括用于受制于所述命令的所述视频帧中的每一者的所述视频时间戳。当所述缓冲器的输出处的所述视频时间戳与在所述控制信号中接收的所述视频时间戳匹配时，执行所述命令。
[0013]所述第二视频流可包括作品质量视频。进一步来说，所述视频内容可包括实况视频内容。
[0014]所述命令可包括用于以下的命令：在由所述一或多个视频源提供的所述视频内容之间切换；选择由所述一或多个视频源中的一或多者提供的所述视频内容或所述视频内容的部分；组合来自所述一或多个视频源的所述视频内容或所述视频内容的部分；操纵所述视频内容或所述视频内容的所述部分；调整视频亮度；提供图形覆盖；开启及关闭视频图形覆盖；调整音频级别；及向所述视频内容或所述视频内容的部分添加特殊效果。
[0015]本专利技术还包含用于执行所述方法的设备及系统。用于使用多个流进行实时视频制作的系统的实例实施例可包括一或多个视频源，其每一者提供相应的视频内容，所述一或多个视频源中的每一者将所述相应的视频内容编码为至少两个单独的流，来自所述一或多个视频源中的每一者的第一视频流包括具有低延迟的所述视频内容的低质量版本，且来自所述一或多个视频源中的每一者的第二视频流包括具有较高延迟的所述视频内容的较高质量版本。所述系统还可包括用于以所述低延迟将所述第一视频流从所述一或多个视频源传送到用户接口的第一信号路径及用于以所述较高延迟将所述第二视频流从所述一或多个视频源传送到所述用户接口的第二信号路径。可提供用户接口，所述用户接口用于发送包括命令的控制信号以用于从所述一或多个视频源选择并操纵所述视频内容，所述命令基于在所述第一信号路径上接收的所述第一视频流中的一或多者。所述系统还可包括视频制作服务器，用于对所述第二视频流中的一或多者执行所述命令以制作视频节目。所述第一视频流及所述第二视频流的对应视频帧可具有相同的视频时间戳。
[0016]本专利技术的所述系统及设备还可包含上文讨论的方法实施例的各种特征。
附图说明
[0017]下文将结合附图来描述本专利技术，其中相同的参考数字表示相同的元件，且：
[0018]图1展示根据本专利技术的视频制作系统中的流路径的实例实施例；及
[0019]图2展示根据本专利技术的基于云的视频制作系统的实例实施例。
具体实施方式
[0020]随后的详细描述仅提供示范性实施例，且并不希望限制本专利技术的范围、适用性或配置。确切来说，随后对示范性实施例的详细描述将为所属领域技术人员提供用于实施本专利技术实施例的启用描述。应理解，在不脱离所附权利要求书中阐述的本专利技术的精神及范围
的情况下，可对元件的功能及布置进行各种改变。
[0021]本专利技术涉及基于云的视频制作系统，其传递具有广播质量的实时或接近实时视频。来自相同的源的视频经编码为至少两个单独的流，一者具有低延迟，且另一者具有较高延迟及较高质量。每一流的对应帧具有相同的时间戳。将相同的视频内容编码为具有相同时间戳但不同延迟及质量的两个流能够实现视频制作及控制的有利方法，如将在下面结合示范性实施例详细解释。
[0022]图1展示根据本专利技术的视频制作系统中的流路径的实例实施例。多个视频源10每一者将编码并输出相同视频内容的两个版本，高质量版本及低质量版本。将在沿两个不同信号路径1及2传输的单独视频流中提供视频内容的两个版本。
[0023]视频信号可包括视频、音频及数据中的一或多者的任意组合。视频源10可包括视频摄像机、摄录像机、电视摄像机、电影摄像机、便携式电子装置、IP或网络摄像机、平板计算机、具有内置网络摄像机的膝上型计算机或计算机监视器、智能手机或其类似者中的一或多者。
[0024]第一信号路径1是具有低延迟的实时控制(RTC)路径。第一信号路径1用于将低质量视频内容从视频源本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种用于使用多个流进行实时视频制作的方法，其包括：将来自一或多个视频源中的每一者的视频内容编码为至少两个单独的流，来自所述一或多个视频源中的每一者的第一视频流包括具有低延迟的所述视频内容的低质量版本，且来自所述一或多个视频源中的每一者的第二视频流包括具有较高延迟的所述视频内容的较高质量版本；为所述第一视频流及所述第二视频流的对应视频帧提供相同的视频时间戳；提供第一信号路径，用于以所述低延迟将所述第一视频流从所述一或多个视频源传送到用户接口；提供第二信号路径，用于以所述较高延迟将所述第二视频流从所述一或多个视频源传送到所述用户接口；发送包括命令的控制信号以用于从所述一或多个视频源选择并操纵所述视频内容，所述命令基于在所述第一信号路径上接收的所述第一视频流中的一或多者；及对来自在所述第二信号路径上接收的所述第二视频流中的一或多者的视频内容执行所述命令以制作视频节目。2.根据权利要求1所述的方法，其进一步包括在一或多个缓冲器处缓冲所述第二视频流，以解决执行所述命令时的延迟。3.根据权利要求2所述的方法，其中所述缓冲启用倒带及即时重放特征。4.根据权利要求2所述的方法，其中：包括所述用户接口的用户装置适于接收所述第一信号路径上的所述第一视频流；云制作服务器适于接收所述第二信号路径上的所述第二视频流；且所述命令从所述用户装置传送到所述云制作服务器的控制单元。5.根据权利要求4所述的方法，其中所述用户装置包括用于显示来自所述一或多个视频源的所述第一视频流的显示器。6.根据权利要求4所述的方法，其中：所述控制信号进一步包括用于受制于所述命令的所述视频帧中的每一者的所述视频时间戳；且当所述缓冲器的输出处的所述视频时间戳与在所述控制信号中接收的所述视频时间戳匹配时，执行所述命令。7.根据权利要求1所述的方法，其中所述第二视频流包括作品质量视频。8.根据权利要求1所述的方法，其中所述视频内容包括实况视频内容。9.根据权利要求1所述的方法，其中所述命令包括用于以下的命令：在由所述一或多个视频源提供的所述视频内容之间切换；选择由所述一或多个视频源中的一或多者提供的所述视频内容或所述视频内容的部分；组合来自所述一或多个视频源的所述视频内容或所述视频内容的部分；操纵所述视频内容或所述视频内容的所述部分；调整视频亮度；提供图形覆盖；开启及关闭视频图形覆盖；调整音频级别；及向所述视频内容或所述视频内容的部分添加特殊效果。10.一种用于使用多个流进行实时视频制作的系统，其包括：一或多个视频源，其每一者提...
【专利技术属性】
技术研发人员：保罗，
申请(专利权)人：通维数码公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。