【技术实现步骤摘要】
本专利技术涉及音视频，更具体地说，涉及一种智能媒体播放控制系统及音视频展示方法。
技术介绍
1、随着媒体技术的发展及网络技术的发展，包括5g技术通讯技术的发展，人们已经可以高速实现远程实时通讯，尤其是视频的延迟已经可以忽略不计，利用互联网及流媒体技术进行数据实时共享的实时方式逐渐成为当下一种热门的互动通信方式。网络实时作为一种网络交互模式，以新颖的形式吸引了更多用户，在购物、娱乐、学习等方面的应用也越来越广泛。实际应用中，主播用户可以通过主播客户端创建实时间，并通过该实时间进行在线实时，而观众用户可以通过观众客户端进入该实时间观看主播用户实时的内容。
2、对于直播，一般需要提前准备一些氛围宣传的素材图，以便在直播的过程中使用，比如产品宣传实时中，可以准备产品相关图片，并通过动作引导和产品渲染图片增强产品宣传氛围效果。但这种方法效率较低，不够便捷，且不能根据实时内容进行实时的场景氛围渲染。在ktv唱歌时，也没有根据实时内容进行实时的场景氛围渲染的技术。
技术实现思路
1、本专利技术要解决的技术问题在于，针对现有技术的上述缺陷，提供一种智能媒体播放控制系统及音视频展示方法。
2、本专利技术解决其技术问题所采用的技术方案是：
3、构造一种智能媒体播放控制系统，包括控制中心和多个竖屏电视或显示屏拼接构成的显示设备组；
4、所述控制中心包括采集单元、存储单元、播放单元、接收单元、发送单元、数据分析单元、加密单元和音视频转播单元，其中所述采集单元
5、所述控制中心通过进行集中管理和控制显示设备组实现多屏互动功能；
6、所述控制中心通过多个采集单元采集音视频数据并传输音视频数据到所述播放单元，采用开窗模式进行局部播放，包括多屏中的单屏播放或单屏中的局部位置播放；
7、所述数据分析单元用于提取出用户喜好数据和观看习惯数据，并根据数据进行推荐和营销；所述控制中心通过开窗展示所述用户喜好和推荐用户内容，所述开窗模式采用采集单元采集音视频后首先预存储到存储单元，经过数据分析单元分析后分出优先级和数据量，对于超过预设阈值的音视频进行拆分处理，分段播放，以提高系统处理速度和能力；所述分段播放包括多开开窗窗口依序播放；所述加密单元用于对音视频数据进行加密和保护，确保数据的安全性和隐私性。
8、进一步的方案是所述显示设备组由多个依次横向拼接的显示屏构成，所述显示屏为竖屏结构；所述显示设备组中，位于中间的显示屏呈直线设置，位于两侧的显示屏相对于中间的显示屏倾斜设置；所述控制中心具有多个音视频传输接口，所述控制中心内设置有处理器、存储器和解码器；所述处理器为多通道处理器，所述处理器的使用通道数根据显示屏的数量确定，所述处理器连接有显示模式管理单元、特效管理单元、互动单元和广告单元；
9、所述显示模式管理单元，用于切换不同的显示模式，所述显示模式包括背景模式、开窗模式和采集模式；所述背景模式，用于设置一个或多个后台程序，后台程序接收和处理音视频数据，不影响当前使用的应用程序；所述开窗模式，用于将多个视频图像分配不同的窗口使其显示在显示屏上，所述窗口大小和位置用户自由设定；所述采集模式，用于通过分屏实现多个视频图像的合并显示；
10、所述特效管理单元，用于通过接收用户指令，控制显示屏的显示画面以镜像模式、虚化模式或壁画模式的方式显示；
11、所述互动单元，用于接收用户发送的文字或图片并以滚动、暂留或霸屏的形式在显示屏上显示；
12、所述广告单元，用于接收定制的广告并在显示屏上显示。
13、优选的，所述控制中心获取当前播放音频的频率、音色和音阶数据，根据频率、音色和音阶数据生成节奏信息，所述控制中心根据节奏信息控制所述显示设备组的显示画面进行特效播放，所述特效播放包括显示画面的画面频闪、颜色切换和画面缩放。
14、优选的，所述显示设备组通过采集模式进行显示时，对所有视频源进行扫描分析并判断视频源中是否存在所述关联，对存在相同的所述关联事件的视频源窗口依次拼接相连在同一个区域，对不存在所述关联的视频源窗口标注在其余区域依次打开。
15、优选的，还包括主屏幕和摄像头，所述主屏幕与显示设备组相对设置，所述摄像头设置在主屏幕上，所述控制中心用于接收摄像头发送的实时影像，并对所述实时影像进行肢体动作检测；并通过肢体动作判断用户的实时动作节奏，根据多个肢体动作在时序上的关联关系，对与各个肢体动作进行量化和组合，得到目标动作特征，选取与目标动作特征匹配的动作片段，作为预设动作片段，确定预设音视频片段的节奏与用户的实时动作节奏之间的差异是否在预定范围内；在音频数据的节奏与用户的动作节奏不匹配时，获取与动作节奏相匹配的音频数据的修正节奏数据，根据修正节奏数据改变音频数据的节奏；根据所述动作片段和所述音视频片段，计算目标实时背景；将实时背景发送到显示设备组，以通过显示设备组展示实时背景；所述控制中心还连接有人脸识别单元和语音识别单元，通过人脸识别单元和语音识别单元，实现自动识别和监控，若控制中心通过人脸识别或语音识别检测到异常情况时，切换预设的临时影像，并自动报警。
16、优选的，所述控制中心还连接有人脸识别单元和语音识别单元，通过人脸识别单元和语音识别单元，实现自动识别和监控，若控制中心通过人脸识别或语音识别检测到异常情况时，切换预设的临时影像，并自动报警。
17、本专利技术还提供了一种音视频展示方法，基于前述的智能媒体播放控制系统，其特征在于，包括以下步骤：
18、步骤s1，向控制中心导入需要处理的音视频素材数据，和对应音视频素材数据的动作素材数据，将动作素材数据和音视频素材数据均分割成相同长度的对应的片段；
19、步骤s2，通过摄像头获取实时影像，对实时影像中每个的影像帧进行识别，获取目标对象肢体动作，通过肢体动作判断用户的实时动作节奏，根据多个肢体动作在时序上的关联关系，对与各个肢体动作进行量化和组合，得到目标动作特征，选取与目标动作特征匹配的动作片段，作为预设动作片段；
20、步骤s3，获取预设动作片段对应的音视频片段，作为预设音视频片段，提取预设音视频片段的每分钟节拍数bpm，确定预设音频片段的音频信号的节奏信息；
21、步骤s4，确定预设音视频片段的节奏与用户的实时动作节奏之间的差异是否在预定范围内，若不在预设范围内，则获取与动作节奏相匹配的音频数据的修正节奏数据，根据修正节奏数据改变本文档来自技高网...
【技术保护点】
1.一种智能媒体播放控制系统，其特征是：包括控制中心和多个竖屏电视或显示屏拼接构成的显示设备组；
2.根据权利要求1所述的一种智能媒体播放控制系统，其特征在于，所述显示设备组中，位于中间的显示屏呈直线设置，位于两侧的显示屏相对于中间的显示屏倾斜设置；所述控制中心连接有云服务器，所述控制中心内设置有处理器、存储器和解码器，所述处理器为多通道处理器，所述处理器的使用通道数根据显示屏的数量确定，所述处理器连接有显示模式管理单元、特效管理单元、互动单元和广告单元；
3.根据权利要求1所述的智能媒体播放控制系统，其特征在于，所述控制中心获取当前播放音频的频率、音色和音阶数据，根据频率、音色和音阶数据生成节奏信息，所述控制中心根据节奏信息控制所述显示设备组的显示画面进行特效播放，所述特效播放包括显示画面的画面频闪、颜色切换和画面缩放。
4.根据权利要求1所述的智能媒体播放控制系统，其特征在于，所述显示设备组通过采集模式进行显示时，对所有视频源进行扫描分析并判断视频源中是否存在所述关联，对存在相同的所述关联事件的视频源窗口依次拼接相连在同一个区域，对不存在所
5.根据权利要求1所述的智能媒体播放控制系统，其特征在于，还包括主屏幕和摄像头，所述主屏幕与显示设备组相对设置，所述摄像头设置在主屏幕上，所述控制中心用于接收摄像头发送的实时影像，并对所述实时影像进行肢体动作检测；并通过肢体动作判断用户的实时动作节奏，根据多个肢体动作在时序上的关联关系，对与各个肢体动作进行量化和组合，得到目标动作特征，选取与目标动作特征匹配的动作片段，作为预设动作片段，确定预设音视频片段的节奏与用户的实时动作节奏之间的差异是否在预定范围内；在音频数据的节奏与用户的动作节奏不匹配时，获取与动作节奏相匹配的音频数据的修正节奏数据，根据修正节奏数据改变音频数据的节奏；根据所述动作片段和所述音视频片段，计算目标实时背景；将实时背景发送到显示设备组，以通过显示设备组展示实时背景；所述控制中心还连接有人脸识别单元和语音识别单元，通过人脸识别单元和语音识别单元，实现自动识别和监控，若控制中心通过人脸识别或语音识别检测到异常情况时，切换预设的临时影像，并自动报警。
6.一种音视频展示方法，基于权利要求1-5任一所述的智能媒体播放控制系统，其特征在于，包括以下步骤：
7.根据权利要求6所述的音视频展示方法，其特征在于，当摄像头检测到产品目标时，切换展示产品目标的目标实时场景，获取与产品目标关联的场景素材，将场景素材与所述目标实时场景融合获得当前实时画面，所述目标实时场景是通过对摄像投获取的实时画面进行场景识别确定的。
8.根据权利要求6所述的音视频展示方法，其特征在于，在步骤S5中，计算目标背景特征的方法为：获取实时音频片段对应的每分钟节拍数BPM；通过实时影像检测用户与显示设备组的位置关系，将实时视频片段与实时影像融合，得到具有用户动作的预设背景片段；获取所选择的特效，根据所述BPM，确定所述特效的渲染周期；针对所述背景片段中的每各影像帧，根据所述影像帧的时间点以及所述特效的渲染周期，确定待进行渲染的特效片段；确定所述影像帧在所述渲染周期中的位置，根据所述影像帧的时间点以及所述特效的渲染周期进行确定；选择所述待进行渲染的特效片段，以用户为中心对所述影像帧进行渲染，得到特效影像帧；将每影像帧对应的特效影像帧进行组合，得到特效视频片段，随后将所述特效视频片段导入显示设备组。
9.根据权利要求6所述的音视频展示方法，其特征在于，在步骤S5中，还对用户的动作进行预测，预测方法为：对动作数据进行预处理，对处理后的视频数据集进行标注；对于数据集的带标签的操作段，在该动作开始的前ta秒，对前一部分帧以及结尾帧进行采样；将采样的片段输入到以transformer为基础构建的网络模型TFP中进行训练；通训练模型，捕捉动作视频的顺序性质；将模型用于处理无标注的用户动作视频数据，对输出后的视频每一秒暂停一次，得到在当前用户动作的背景下显示预测的未来动作。
10.根据权利要求6所述的音视频展示方法，其特征在于，在步骤S4中，改变音频数据的节奏的方法为，调节音视频片段的播放速度，使得音视频片段与动作片段对应相同。
...【技术特征摘要】
1.一种智能媒体播放控制系统，其特征是：包括控制中心和多个竖屏电视或显示屏拼接构成的显示设备组；
2.根据权利要求1所述的一种智能媒体播放控制系统，其特征在于，所述显示设备组中，位于中间的显示屏呈直线设置，位于两侧的显示屏相对于中间的显示屏倾斜设置；所述控制中心连接有云服务器，所述控制中心内设置有处理器、存储器和解码器，所述处理器为多通道处理器，所述处理器的使用通道数根据显示屏的数量确定，所述处理器连接有显示模式管理单元、特效管理单元、互动单元和广告单元；
3.根据权利要求1所述的智能媒体播放控制系统，其特征在于，所述控制中心获取当前播放音频的频率、音色和音阶数据，根据频率、音色和音阶数据生成节奏信息，所述控制中心根据节奏信息控制所述显示设备组的显示画面进行特效播放，所述特效播放包括显示画面的画面频闪、颜色切换和画面缩放。
4.根据权利要求1所述的智能媒体播放控制系统，其特征在于，所述显示设备组通过采集模式进行显示时，对所有视频源进行扫描分析并判断视频源中是否存在所述关联，对存在相同的所述关联事件的视频源窗口依次拼接相连在同一个区域，对不存在所述关联的视频源窗口标注在其余区域依次打开。
5.根据权利要求1所述的智能媒体播放控制系统，其特征在于，还包括主屏幕和摄像头，所述主屏幕与显示设备组相对设置，所述摄像头设置在主屏幕上，所述控制中心用于接收摄像头发送的实时影像，并对所述实时影像进行肢体动作检测；并通过肢体动作判断用户的实时动作节奏，根据多个肢体动作在时序上的关联关系，对与各个肢体动作进行量化和组合，得到目标动作特征，选取与目标动作特征匹配的动作片段，作为预设动作片段，确定预设音视频片段的节奏与用户的实时动作节奏之间的差异是否在预定范围内；在音频数据的节奏与用户的动作节奏不匹配时，获取与动作节奏相匹配的音频数据的修正节奏数据，根据修正节奏数据改变音频数据的节奏；根据所述动作片段和所述音视频片段，计算目标实时背景；将实时背景发送到显示设备组，以通过显示设备组展示实时背景；所述控制中心还连接有人脸识别单元和语音识别单元，通过人脸识别单元和语音识别单...
【专利技术属性】
技术研发人员：张强，王辉，
申请(专利权)人：深圳火山视觉技术发展有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。