一种基于混合现实的多机位画面直播方法及系统技术方案

本发明专利技术公开了一种基于混合现实的多机位画面直播方法及系统，获得多台摄像机的拍摄角度信息，根据多台摄像机的拍摄角度信息构建机位画面数据集合；获得第一虚拟对象信息，将第一虚拟对象信息、机位画面数据集合输入机位画面分析模型，获得第一多机位画面信息，获得第一互动对象的第一互动信息，根据第一声音信息，获得第一互动识别信息；当第一互动识别信息与互动信息之间的第一匹配度满足预设匹配阈值时，根据第一互动识别信息、第一多机位画面信息，获得第一匹配机位信息；根据第一切换指令用于按照第一匹配机位信息进行画面直播。解决了现有技术中混合现实的画面直播存在角度捕捉不够智能，进而影响混合现实的画面直播效果的技术问题。

【技术实现步骤摘要】
一种基于混合现实的多机位画面直播方法及系统
本专利技术涉及基于混合现实的多机位画面直播相关领域，尤其涉及一种基于混合现实的多机位画面直播方法及系统。
技术介绍
混合现实技术(MR)是虚拟现实技术的进一步发展，该技术通过在现实场景呈现虚拟场景信息，在现实世界、虚拟世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。混合现实的画面直播就是将虚拟场景和真实场景结合合成，可供第三方进行观赏的过程。但本申请专利技术人在实现本申请实施例中专利技术技术方案的过程中，发现上述技术至少存在如下技术问题：现有技术中混合现实的画面直播存在角度捕捉不够智能，进而影响混合现实的画面直播效果的技术问题。
技术实现思路
本申请实施例通过提供一种基于混合现实的多机位画面直播方法及系统，解决了现有技术中混合现实的画面直播存在角度捕捉不够智能，进而影响混合现实的画面直播效果的技术问题，达到智能根据用户实时信息，结合虚拟场景，进行机位角度切换，提高混合现实的直播观感的技术效果。鉴于上述问题，提出了本申请实施例提供一种基于混合现实的多机位画面直播方法及系统。第一方面，本申请提供了一种基于混合现实的多机位画面直播方法，其中，所述方法应用于一多机位画面直播系统，所述系统包括多台摄像机，且，所述多台摄像机拍摄角度不同，所述方法包括：获得所述多台摄像机的拍摄角度信息，所述拍摄角度信息包括拍摄中心点、拍摄覆盖面积；根据所述多台摄像机的拍摄角度信息构建机位画面数据集合；获得第一虚拟对象信息，所述第一虚拟对象信息包括所述第一虚拟对象的尺寸信息、互动信息，其中，所述互动信息包括互动操作信息、互动效果信息；将所述第一虚拟对象信息、所述机位画面数据集合输入机位画面分析模型，获得第一多机位画面信息，所述第一多机位画面信息包括所述第一虚拟对象完成所述互动信息的互动过程画面信息；获得第一互动对象的第一互动信息，所述第一互动信息包括第一声音信息、第一动作信息；根据所述第一声音信息，获得第一互动识别信息；当所述第一互动识别信息与所述互动信息之间的第一匹配度满足预设匹配阈值时，根据所述第一互动识别信息、所述第一多机位画面信息，获得第一匹配机位信息；根据所述第一匹配机位信息，获得第一切换指令，所述第一切换指令用于按照所述第一匹配机位信息进行画面直播。另一方面，本申请还提供了一种基于混合现实的多机位画面直播系统，所述系统包括：第一获得单元，所述第一获得单元用于获得多台摄像机的拍摄角度信息，所述拍摄角度信息包括拍摄中心点、拍摄覆盖面积；第一构建单元，所述第一构建单元用于根据所述多台摄像机的拍摄角度信息构建机位画面数据集合；第二获得单元，所述第二获得单元用于获得第一虚拟对象信息，所述第一虚拟对象信息包括所述第一虚拟对象的尺寸信息、互动信息，其中，所述互动信息包括互动操作信息、互动效果信息；第一输入单元，所述第一输入单元用于将所述第一虚拟对象信息、所述机位画面数据集合输入机位画面分析模型，获得第一多机位画面信息，所述第一多机位画面信息包括所述第一虚拟对象完成所述互动信息的互动过程画面信息；第三获得单元，所述第三获得单元用于获得第一互动对象的第一互动信息，所述第一互动信息包括第一声音信息、第一动作信息；第四获得单元，所述第四获得单元用于根据所述第一声音信息，获得第一互动识别信息；第五获得单元，所述第五获得单元用于当所述第一互动识别信息与所述互动信息之间的第一匹配度满足预设匹配阈值时，根据所述第一互动识别信息、所述第一多机位画面信息，获得第一匹配机位信息；第六获得单元，所述第六获得单元用于根据所述第一匹配机位信息，获得第一切换指令，所述第一切换指令用于按照所述第一匹配机位信息进行画面直播。第三方面，本专利技术提供了一种基于混合现实的多机位画面直播系统，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现第一方面所述方法的步骤。本申请实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：由于采用了获得多台摄像机的拍摄角度信息，根据所述拍摄角度信息构建机位画面的数据集合，获得第一虚拟对象信息，基于所述第一虚拟对象信息所述机位画面数据集输入机位画面分析模型，获得第一多机位画面信息，获得第一互动对象的第一互动信息，基于所述第一互动信息中的第一声音信息获得第一互动识别信息，当所述第一互动识别信息满足预设匹配阈值时，根据所述第一互动识别信息获得第一匹配机位信息，根据所述第一匹配机位信息获得第一切换指令，根据所述第一切换指令按照所述第一匹配机位信息进行画面直播，达到智能化根据用户的实时信息，对机位角度切换，进而达到提高混合现实的直播观感的技术效果。上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。附图说明图1为本申请实施例一种基于混合现实的多机位画面直播方法的流程示意图；图2为本申请实施例一种基于混合现实的多机位画面直播系统的结构示意图；图3为本申请实施例示例性电子设备的结构示意图。附图标记说明：第一获得单元11，第一构建单元12，第二获得单元13，第一输入单元14，第三获得单元15，第四获得单元16，第五获得单元17，第六获得单元18，总线300，接收器301，处理器302，发送器303，存储器304，总线接口305。具体实施方式本申请实施例通过提供一种基于混合现实的多机位画面直播方法及系统，解决了现有技术中混合现实的画面直播存在角度捕捉不够智能，进而影响混合现实的画面直播效果的技术问题，达到智能根据用户实时信息，结合虚拟场景，进行机位角度切换，提高混合现实的直播观感的技术效果。下面，将参考附图详细的描述根据本申请的示例实施例。显然，所描述的实施例仅是本申请的一部分实施例，而不是本申请的全部实施例，应理解，本申请不受这里描述的示例实施例的限制。申请概述混合现实技术(MR)是虚拟现实技术的进一步发展，该技术通过在现实场景呈现虚拟场景信息，在现实世界、虚拟世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。混合现实的画面直播就是将虚拟场景和真实场景结合合成，可供第三方进行观赏的过程。现有技术中混合现实的画面直播存在角度捕捉不够智能，进而影响混合现实的画面直播效果的技术问题。针对上述技术问题，本申请提供的技术方案总体思路如下：本申请实施例提供了一种基于混合现实的多机位画面直播方法，其中，所述方法应用于一多机位画面直播系统，所述系统包括多台摄像机，且，所述多台摄像机拍摄角度不同，所述方法包括：获得所述多台摄像机的拍摄角度信息，所述拍摄角度信息包括拍摄中心点、拍摄覆盖面积；根据所述多台摄像机的拍摄角度信息构建机位画面数据集合；获得第一虚拟对象信息，所述第一虚拟对象信息包括所述第一虚拟对象的尺寸信息、互动信息，其中，所述互动信息包括互动操作信息、互动效果信息；本文档来自技高网...

【技术保护点】
1.一种基于混合现实的多机位画面直播方法，其中，所述方法应用于一多机位画面直播系统，所述系统包括多台摄像机，且，所述多台摄像机拍摄角度不同，所述方法包括：/n获得所述多台摄像机的拍摄角度信息，所述拍摄角度信息包括拍摄中心点、拍摄覆盖面积；/n根据所述多台摄像机的拍摄角度信息构建机位画面数据集合；/n获得第一虚拟对象信息，所述第一虚拟对象信息包括所述第一虚拟对象的尺寸信息、互动信息，其中，所述互动信息包括互动操作信息、互动效果信息；/n将所述第一虚拟对象信息、所述机位画面数据集合输入机位画面分析模型，获得第一多机位画面信息，所述第一多机位画面信息包括所述第一虚拟对象完成所述互动信息的互动过程画面信息；/n获得第一互动对象的第一互动信息，所述第一互动信息包括第一声音信息、第一动作信息；/n根据所述第一声音信息，获得第一互动识别信息；/n当所述第一互动识别信息与所述互动信息之间的第一匹配度满足预设匹配阈值时，根据所述第一互动识别信息、所述第一多机位画面信息，获得第一匹配机位信息；/n根据所述第一匹配机位信息，获得第一切换指令，所述第一切换指令用于按照所述第一匹配机位信息进行画面直播。/n

【技术特征摘要】
1.一种基于混合现实的多机位画面直播方法，其中，所述方法应用于一多机位画面直播系统，所述系统包括多台摄像机，且，所述多台摄像机拍摄角度不同，所述方法包括：
获得所述多台摄像机的拍摄角度信息，所述拍摄角度信息包括拍摄中心点、拍摄覆盖面积；
根据所述多台摄像机的拍摄角度信息构建机位画面数据集合；
获得第一虚拟对象信息，所述第一虚拟对象信息包括所述第一虚拟对象的尺寸信息、互动信息，其中，所述互动信息包括互动操作信息、互动效果信息；
将所述第一虚拟对象信息、所述机位画面数据集合输入机位画面分析模型，获得第一多机位画面信息，所述第一多机位画面信息包括所述第一虚拟对象完成所述互动信息的互动过程画面信息；
获得第一互动对象的第一互动信息，所述第一互动信息包括第一声音信息、第一动作信息；
根据所述第一声音信息，获得第一互动识别信息；
当所述第一互动识别信息与所述互动信息之间的第一匹配度满足预设匹配阈值时，根据所述第一互动识别信息、所述第一多机位画面信息，获得第一匹配机位信息；
根据所述第一匹配机位信息，获得第一切换指令，所述第一切换指令用于按照所述第一匹配机位信息进行画面直播。


2.如权利要求1所述的方法，其中，所述根据所述第一声音信息，获得第一互动识别信息，包括：
获得预设声音转换算法；
根据所述预设声音转换算法对所述第一声音信息进行转换，获得第一转换信息；
获得互动操作知识库；
根据所述第一转换信息、所述互动操作知识库，获得所述第一互动识别信息。


3.如权利要求1所述的方法，其中，所述根据所述第一声音信息，获得第一互动识别信息之后，包括：
根据所述互动信息，获得所述互动操作信息；
根据所述互动操作信息，获得操作描述用语；
根据所述第一互动识别信息、所述操作描述用语，获得所述第一匹配度；
判断所述第一匹配度是否满足所述预设匹配阈值；
当所述第一匹配度满足所述预设匹配阈值时，获得所述第一匹配机位。


4.如权利要求3所述的方法，其中，所述判断所述第一匹配度是否满足所述预设匹配阈值之后，包括：
当所述第一匹配度不满足所述预设匹配阈值时，根据所述第一动作信息，获得第一角度信息；
根据所述第一角度信息、所述第一虚拟对象信息，获得第一互动位置信息；
根据所述第一互动位置信息、所述互动信息，获得第二互动识别信息；
根据所述第二互动识别信息、所述第一多机位画面信息，获得第二匹配机位信息；
根据所述第二匹配机位信息，获得第二切换指令。


5.如权利要求1所述的方法，其中，所述根据所述第一互动识别信息、所述第一多机位画面信息，获得第一匹配机位信息，包括：
根据所述第一互动识别信息、所述互动信息，获得匹配互动效果信息；
根据所述匹配互动效果信息、所述第一多机位画面信息，获得互动机位画面信息集合；
获得预设画面效果评估规则，所述预设画面效果评估规则包括所述拍摄中心点、拍摄覆盖面积的评估规则；
依次将所述互动机位画面信息集合中的互动机位画面信息、所述预设画面效果评估规则输入画面评估模型，获得画面评估结果；
从所有的画面评估结果中选择所述画面评估结果最佳的互动机位画面信息，确定所述第一匹配机位信息。


6.如权利要求5所述的方法，其中，所述方法包括：
当所述匹配互动效果信息包括多阶...

【专利技术属性】
技术研发人员：吕云，张赐，胡雨森，
申请(专利权)人：成都威爱新经济技术研究院有限公司，
类型：发明
国别省市：四川;51