一种资源合成方法、装置、设备及存储介质制造方法及图纸

本申请实施例公开了一种资源合成方法、装置、设备及存储介质，其中，该方法包括：获取基于目标过程生成的第一资源和第二资源；确定第一资源中的第一参照元素与第一资源中子资源的资源标识之间的第一映射关系；确定第二资源中的第二参照元素与第二资源中子资源的资源标识之间的第二映射关系；根据第一映射关系中第一参照元素与第二映射关系中第二参照元素之间的匹配关系确定目标同步关系，该目标同步关系包括第一资源中第i个资源标识与第二资源中第j个资源标识之间的映射关系；根据第一资源、第二资源和目标同步关系进行资源合成。该方法既能保证获得较好的资源合成效果，又能提升合成效率，降低合成成本。

A resource synthesis method, device, device and storage medium

【技术实现步骤摘要】
一种资源合成方法、装置、设备及存储介质
本申请涉及数据处理
，尤其涉及一种资源合成方法、装置、设备及存储介质。
技术介绍
随着互联网技术的日益发展，对多模态资源进行合成已成为很多行业的主流研究方向之一。在很多应用场景下，多模态资源的合成重点聚焦于将相关信息合成至对应的视频文件中，以游戏领域为例，目前很多研究聚焦于将游戏解说内容与录制游戏过程获得的游戏视频合成起来，以便为用户提供内容更加丰富的游戏视频。然而，在实际应用中，不同模态的资源中对应于同一内容的子资源通常难以对齐，仍以游戏领域为例，将游戏解说内容融入对应的游戏视频中时，通常容易出现游戏解说内容与游戏视频画面不对应的情况。针对上述情况，相关技术目前主要通过人工操作将不同资源中对应于同一内容的子资源对齐，合成效率低且合成成本高。综上，如何在保证多模态资源的合成效果的前提下，提升合成效率，降低合成成本，已成为目前亟待解决的问题。
技术实现思路
本申请实施例提供了一种资源合成方法、装置、设备及存储介质，既能够保证多模态资源的合成效果，又能够提升资源合成效本文档来自技高网...

【技术保护点】
1.一种资源合成方法，其特征在于，所述方法包括：/n获取第一资源和第二资源；所述第一资源和所述第二资源是基于目标过程生成的模态不同的资源；/n确定所述第一资源中子资源对应的第一参照元素，并确定所述第一参照元素与所述第一资源中子资源的资源标识之间的第一映射关系；所述第一参照元素能够表征其对应的所述第一资源中的子资源；/n确定所述第二资源中子资源对应的第二参照元素，并确定所述第二参照元素与所述第二资源中子资源的资源标识之间的第二映射关系；所述第二参照元素能够表征其对应的所述第二资源中的子资源；/n根据所述第一映射关系中所述第一参照元素与所述第二映射关系中所述第二参照元素之间的匹配关系，确定目标同步...

【技术特征摘要】
1.一种资源合成方法，其特征在于，所述方法包括：
获取第一资源和第二资源；所述第一资源和所述第二资源是基于目标过程生成的模态不同的资源；
确定所述第一资源中子资源对应的第一参照元素，并确定所述第一参照元素与所述第一资源中子资源的资源标识之间的第一映射关系；所述第一参照元素能够表征其对应的所述第一资源中的子资源；
确定所述第二资源中子资源对应的第二参照元素，并确定所述第二参照元素与所述第二资源中子资源的资源标识之间的第二映射关系；所述第二参照元素能够表征其对应的所述第二资源中的子资源；
根据所述第一映射关系中所述第一参照元素与所述第二映射关系中所述第二参照元素之间的匹配关系，确定目标同步关系；所述目标同步关系包括所述第一资源中第i个资源标识与所述第二资源中第j个资源标识之间的映射关系，所述i为大于或等于1、且小于或等于所述第一资源中子资源数目的整数，所述j为大于或等于1、且小于或等于所述第二资源中子资源数目的整数；
根据所述第一资源、所述第二资源和所述目标同步关系进行资源合成。


2.根据权利要求1所述的方法，其特征在于，所述第一资源为录制所述目标过程得到的目标视频，所述第一参照元素为所述目标视频中视频帧显示的目标元素；所述第二资源中的子资源包括用于确定所述目标元素的目标数据，所述第二参照元素为所述目标数据对应的所述目标元素；
则所述确定所述第一资源中子资源对应的第一参照元素，并确定所述第一参照元素与所述第一资源中子资源的资源标识之间的第一映射关系，包括：
识别所述目标视频中视频帧显示的所述目标元素；
确定所述目标视频中视频帧显示的所述目标元素与所述视频帧的资源标识之间的映射关系，作为所述第一映射关系；
则所述确定所述第二资源中子资源对应的第二参照元素，并确定所述第二参照元素与所述第二资源中子资源的资源标识之间的第二映射关系，包括：
确定所述第二资源中子资源包括的目标数据对应的所述目标元素；
确定所述第二资源中子资源包括的目标数据对应的所述目标元素与所述第二资源中子资源的资源标识之间的映射关系，作为所述第二映射关系。


3.根据权利要求2所述的方法，其特征在于，所述目标视频中视频帧显示有所述目标过程的进展时间；所述第二资源中子资源的资源标识能够反映所述目标过程的进展时间；
则所述识别所述目标视频中视频帧显示的所述目标元素，包括：
识别所述目标视频中视频帧显示的进展时间，作为所述目标元素；
则所述确定所述第二资源中子资源包括的目标数据对应的所述目标元素，包括：
根据所述第二资源中子资源的资源标识与预设的子资源时间分布关系，确定所述第二资源中子资源对应的进展时间，作为所述目标元素。


4.根据权利要求2所述的方法，其特征在于，所述识别所述目标视频中视频帧显示的所述目标元素，包括：
对所述目标视频进行解码，得到所述目标视频中的视频帧；
通过图像识别模型识别所述目标视频中的视频帧显示的所述目标元素。


5.根据权利要求1所述的方法，其特征在于，所述根据所述第一资源、所述第二资源和所述目标同步关系进行资源合成，包括：
根据所述第二资源生成基础待合成资源；所述基础待合成资源中子资源的资源标识是根据所述第二资源中子资源的资源标识确定的；
根据所述目标同步关系，将所述基础待合成资源转换为目标待合成资源；
基于所述目标待合成资源中子资源的资源标识与所述第一资源中子资源的资源标识之间的匹配关系，对所述目标待合成资源与所述第一资源进行合成处理。


6.根据权利要求1所述的方法，其特征在于，所述目标过程为游戏过程，所述第一资源为录制所述游戏过程得到的游戏视频，所述第二资源为所述游戏过程中的游戏数据序列；
则所述确定所述第一资源中子资源对应的第一参照元素，并确定所述第一参照元素与所述第一资源中子资源的资源标识之间的第一映射关系，包括：
识别所述游戏视频中视频帧显示的目标元素，作为所述第一参照元素；
确定所述视频帧显示的目标元素与所述视频帧的时间戳之间的映射关系，作为所述第一映射关系；
则所述确定所述第二资源中子资源对应的第二参照元素，并确定所述第二参照元素与所述第二资源中子资源的资源标识之间的第二映射关系，包括：
确定所述游戏数据序列中游戏数据对应的所述目标元素，作为所述第二参照元素；
确定所述游戏数据对应的所述目标元素与所述游戏数据的帧号之间的映射关系，作为所述第二映射关系。


7.根据权利要求6所述的方法，其特征在于，所述根据所述第一资源、所述第二资源和所述目标同步关系进行资源合成，包括：
根据所述游戏数据序列确定基础游戏解说资源；所述基础游戏解说资源的资源标识包括起始帧号和终止帧号，所述起始帧号是所述游戏数据序列中起始游戏数据的帧号，所述终止帧号是所述游戏数据序列中终止游戏数据的帧号；
根据所述目标同步关系，将所述基础游戏解说资源转换为目标游戏解说资源；所述目标游戏解说资源的资源标识包括起始时间戳和终止时间戳，所述起始时间戳对...

【专利技术属性】
技术研发人员：郑杨，陈祺，欧阳才晟，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44