【技术实现步骤摘要】
本专利技术涉及人工智能领域，具体而言，涉及一种图生视频方法和装置。
技术介绍
1、随着人工智能的迅速发展，视频生成技术受到了广泛的关注和研究。目前常用的基于扩散模型的图生视频模型在根据图像生成对应视频时，可能会出现视频中的物品形变失真的问题，导致视频无法准确反映物品的真实形态和细节。此外，图生视频模型通常需要用户预设运动轨迹，用户操作繁杂。
技术实现思路
1、有鉴于此，本专利技术实施例提供一种图生视频方法和装置，以实现智能化端到端的图生视频，无需引入预设运动参数，即可在保持目标对象区域不扩散的同时，实现运动轨迹的多样性。
2、第一方面，本专利技术实施例提供了一种图生视频方法，所述方法包括：
3、获取源图像，所述源图像为包含目标对象的图像；
4、将所述源图像输入第一视频生成模型，得到对应的素材视频，所述第一视频生成模型为预训练的图生视频模型；
5、确定所述素材视频对应的帧间变换矩阵序列；
6、确定所述源图像中所述目标对象对应的对象掩
【技术保护点】
1.一种图生视频方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述素材视频包含多个素材视频帧；
3.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述源图像，确定目标对象图像序列，包括：
4.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述源图像，确定目标对象图像序列，包括：
5.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述对象掩码图像，确定掩码图像序列，包括：
6.根据权利要求1所述的方法，其特征在于，所...
【技术特征摘要】
1.一种图生视频方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述素材视频包含多个素材视频帧；
3.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述源图像，确定目标对象图像序列，包括：
4.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述源图像，确定目标对象图像序列，包括：
5.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述对象掩码图像，确定掩码图像序列，包括：
6.根据权利要求1所述的方法，其特征在于，所述根据所述帧间变换矩阵序列和所述对象掩码图像，确定掩码图像序列，包括：
7.根据权利要求1所述的方法，其特征在于，所述第二视频生成模型为具有局部重绘功能的图生视频模型；
8.根据权利要求1所述的方法，其特征在于，所述第二视频生成模型为具有局部重绘功能的视频生视频模型；
9.根据权利要求8所述的方法，其特征在于，所述根据所述源图像和...
【专利技术属性】
技术研发人员：蒋雅萍，陈祖龙，庾金科，
申请(专利权)人：阿里巴巴中国有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。