【技术实现步骤摘要】
本公开涉及计算机视觉算法领域，具体涉及设备应用指导，尤其涉及一种用于设备使用的指导视频生成方法、装置、电子设备和存储介质。
技术介绍
1、随着技术的不断进步，设备生产制造变得更加智能和多样化。当用户面对一些不熟悉的设备时，他们可能无法及时了解如何选择和使用，这会降低他们对设备的使用兴趣和使用体验。例如，在健身房里，可能有众多可供选择的健身器材，如果用户使用了不熟悉的健身器材并以错误的方式进行锻炼，他们就无法实现健身目标。
技术实现思路
1、本公开提供了一种用于设备使用的指导视频生成方法、装置、电子设备和存储介质，产生适合于用户操作的设备的正确使用教程，有效指导用户使用设备。
2、根据本公开的第一方面，提供了一种用于设备使用的指导视频生成方法，包括：基于用户的意图信息生成意图提示词；从目标区域的场景图像中提取目标设备的图像；基于意图提示词和目标设备的图像，生成使用目标设备的指导视频。
3、在一些实施例中，上述意图信息还包括设备信息；上述从目标区域的场景图像中提取目标设备的图像，包括：从场景图像中提取多个设备的图像；基于设备信息，从多个设备的图像中确定出目标设备的图像。
4、在一些实施例中，上述从目标区域的场景图像中提取目标设备的图像，包括：从场景图像中提取多个设备的图像；确定意图信息对应的应用领域；基于应用领域，从多个设备的图像中确定出目标设备的图像。
5、在一些实施例中，上述基于意图提示词和目标设备的图像，生成使用目标设备的指导视频，
6、在一些实施例中，上述设备使用指导视频生成模型的构建过程，包括：以应用领域中设备的设备图像、意图提示词和设备使用指导视频为样本，构建第一数据集；利用第一数据集对潜在扩散模型进行微调，得到设备使用指导视频生成模型；其中，潜在扩散模型是能够处理文生图任务和图生图任务的扩散模型。
7、在一些实施例中，上述方法还包括：响应于目标设备为多个，基于用户的属性信息对多个目标设备的指导视频进行排序；将排序在前的第一预设数量个指导视频推送给用户。
8、在一些实施例中，上述基于用户的属性信息对多个目标设备的指导视频进行排序，包括：确定属性信息与多个目标设备的适用标准的匹配度；按照匹配度由高至低的顺序，对多个目标设备的指导视频进行排序。
9、在一些实施例中，上述基于意图信息，生成意图提示词，包括：将意图信息输入提示词生成模型，确定意图提示词。
10、根据本公开的第二方面，提供了一种用于设备使用的指导视频生成装置，包括：第一生成模块，被配置为基于用户的意图信息生成意图提示词；提取模块，被配置为从目标区域的场景图像中提取目标设备的图像；第二生成模块，被配置为基于意图提示词和目标设备的图像，生成使用目标设备的指导视频。
11、根据本公开的第三方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被上述至少一个处理器执行，以使上述至少一个处理器能够执行上述第一方面提供的用于设备使用的指导视频生成方法。
12、根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，上述计算机指令用于使上述计算机执行上述第一方面提供的用于设备使用的指导视频生成方法。
13、根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，上述计算机程序在被处理器执行时实现上述第一方面提供的用于设备使用的指导视频生成方法。
14、本公开提供的用于设备使用的指导视频生成方法、装置、电子设备和存储介质，基于用户的意图信息生成意图提示词；从目标区域的场景图像中提取目标设备的图像；基于意图提示词和目标设备的图像，生成使用目标设备的指导视频；利用从当前环境中识别的设备和用户意图，生成适合于用户操作的设备的正确使用教程，有效指导用户使用设备。
15、应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...【技术保护点】
1.一种用于设备使用的指导视频生成方法，包括：
2.根据权利要求1所述的方法，其中，所述意图信息还包括设备信息；
3.根据权利要求1所述的方法，其中，所述从目标区域的场景图像中提取目标设备的图像，包括：
4.根据权利要求1所述的方法，其中，所述基于所述意图提示词和所述目标设备的图像，生成使用所述目标设备的指导视频，包括：
5.根据权利要求4所述的方法，其中，所述设备使用指导视频生成模型的构建过程，包括：
6.根据权利要求1所述的方法，其中，所述方法还包括：
7.根据权利要求6所述的方法，其中，所述基于用户的属性信息对多个目标设备的指导视频进行排序，包括：
8.根据权利要求1所述的方法，所述基于意图信息，生成意图提示词，包括：
9.一种用于设备使用的指导视频生成装置，包括：
10.一种电子设备，包括：
11.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行权利要求1-8中任一项所述的方法。
12.一种计算机程序产
...【技术特征摘要】
1.一种用于设备使用的指导视频生成方法，包括：
2.根据权利要求1所述的方法，其中，所述意图信息还包括设备信息；
3.根据权利要求1所述的方法，其中，所述从目标区域的场景图像中提取目标设备的图像，包括：
4.根据权利要求1所述的方法，其中，所述基于所述意图提示词和所述目标设备的图像，生成使用所述目标设备的指导视频，包括：
5.根据权利要求4所述的方法，其中，所述设备使用指导视频生成模型的构建过程，包括：
6.根据权利要求1所述的方法，其中，所述方法还包括：
7.根据...
【专利技术属性】
技术研发人员：李吉春，陈有鑫，俞江，吴龙海，陈洁，朴成贤，赵贤吉，
申请(专利权)人：三星电子中国研发中心，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。