用于电子商务应用程序的依据图像的自动视频生成制造技术

提供了用于在市场中自动生成与物品相关联的视频的系统和方法。图像接收器接收与物品列表的物品相关联的图像。图像提取器通过计算机视觉分析来生成针对每个图像的视觉描述符，并通过去除冗余图像来提取唯一图像集。图像分类器基于物品类别对唯一图像集中的图像进行分类，并生成用于生成视频的图像序列。文本放置器自动识别图像中的区域，并使用由模型预测的文本属性将文本插入到图像中。视频数据使用另一模型来优化所生成的视频，该另一模型基于先前对其他示例性视频数据进行的手动调整来进行训练。所公开的技术发布自动生成的视频数据以供市场中的观看者观看。据以供市场中的观看者观看。据以供市场中的观看者观看。

【技术实现步骤摘要】
用于电子商务应用程序的依据图像的自动视频生成
[0001]相关申请
[0002]本申请要求于2021年12月8日递交的题为“AUTOMATED VIDEO GENERATION FROM IMAGE S FOR E
‑
COMMERCE APPLICATIONS”的美国专利申请No.17/545,627的优先权，其全部公开内容通过引用并入本文。


[0003]本公开总体上涉及计算机
，具体地，涉及用于电子商务应用程序的依据图像的自动视频生成。

技术介绍

[0004]电子商务市场系统为卖家提供工具，以通过使用货物的图像、视频和文本描述向买家展示货物。手动编辑视频数据通常给卖家带来掌握视频编辑工具的负担。在实践中，卖家需要熟练地使用视频编辑工具，以通过在特定视频帧中指定字体、大小和颜色来手动定位和调整文本，将文本插入到特定视频帧中。在实践中，需要卖家手动调整的自动视频生成会增加操作成本。因此，期望的是开发一种能够在最小化折衷的同时更好地满足需求的技术。
[0005]正是关于这些和其他总体考虑，才做出了本文本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于在电子商务系统中自动生成针对物品列表的视频的计算机实现的方法，包括：接收图像集，其中，所述图像集包括作为物品列表的一部分接收的多个图像；生成针对所述图像集的视觉描述符集，其中，生成所述视觉描述符集包括：针对所述图像集中的每个图像，使用第一机器学习模型来计算视觉描述符；比较来自所述视觉描述符集中的视觉描述符，以识别所述图像集中的一个或多个冗余图像；通过从所述图像集中去除所述一个或多个冗余图像，来基于所比较的视觉描述符生成唯一图像集；基于所述唯一图像集来确定有序图像集，其中，所述有序图像集至少基于所述物品列表的类别进行排序；使用来自所述物品列表的附加数据，自动确定与所述有序图像集中的一个或多个图像相关联的文本，其中，与所述一个或多个图像相关联的所述文本被自动添加到所述一个或多个图像；基于所述有序图像集来自动生成所述视频，其中，所述视频包括所述有序图像集；以及将所述视频提供为所述物品列表的一部分。2.根据权利要求1所述的计算机实现的方法，其中，所述视觉描述符包括以下项中的至少一项：视觉内容的类型、形状、外观、颜色或视点。3.根据权利要求1所述的计算机实现的方法，其中，所述物品列表的类别包括：用于在线上购物市场中交易的物品的类型。4.根据权利要求1所述的计算机实现的方法，还包括：使用第二机器学习模型来确定所述有序图像集，其中，所述第二机器学习模型在视觉转换方面进行训练，以基于顺序标准来预测所述视频的视频段序列，并且其中，所述顺序标准包括所述物品列表的类别。5.根据权利要求1所述的计算机实现的方法，还包括：从所述视频中提取视频帧，其中，所述视频帧包括所述图像；生成针对所述视频帧的特征图，其中，所述特征图包括对所述图像中描绘的物品的至少边缘的位置加以指示的多个特征点；使用第三机器学习模型来基于所述特征图确定所述视频帧中的区域；使用所述第三机器学习模型，基于所述区域的一个或多个属性来确定文本属性，其中所述文本属性至少包括所述文本的颜色或大小，并且其中所述区域的所述一个或多个属性包括出现在所述区域中的一种或多种颜色；以及使用所述文本属性将所述文本插入所述区域中。6.根据权利要求1所述的计算机实现的方法，还包括：接收与所述有序图像集中的所述一个或多个图像相关联的所述文本；至少基于所述有序图像集中的所述一个或多个图像的背景颜色，自动确定与所述一个或多个图像相关联的所述文本的颜色；以及至少基于所述有序图像集中的所述一个或多个图像的背景纹理，自动确定一个或多个字符在所述文本中的位置。
7.根据权利要求1所述的计算机实现的方法，还包括：使用第四机器学习模型自动生成所述视频，其中所述第四机器学习模型是用于预测要对所述视频进行的一个或多个调整的经训练模型，并且其中所述第四机器学习模型是基于由用户手动对视频进行的一个或多个调整来训练的。8.根据权利要求5所述的计算机实现的方法，其中，所述文本的颜色与出现在所述区域中的所述一种或多种颜色不同。9.一种用于在电子商务市场中自动生成描述物品的视频的系统，所述系统包括：处理器；以及存储器，存储计算机可执行指令，所述计算机可执行指令当被所述处理器执行时使所述系统：接收图像集，其中，所述图像集包括作为物品列表的一部分接收的多个图像；生成针对所述图像集的视觉描述符集，其中，生成所述视觉描述符集包括：针对所述图像集中的每个图像，使用第一机器学习模型来计算视觉描述符；比较来自所述视觉描述符集中的视觉描述符，以识别所述图像集中的一个或多个冗余图像；通过从所述图像集中去除所述一个或多个冗余图像，来基于所比较的视觉描述符生成唯一图像集；基于所述唯一图像集来确定有序图像集，其中，所述有序图像集至少基于所述物品列表的类别进行排序；使用来自...

【专利技术属性】
技术研发人员：贝尔坎，
申请(专利权)人：电子湾有限公司，
类型：发明
国别省市：