数据描述方法及装置、计算机可读介质和电子设备制造方法及图纸

本公开提供一种数据描述方法及装置、计算机可读介质和电子设备，涉及数据处理技术领域。该方法包括：获取输入数据；确定输入数据的第一特征信息以及确定用于描述输入数据的至少一种目标数据类型；获取目标数据类型对应的描述数据以及描述数据关联的第二特征信息；根据第一特征信息和第二特征信息从描述数据中匹配目标描述数据，以基于目标描述数据跨模态表征描述输入数据。本公开能够根据输入数据与描述数据的特征信息，匹配目标描述数据，基于目标描述数据跨模态表征描述输入数据，不仅能够有效提升数据匹配转换效率，同时有效降低计算量，使多模态数据之间的转换能够在移动终端上实现，降低部署成本。降低部署成本。降低部署成本。

【技术实现步骤摘要】
数据描述方法及装置、计算机可读介质和电子设备


[0001]本公开涉及数据处理
，具体涉及一种数据描述方法、数据描述装置、计算机可读介质和电子设备。

技术介绍

[0002]伴随着人们生活水平的不断提高，智能手机、ipad等移动终端在人们的生活中越来越重要。文本检索图像技术和图像生成文本技术是两个最常见的图文多模态任务。
[0003]目前，相关的技术方案中的文本检索图像的任务与图像生成文本的任务，不仅匹配准确率低，并且由于所需要消耗的计算量较大，部署到终端侧时尤其是移动终端侧时，部署成本较高并且难度较大。

技术实现思路

[0004]本公开的目的在于提供一种数据描述方法、数据描述装置、计算机可读介质和电子设备，进而至少在一定程度上克服文本检索图像的任务与图像生成文本的任务匹配准确率低，并且同时部署到终端侧尤其是移动终端侧时部署成本较高并且难度较大的问题。
[0005]根据本公开的第一方面，提供一种数据描述方法，包括：
[0006]获取输入数据；
[0007]确定所述输入数据的第一特征信息以及确定用本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据描述方法，其特征在于，应用于移动终端，包括：获取输入数据；确定所述输入数据的第一特征信息以及确定用于描述所述输入数据的至少一种目标数据类型；获取所述目标数据类型对应的描述数据以及所述描述数据关联的第二特征信息；根据所述第一特征信息和所述第二特征信息从所述描述数据中匹配目标描述数据，以基于所述目标描述数据跨模态表征描述所述输入数据。2.根据权利要求1所述的方法，其特征在于，所述描述数据至少包括文本数据和图像数据；所述方法还包括：提取所述文本数据对应的关键词，并将所述关键词与所述文本数据关联，作为文本数据类型的描述数据；提取所述图像数据对应的图像标签，并将所述图像标签与所述图像数据关联，作为图像数据类型的描述数据；基于所述关键词与所述图像标签确定所述文本数据类型的描述数据与所述图像数据类型的描述数据之间的匹配关系，以根据所述匹配关系实现所述文本数据与所述图像数据之间的相互转换描述。3.根据权利要求2所述的方法，其特征在于，所述提取所述文本数据对应的关键词，包括：对所述文本数据进行分词处理提取所述文本数据的关键词；以及所述提取所述图像数据对应的图像标签，包括：通过多标签模型提取所述图像数据的图像标签。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取在相册应用中输入的文本数据，并确定所述文本数据的关键词；获取所述相册应用中存储的相册图像对应的图像标签，并计算所述关键词与所述图像标签的相似度；根据所述相似度从所述相册图像中确定目标相册图像，并将所述目标相册图像按照所述相似度进行排序并展示。5.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取待描述的图像数据，并确定所述图像数据的图像标签；获取数据库中存储的文本数据的关键词，计算所述图像标签与所述关键词的相似度，并根据所述相似度从所述文本数据中确定目标文本数据；或者根据所述图像标签生成目标文本数据。6.根据权利要求5所述的方法，其特征在于，根据所述图像标签生成目标文本数据，包括：根据预设的文本语法模型确定所述图像标签之间的排列顺序以及连接词；通过所述排列顺序、所述连接词、所述图像标签生成用于描述所述图像数据的目标文本数据。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取预先收集的不同所述目标数据类型下的描述数据，并提取所述描述数据对应的第
二特征信息；将所述描述数据与所述第二特征信息进行关联，并存储到数据库中。8.根据权利要求1所述的方法，其特征在于，所述方法还包括：将所述输入数据作为新的描述数据，以及将所述第一特征信息作为所述新的描述数据的第二特征信息；将所述新的描述数据和所述新的描...

【专利技术属性】
技术研发人员：张有才，李亚乾，郭彦东，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：