数据处理方法、装置、电子设备及存储介质制造方法及图纸

本公开提供一种数据处理方法、装置、电子设备及存储介质，包括：接收目标数据，并对所述目标数据进行格式化处理得到格式化处理后的目标数据；确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件；响应于确定所述格式化处理后的目标数据满足所述约束条件，对所述格式化处理后的目标数据进行整合处理得到目标数据集。本公开中首先对目标数据进行了格式化处理并得到格式化处理后的目标数据，然后基于格式化处理后的目标数据的类型生成了约束条件，最后对满足约束条件的格式化处理后的目标数据进行整合处理并得到了目标数据集。数据集。数据集。

【技术实现步骤摘要】
数据处理方法、装置、电子设备及存储介质


[0001]本专利技术涉及电子信息
，尤其涉及一种数据处理方法、装置、电子设备及存储介质。

技术介绍

[0002]元数据(Metadata),又称中介数据，中继数据，为描述数据的数据(data about data),主要是描述数据的属性(property)的信息，用来支持存储、使用和追溯。如存储位置、历史数据、资源查找、文件记录等功能。元数据按其描述对象的不同可以分3大类：技术元数据、业务元数据和管理元数据。
[0003]在现有技术中，元数据都是单独独立存储在各个系统的文件服务器上，并且跟自己的业务进行深度融合。由于各系统之间的元数据无法方便快捷的进行共享和应用，因此造成了大量的人力和资源成本的浪费。

技术实现思路

[0004]有鉴于此，本公开的目的在于提出一种数据处理方法、装置、电子设备及存储介质。
[0005]作为本公开的一个方面，提供了一种数据处理方法，其特征在于，包括：
[0006]接收目标数据，并对所述目标数据进行格式化处理得到格式化处理后的目标数据；
[0007]确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件；
[0008]响应于确定所述格式化处理后的目标数据满足所述约束条件，对所述格式化处理后的目标数据进行整合处理得到目标数据集；
[0009]可选的，所述对所述目标数据进行格式化处理并得到格式化处理后的目标数据，包括：
[0010]获取所述目标数据的存储格式；
>[0011]响应于所述目标数据的存储格式满足预设的存储格式，对所述目标数据进行二进制转化处理。
[0012]可选的，所述格式化处理后的目标数据的类型包括文档数据、图像数据和视频数据中的至少一种。
[0013]可选的，所述确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件，包括：
[0014]响应于所述格式化处理后的目标数据为文档数据，生成第一约束条件；
[0015]响应于所述格式化处理后的目标数据为图像数据，生成第二约束条件。
[0016]可选的，所述响应于所述格式化处理后的目标数据为文档数据，生成第一约束条件，包括：
[0017]获取所述文档数据的文字错误率、发送端口以及文档的占用空间；
[0018]响应于所述文字错误率、发送端口以及文档的占用空间不大于第一预设值，生成第一约束条件。
[0019]可选的，所述响应于所述格式化处理后的目标数据为图像数据，生成第二约束条件，包括：
[0020]获取所述图像数据的像素信息、图像的占用空间以及目标对象在所述图像数据中的占比；
[0021]响应于所述像素信息、图像的占用空间以及目标对象在所述图像数据中的占比不大于第二预设值，生成第二约束条件。
[0022]可选的，所述响应于确定所述格式化处理后的目标数据满足所述约束条件，对所述格式化处理后的目标数据进行整合处理得到目标数据集，包括：
[0023]响应于确定所述格式化处理后的目标数据满足所述第一约束条件和/或第二约束条件，基于预设的非结构化组件对所述格式化处理后的目标数据进行整合处理，并得到目标数据集。
[0024]作为本公开的第二个方面，本公开还提供了一种数据处理装置，包括：
[0025]格式化处理模块，被配置为：接收目标数据，并对所述目标数据进行格式化处理得到格式化处理后的目标数据；
[0026]约束条件生成模块，被配置为：确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件；
[0027]数据处理模块，被配置为：响应于确定所述格式化处理后的目标数据满足所述约束条件，对所述格式化处理后的目标数据进行整合处理得到目标数据集。
[0028]作为本公开的第三个方面，本公开还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现本公开所提供的上述数据处理方法。
[0029]作为本公开的第四个方面，本公开还提供了一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令用于使计算机执行如上任意一项所述的方法。
[0030]如上所述，本公开提供了一种数据处理方法、装置、电子设备及存储介质。在本公开中首先对目标数据进行了格式化处理，并得到格式化处理后的目标数据，然后基于格式化处理后的目标数据的类型生成了约束条件，最后对满足约束条件的格式化处理后的目标数据进行整合处理并得到了目标数据集。
附图说明
[0031]为了更清楚地说明本公开或相关技术中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0032]图1A为本公开实施例所提供的一种数据处理方法示意图。
[0033]图1B为本公开实施例所提供的一种生成第一约束条件的方法示意图。
[0034]图1C为本公开实施例所提供的一种生成第二约束条件的方法示意图。
[0035]图2为本公开实施例所提供的一种数据处理装置结构示意图。
[0036]图3为本公开实施例所提供的一种数据处理方法的电子设备结构示意图。
具体实施方式
[0037]为使本公开的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本公开进一步详细说明。
[0038]需要说明的是，除非另外定义，本公开实施例使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开实施例中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变后，则该相对位置关系也可能相应地改变。
[0039]如
技术介绍
所述，元数据都是单独储存的，当某一方(公司或者个人)需要对预先储存的元数据进行调取时，其只有向此元数据的创建者进行申请后，才可以获取到该元数据的具体内容。基于此种现有的模式，会使得元数据无法方便快捷的进行共享和应用，并还可能由此造成了大量的人力和资源成本的浪费。
[0040]为了解决上述问题，本公开提供了一种数据处理方法、装置、电子设备及存储介质。通过上述方法，在本公开中首先对存储格式符合标准的目标数据进行了格式化处理，并得到格式化处理后的目标数据，然后基于格式化处理后的目标数据的类型生成了第一约束条件(文档数据约束条件)和第二约本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：接收目标数据，并对所述目标数据进行格式化处理得到格式化处理后的目标数据；确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件；响应于确定所述格式化处理后的目标数据满足所述约束条件，对所述格式化处理后的目标数据进行整合处理得到目标数据集。2.根据权利要求1所述的方法，其特征在于，所述对所述目标数据进行格式化处理并得到格式化处理后的目标数据，包括：获取所述目标数据的存储格式；响应于所述目标数据的存储格式满足预设的存储格式，对所述目标数据进行二进制转化处理。3.根据权利要求1所述的方法，其特征在于，所述格式化处理后的目标数据的类型包括文档数据、图像数据和视频数据中的至少一种。4.根据权利要求3所述的方法，其特征在于，所述确定所述格式化处理后的目标数据的类型，并基于所述类型生成约束条件，包括：响应于所述格式化处理后的目标数据为文档数据，生成第一约束条件；响应于所述格式化处理后的目标数据为图像数据，生成第二约束条件。5.根据权利要求4所述的方法，其特征在于，所述响应于所述格式化处理后的目标数据为文档数据，生成第一约束条件，包括：获取所述文档数据的文字错误率、发送端口以及文档的占用空间；响应于所述文字错误率、发送端口以及文档的占用空间不大于第一预设值，生成第一约束条件。6.根据权利要求5所述的方法，其特征在于，所述响应于所述格式化处理后的目标数据为图像数据，...

【专利技术属性】
技术研发人员：王东强，范永学，曹帅帅，李慧，
申请(专利权)人：国网信息通信产业集团有限公司，
类型：发明
国别省市：