【技术实现步骤摘要】
数据的多存储方法、装置、电子设备及计算机存储介质
本专利技术涉及云存储
,尤其涉及一种数据的多存储方法、装置、电子设备及计算机可读存储介质。
技术介绍
随着信息时代的来临,数据成为企业最重要的资产,对企业来讲数据多存储是一个很重要的需求。所述数据多存储是指将企业中数据存储至多个服务器中,保证一处服务器损坏时,其他服务器还能保证数据的安全。目前行业内具有,例如分布式文件系统TFS、对象存储系统BOS等等多种文件存储服务,但是这些存储服务都有各自的优缺点,企业不适合将数据保存到其中一个存储服务里,因为所有数据存储至同一类型的数据库中,容易造成数据丢失,此外所述存储服务发生意外时,容灾性差。
技术实现思路
本专利技术提供一种数据的多存储方法、装置、电子设备及计算机可读存储介质,其主要目的在于实现智能化的数据多存储,增加数据存储容灾性,解决存储效率低的问题。为实现上述目的,本专利技术提供的一种数据的多存储方法,包括:根据预设的不同存储逻辑的产品存储服务构建多个云数据库;获取预设工作系 ...
【技术保护点】
1.一种数据的多存储方法,其特征在于,所述方法包括:/n根据预设的不同存储逻辑的产品存储服务构建多个云数据库;/n获取预设工作系统中的产品数据,并对所述产品数据进行删重及分块处理,得到数据块集;/n构建存储策略模型,利用所述存储策略模型计算每个所述数据块与所述产品存储服务的适合度;/n根据所述适合度,将所述数据块存储至适合度最高的产品存储服务对应的云数据库中。/n
【技术特征摘要】
1.一种数据的多存储方法,其特征在于,所述方法包括:
根据预设的不同存储逻辑的产品存储服务构建多个云数据库;
获取预设工作系统中的产品数据,并对所述产品数据进行删重及分块处理,得到数据块集;
构建存储策略模型,利用所述存储策略模型计算每个所述数据块与所述产品存储服务的适合度;
根据所述适合度,将所述数据块存储至适合度最高的产品存储服务对应的云数据库中。
2.如权利要求1所述的数据的多存储方法,其特征在于,所述构建存储策略模型,包括:
获取样本数据集,其中所述样本数据集包括所述预设工作系统的历史数据,以及所述历史数据对应的不同产品存储服务的匹配度集;
利用所述样本数据集中的历史数据以及对应的匹配度集对预先构建的存储策略模型进行训练,得到训练完成的存储策略模型。
3.如权利要求2所述的数据的多存储方法,其特征在于,所述利用所述样本数据集中的历史数据以及对应的匹配度集对预先构建的存储策略模型进行训练,得到训练完成的存储策略模型,包括:
将所述样本数据集进行量化及清洗操作,得到量化数据;
利用动量算法,设置训练过程中梯度下降方向;
根据所述梯度下降方向,利用所述量化数据对所述存储策略模型进行K折交叉校验训练,得到训练完成的存储策略模型。
4.如权利要求3所述的数据的多存储方法,其特征在于,所述根据所述梯度下降方向,利用所述量化数据对所述存储策略模型进行K折交叉校验训练,得到训练完成的存储策略模型,包括:
步骤I、将所述量化数据等比例划分成K份;
步骤II、选择其中的K-1份量化数据作为训练数据以及剩余的1份量化数据作为测试数据,利用所述存储策略模型对所述训练数据进行分类计算,得到所述训练数据中的历史数据与不同产品存储服务的适合度;
步骤III、根据计算得到的适合度与所述匹配度集计算所述存储策略模型的误差值,并判断所述误差值与预设的误差阈值的大小关系;
步骤IV、若所述误差值大于所述误差阈值,调整所述存储策略模型的内部参数,根据所述梯度下降方向,返回上述的步骤II,直至所述误差值小于所述误差阈值,执行步骤V;
步骤V、利用所述测试数据对所述存储策略模型进行验证,在验证不合格时,返回上述的步骤II,并在所述步骤II重复了K次时,得到训练完成的存储策略模型。
5.如权利要求1所述的数据的多存储方...
【专利技术属性】
技术研发人员:李海平,杨真,
申请(专利权)人:平安银行股份有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。