非结构化数据归档方法、装置、设备及存储介质制造方法及图纸

技术编号:24168461 阅读:14 留言:0更新日期:2020-05-16 02:11
本发明专利技术提供一种非结构化数据归档方法、装置、设备及存储介质,涉及数据处理技术领域。本发明专利技术实施例中,服务可以接收客户端发送的待归档数据,将待归档数据落地至NAS,并异步将NAS中的待归档数据归档至存储产品。其中,由于NAS可以对待归档数据进行缓存,所以,当后端存储产品故障时,仍然可以继续新增待归档数据,同时还可以查询NAS中缓存的数据,从而可以在提供高可用的非结构化数据实时归档方案的同时,解决网络故障或者存储产品进程故障等所导致的存储产品不可用的问题。

Unstructured data archiving methods, devices, equipment and storage media

【技术实现步骤摘要】
非结构化数据归档方法、装置、设备及存储介质
本专利技术涉及数据处理
,具体而言,涉及一种非结构化数据归档方法、装置、设备及存储介质。
技术介绍
随着非结构化数据越来越多,当前非结构化数据归档存储产品也越来越多。而各种各样的非结构化数据的存储产品,虽然可以提供高可用的方案,但是,也会因为网络故障或者存储产品进程故障等,导致存储产品不可用。现有技术中,并没有一种有效的技术手段,可以解决上述网络故障或者存储产品进程故障等所导致的存储产品不可用的问题。
技术实现思路
本专利技术提供一种非结构化数据归档方法、装置、设备及存储介质,可以解决网络故障或者存储产品进程故障等所导致的存储产品不可用的问题。第一方面,本专利技术实施例提供一种非结构化数据归档方法,所述方法应用于服务端,所述方法包括:服务端接收客户端发送的待归档数据;服务端将所述待归档数据落地至网络附属存储NAS;服务端异步将所述NAS中的待归档数据归档至存储产品。可选地,所述服务端异步将所述NAS中的待归档数据归档至存储产品之后,所述方法还包括:服务端删除所述NAS中已被归档至存储产品的待归档数据。可选地,所述服务端维护有待归档数据记录表;所述方法还包括:服务端分别根据落地至所述NAS的待归档数据、归档至所述存储产品的待归档数据、以及所述NAS中删除的待归档数据,对所述待归档数据记录表进行更新。可选地,所述服务端将所述待归档数据落地至NAS之前,所述方法还包括:确定所述待归档数据的数据类型;相应地,所述服务端将所述待归档数据落地至NAS,包括:若所述待归档数据的数据类型满足预设要求,则将所述待归档数据落地至NAS。可选地,所述方法还包括:若所述待归档数据的数据类型不满足预设要求,则将所述待归档数据直接归档至存储产品。可选地,所述服务端与至少一个存储产品连接,且所述服务端为各所述存储产品提供统一的数据访问接口。第二方面,本专利技术实施例提供一种非结构化数据归档装置,所述装置应用于服务端,所述装置包括:接收模块,用于服务端接收客户端发送的待归档数据;落地模块,用于服务端将所述待归档数据落地至网络附属存储NAS;归档模块,用于服务端异步将所述NAS中的待归档数据归档至存储产品。可选地,所述装置还包括:清理模块,在所述服务端异步将所述NAS中的待归档数据归档至存储产品之后,用于服务端删除所述NAS中已被归档至存储产品的待归档数据。可选地,所述服务端维护有待归档数据记录表;所述装置还包括:更新模块,用于服务端分别根据落地至所述NAS的待归档数据、归档至所述存储产品的待归档数据、以及所述NAS中删除的待归档数据,对所述待归档数据记录表进行更新。可选地,所述装置还包括:确定模块,用于所述服务端将所述待归档数据落地至NAS之前,确定所述待归档数据的数据类型;相应地,所述落地模块,具体用于若所述待归档数据的数据类型满足预设要求,则将所述待归档数据落地至NAS。可选地,所述落地模块,具体还用于若所述待归档数据的数据类型不满足预设要求,则将所述待归档数据直接归档至存储产品。可选地,所述服务端与至少一个存储产品连接,且所述服务端为各所述存储产品提供统一的数据访问接口。第三方面,本专利技术实施例提供一种非结构化数据归档设备,包括:处理器、存储介质和总线,所述存储介质存储有所述处理器可执行的机器可读指令,当所述非结构化数据归档设备运行时,所述处理器与所述存储介质之间通过所述总线通信,所述处理器执行所述机器可读指令,以执行如第一方面所述的非结构化数据归档方法。第四方面,本专利技术实施例还提供一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如第一方面所述的非结构化数据归档方法。本专利技术的有益效果是:本专利技术实施例中,服务可以接收客户端发送的待归档数据,将待归档数据落地至NAS,并异步将NAS中的待归档数据归档至存储产品。其中,由于NAS可以对待归档数据进行缓存,所以,当后端存储产品故障时,仍然可以继续新增待归档数据,同时还可以查询NAS中缓存的数据,从而可以在提供高可用的非结构化数据实时归档方案的同时,解决网络故障或者存储产品进程故障等所导致的存储产品不可用的问题。附图说明为了更清楚地说明本专利技术实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本专利技术的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。图1示出了本专利技术实施例提供的非结构化数据归档方法的流程示意图;图2示出了本专利技术实施例提供的非结构化数据归档方法的另一流程示意图;图3示出了本专利技术实施例提供的非结构化数据查询方法的流程示意图;图4示出了本专利技术实施例提供的非结构化数据归档装置的结构示意图;图5示出了本专利技术实施例提供的非结构化数据归档装置的另一结构示意图;图6示出了本专利技术实施例提供的非结构化数据归档装置的又一结构示意图;图7示出了本专利技术实施例提供的非结构化数据归档装置的又一结构示意图;图8示出了本专利技术实施例提供的非结构化数据归档设备的结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本专利技术实施例的组件可以以各种不同的配置来布置和设计。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。还需要说明,“第一”、“第二”、“第三”等描述在本专利技术中仅仅用于区分功能,而不能表示相对重要性。本专利技术实施例提供一种非结构化数据归档方法,可以解决网络故障或者存储产品进程故障等所导致的存储产品不可用的问题。该非结构化数据归档方法可以应用于服务端,例如,服务端可以是服务器、计算机或其他数据处理设备。也即,该非结构化数据归档方法的执行主体可以是服务器或计算机,或者,也可以是服务器或计算机中的某一个或多个处理器等,本专利技术对此不作限制。图1示出了本专利技术实施例提供的非结构化数据归档方法的流程示意图。如图1所示,该非结构化数据归档方法,可以包括:S101、服务端接收客户端发送的待归档数据。S102、服务端将所述待归档数据落地至网络附属存储(NetworkAttachedStorage,NAS)。可选地,一些实施方式中,也可以将NAS替换为存储区域网路(StorageAreaNetwork,SAN);或者也可以是同时设置NAS和SAN,本专利技术对此不作限制。NAS可以本文档来自技高网...

【技术保护点】
1.一种非结构化数据归档方法,其特征在于,所述方法应用于服务端,所述方法包括:/n服务端接收客户端发送的待归档数据;/n服务端将所述待归档数据落地至网络附属存储NAS;/n服务端异步将所述NAS中的待归档数据归档至存储产品。/n

【技术特征摘要】
1.一种非结构化数据归档方法,其特征在于,所述方法应用于服务端,所述方法包括:
服务端接收客户端发送的待归档数据;
服务端将所述待归档数据落地至网络附属存储NAS;
服务端异步将所述NAS中的待归档数据归档至存储产品。


2.根据权利要求1所述的方法,其特征在于,所述服务端异步将所述NAS中的待归档数据归档至存储产品之后,所述方法还包括:
服务端删除所述NAS中已被归档至存储产品的待归档数据。


3.根据权利要求2所述的方法,其特征在于,所述服务端维护有待归档数据记录表;所述方法还包括:
服务端分别根据落地至所述NAS的待归档数据、归档至所述存储产品的待归档数据、以及所述NAS中删除的待归档数据,对所述待归档数据记录表进行更新。


4.根据权利要求1所述的方法,其特征在于,所述服务端将所述待归档数据落地至NAS之前,所述方法还包括:
确定所述待归档数据的数据类型;
相应地,所述服务端将所述待归档数据落地至NAS,包括:
若所述待归档数据的数据类型满足预设要求,则将所述待归档数据落地至NAS。


5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
若所述待归档数据的数据类型不满足预设要求,则将所述待归档数据直接归档...

【专利技术属性】
技术研发人员:李玉郑邦东董航
申请(专利权)人:中国建设银行股份有限公司建信金融科技有限责任公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1