一种数据读取的方法、装置及云存储系统制造方法及图纸

技术编号:26478410 阅读:27 留言:0更新日期:2020-11-25 19:22
本申请提供一种数据读取的方法、装置及云存储系统,当所述方法应用于云存储系统中用于为客户端提供目标数据的目标存储节点时,所述方法包括:接收客户端发送的数据读取请求,所述数据读取请求包括待读取的目标数据的目标存储路径;根据所述目标存储路径,判断本节点是否已存储所述目标数据;若本节点没有存储所述目标数据,则从所述目标存储路径对应的源存储节点中请求所述目标数据,并将所述目标数据返回所述客户端。本实施例可以适用于数据即存即取的应用场景,能够在备份数据未及时完成同步的情况下实现对数据的立即读取,并且不会改变用户读取数据的接口,提高用户成功读取数据的概率,从而提升了云存储系统的性能。

【技术实现步骤摘要】
一种数据读取的方法、装置及云存储系统
本申请涉及云存储
,尤其涉及一种数据读取的方法、装置及云存储系统。
技术介绍
云存储系统是一个以数据存储和管理为核心的云计算系统,是指通过集群应用、网络技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的系统,其可以保证数据的安全性,并节约存储空间。当用户使用云存储服务时,将私有数据上传到云端进行存储,数据的安全性是用户最关心的问题。在保证数据安全性方面,云存储系统为同一份数据存储多个副本,同时使用合理的副本布局策略将其尽可能地分散存储,这样可以将用户并行的读取请求分散到存储副本的存储节点上,有利于减轻源存储节点的负载,提高系统的响应速度。然而,上述将用户并行的读取请求分散到存储副本的存储节点上的前提条件是源存储节点中存储的数据已经同步到备份存储节点中,但在实际应用场景中,存在源存储节点中的数据未同步至备份存储节点但要从备份存储节点读取该数据的即存即取的情况,这种情况会导致用户从备份存储节点读取数据失败。...

【技术保护点】
1.一种数据读取方法,其特征在于,所述方法应用于云存储系统中用于为客户端提供目标数据的目标存储节点,所述方法包括:/n接收客户端发送的数据读取请求,所述数据读取请求包括待读取的目标数据的目标存储路径,其中,所述数据读取请求为所述客户端向管理节点或具有管理功能的存储节点发送分配存储节点请求,并根据所述管理节点或具有管理功能的存储节点返回的地址信息与本存储节点建立连接后,向本存储节点发送的请求;/n根据所述目标存储路径,判断本节点是否已存储所述目标数据;/n若本节点没有存储所述目标数据,则从所述目标存储路径对应的源存储节点中请求所述目标数据,并将所述目标数据返回所述客户端。/n

【技术特征摘要】
1.一种数据读取方法,其特征在于,所述方法应用于云存储系统中用于为客户端提供目标数据的目标存储节点,所述方法包括:
接收客户端发送的数据读取请求,所述数据读取请求包括待读取的目标数据的目标存储路径,其中,所述数据读取请求为所述客户端向管理节点或具有管理功能的存储节点发送分配存储节点请求,并根据所述管理节点或具有管理功能的存储节点返回的地址信息与本存储节点建立连接后,向本存储节点发送的请求;
根据所述目标存储路径,判断本节点是否已存储所述目标数据;
若本节点没有存储所述目标数据,则从所述目标存储路径对应的源存储节点中请求所述目标数据,并将所述目标数据返回所述客户端。


2.根据权利要求1所述的方法,其特征在于,所述根据所述目标存储路径,判断本节点是否已存储所述目标数据,包括:
在本地保存的路径映射表中查找所述目标存储路径,所述路径映射表用于记录本地已存储的数据的本地存储路径与源存储路径的映射关系;
若所述路径映射表中不存在与所述目标存储路径相同的源存储路径,则判定本节点没有存储所述目标数据;
若所述路径映射表中存在与所述目标存储路径相同的源存储路径,则判定本节点已存储所述目标数据。


3.根据权利要求1或2所述的方法,其特征在于,所述目标存储路径包括目标存储卷标识;所述从所述目标存储路径对应的源存储节点中请求所述目标数据,包括:
在预设的用于记录存储卷标识与IP地址的映射表中查找所述目标存储卷标识,获得与所述目标存储卷标识对应的IP地址,作为所述源存储节点的IP地址;
根据所述源存储节点的IP地址建立与所述源存储节点的连接,并从所述源存储节点中请求与所述目标存储路径对应的目标数据。


4.根据权利要求1所述的方法,其特征在于,在将所述目标数据返回所述客户端之后,所述方法还包括:
删除所述目标数据。


5.根据权利要求1或2或4所述的方法,其特征在于,所述方法还包括:
接收所述源存储节点发送的所述目标数据的备份数据,并将该备份数据存储在本地。


6.一种数据读取装置,其特征在于,所述装置应用于云存储系统中用于为客户端提供目标数据的目标存储节点,所述装置包括:
数据读取请求接收模块,用于接收客户端发送的数据读取请求,所述数据读取请求包括待读取的目标数据的目标存储路径,其中,所述数据读取请求为所述客户端向管理节点或具有管理功能的存储节点发送分配存储节点请求,并根据所述管理节点或具有管理功能的存储节点返回的地址信息与本存储节点建立连接后,向本存储节点发送的请求;
存储判断模块,用于根据所述目标存储路径,判断本节点是否已存储所述目标数据;
目标数据获取模块,用于若本节点没有存储所述目标数据,则从所述目标存储路径对应的源存储节点中请求所述目标数据;
数据返回模块,用于将所述目标数据返回所述客户端。


7.一种云存储系统,其特征在于,所述云存储系统包括:管理节点以及多个存储节点,所述存储节点包括源存储节点以及备份存储节点;其中,
所述管理节点,用于在接收到客户端发送的存储节点分配请求以后,从多个存储节点中选取一存储节点作为用于为所述客户端提供目标数据的目标存储节点,并将所述目标存储节点的地址信息返回所述客户端;
所述目标存储节点,用于接收所述客户端发送的、包含待读取的目标数据的目标存储路径的数据读取请求,根据所述目标存储路径,判断本节点是否已存储所述目标数据;若本节点没有存储所述目标数据,则从所述目标存储路...

【专利技术属性】
技术研发人员:包国强潘习文林起芊
申请(专利权)人:杭州海康威视系统技术有限公司
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1