文件存储的实现方法、装置、及计算机设备制造方法及图纸

技术编号:23315028 阅读:23 留言:0更新日期:2020-02-11 17:46
本发明专利技术公开了文件存储的实现方法、装置、计算机设备及存储介质。该方法包括接收用户端上传的用户请求;根据用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址;将目标存储地址发送至用户端;接收用户端根据目标存储地址上传的待存储文件,并存储至对应的目标存储集群。该方法采用轻量级架构的文件系统存储中小型文件和直接定位的文件寻址,实现了分布式文件存储系统对的自动同步和失败自动修复,并且在资源消耗极低、运营维护简单的同时提高了数据安全性。

Implementation method, device and computer equipment of file storage

【技术实现步骤摘要】
文件存储的实现方法、装置、及计算机设备
本专利技术涉及文件存储
,尤其涉及一种文件存储的实现方法、装置、计算机设备及存储介质。
技术介绍
很多公司对文件存储目前采用的是挂载共享目录的方式,多个系统共用一个存储盘,不同项目以存储目录区分。每次上线新项目必须为项目挂载共享目录,导致上线过程繁琐,运营维护复杂,并且没有文件上传、下载、查看的权限校验,存在很大的安全隐患。目前市面上适合中小型文件存储的分布式文件系统有FASTDFS文件系统,存在数据安全性问题,缺乏自动化恢复机制,数据恢复效率低,缺乏多机房容灾支持,由于单机存储受限于inode数量,存储空间利用率低。对于运营维护来说,部署复杂,日常维护繁琐。
技术实现思路
本专利技术实施例提供了一种文件存储的实现方法、装置、计算机设备及存储介质,旨在解决目前现有技术中挂载共享目录文件存储方式日常运营维护复杂、过程繁琐和数据安全性低的问题。第一方面,本专利技术实施例提供了一种文件存储的实现方法,其包括:接收用户端上传的用户请求;根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址;将所述目标存储地址发送至所述用户端;接收所述用户端根据所述目标存储地址上传的待存储文件,并存储至对应的目标存储集群。第二方面,本专利技术实施例提供了一种文件存储的实现装置,其包括:第一接收单元,用于接收用户端上传的用户请求;负载均衡策略单元,用于生成与IP地址对应的目标存储集群的目标存储地址;第一发送单元,用于将所述目标存储地址发送至所述用户端;存储单元,用于存储所述用户端根据所述目标存储地址上传的待存储文件。第三方面,本专利技术实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的文件存储的实现方法。第四方面,本专利技术实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的文件存储的实现方法。本专利技术实施例提供了一种文件存储的实现方法、装置、计算机设备及存储介质。该方法采用轻量级架构的文件系统存储中小型文件和直接定位的文件寻址,实现了自动同步和失败自动修复,并且在资源消耗极低、运营维护简单的同时提高了数据安全性。附图说明为了更清楚地说明本专利技术实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的文件存储的实现方法的应用场景示意图;图2为本专利技术实施例提供的文件存储的实现方法的流程示意图;图3为本专利技术实施例提供的文件存储的实现方法的子流程示意图;图4为本专利技术实施例提供的文件存储的实现方法的另一子流程示意图;图5为本专利技术实施例提供的文件存储的实现装置的示意性框图;图6为本专利技术实施例提供的文件存储的实现装置的子单元示意性框图;图7为本专利技术实施例提供的文件存储的实现装置的另一子单元示意性框图;图8为本专利技术实施例提供的计算机设备的示意性框图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。还应当理解,在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。还应当进一步理解,在本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。请参阅图1和图2,图1为本专利技术实施例提供的文件存储的实现方法的应用场景示意图;图2为本专利技术实施例提供的文件存储的实现方法的流程示意图,该文件存储的实现方法应用于服务器中,该方法通过安装于服务器中的应用软件进行执行。如图2所示,该方法包括步骤S110~S140。S110、接收用户端上传的用户请求。在本实施例中,具体的应用场景为企业给业务或者项目文件进行上传服务器存储,需要操作用户端(如智能手机、平板电脑等)在线上发送用户请求指令至服务器上。其中,所述用户请求包括上传请求和下载请求;所述上传请求是请求将待存储文件从用户端发送至文件存储服务器;所述下载请求是请求将存储文件从所述文件存储服务器发送至所述用户端。S120、根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址。在本实施例中,服务器在接收到所述用户端上传的用户请求之前按要求设置可行的负载均衡策略并预先储存在服务器中,在接收到所述用户端上传的用户请求之后,若所述用户请求为上传请求,服务器会读取所述用户请求对应的IP地址,根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址。其中,该文件存储系统为分布式文件系统go-fastdfs,go-fastdfs是一个基于http协议的分布式文件系统,使用go语言开发,具有高性能、高可靠的特点。在一实施例中,如图3所示,在所述步骤S120还包括:S121、接收各存储集群对用户端的存储地址,根据哈希函数对各存储集群的存储地址生成存储地址哈希值,接收存储地址哈希值及IP哈希值一一映射的配置指令,生成存储地址哈希值及IP哈希值映射表。在本实施例中,在服务器接收了所述用户端上传对用户请求之后,因为需要一个关于各存储集群的存储地址对应的IP哈希值的映射表以最终确定目标存储地址,所以首先写入各存储集群对所述用户端的存储地址。该分布式文件系统采用无中心化设计,并且支持所有节点同时读取和写入,有利于公司存储文件的快速处理,提高了文件存储的运营管理效率。在接收了各存储集群对用户端的存储地址之后,通过预先设定好的哈希函数对各存储集群的存储地址运算生成存储地址哈希值。预先编写好储地址哈希值及IP哈希值一一映射的配置指令,服务器对各存储集群的存储地址运算生成存储地址哈希值之后,接收读取该配置指令,存储地址哈希值与IP哈希值一一对应生成存储地址哈希值及IP哈希值映本文档来自技高网...

【技术保护点】
1.一种文件存储的实现方法,其特征在于,包括:/n接收用户端上传的用户请求;/n根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址;/n将所述目标存储地址发送至所述用户端;/n接收所述用户端根据所述目标存储地址上传的待存储文件,并存储至对应的目标存储集群。/n

【技术特征摘要】
1.一种文件存储的实现方法,其特征在于,包括:
接收用户端上传的用户请求;
根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址;
将所述目标存储地址发送至所述用户端;
接收所述用户端根据所述目标存储地址上传的待存储文件,并存储至对应的目标存储集群。


2.根据权利要求1所述的文件存储的实现方法,其特征在于,所述根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址,包括:
根据负载均衡策略中对应的哈希函数对所述用户请求对应的IP地址进行哈希运算,得到与所述IP地址相对应的目标IP哈希值;
根据所述目标IP哈希值及各存储集群对应的IP哈希值,获取所述IP哈希值对应的目标存储集群的目标存储地址。


3.根据权利要求1所述的文件存储的实现方法,其特征在于,所述根据所述用户请求对应的IP地址及预先存储的负载均衡策略,生成与IP地址对应的目标存储集群的目标存储地址之前,还包括:
接收各存储集群对用户端的存储地址;
根据哈希函数对各存储集群的存储地址生成存储地址哈希值;
接收存储地址哈希值及IP哈希值一一映射的配置指令,生成存储地址哈希值及IP哈希值映射表;其中,所述存储地址哈希值及IP哈希值映射表中每一条数据对应一个IP哈希值与存储地址哈希值的映射关系。


4.根据权利要求1所述的文件存储的实现方法,其特征在于,所述接收所述用户端根据所述目标存储地址上传的待存储文件,并存储至对应的目标存储集群,包括:
判断所述待存储文件的数据大小是否超出预先设置的数据量阈值;
若所述待存储文件的数据大小超出预先设置的数据量阈值,将预先存储的分块指令发送至所述用户端。


5.根据权利要求4所述的文件存储的实现方法,其特征在于,所述若所述待存储文件的数据大小超出预先设置的数据量阈值,将预先存储的分块指令发送至用户端之后,还包括:
接收...

【专利技术属性】
技术研发人员:黄波
申请(专利权)人:深圳前海环融联易信息科技服务有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1