一种CEPH存储对象搜索方法、装置及存储设备制造方法及图纸

技术编号:24251642 阅读:54 留言:0更新日期:2020-05-22 23:37
本发明专利技术涉及存储技术领域,具体涉及一种CEPH存储对象搜索方法、装置及存储设备。本发明专利技术通过调用CEPH RGW API查询对象元数据信息,按照用户、桶、对象进行分类分表保存,通过提供REST API接口给应用进行对象查询。按照用户、桶、对象进行分类分表,提高查询效率,通过按照用户到桶,然后再到对象分层索引,可以提供模糊、分页查询。基于REST API协议及数据库存储,大大降低应用成本,及二次开发成本。

A search method, device and storage device of CEPH storage object

【技术实现步骤摘要】
一种CEPH存储对象搜索方法、装置及存储设备
本专利技术涉及存储
,具体涉及一种CEPH存储对象搜索方法、装置及存储设备。
技术介绍
Ceph是一个可靠、自动重均衡、自动恢复的分布式存储系统,根据场景划分可以将Ceph分为三大块,分别是对象存储、块设备和文件系统服务。Ceph的主要优点是分布式存储,在存储每一个数据时,都会通过计算得出该数据存储的位置,尽量将数据分布均衡,不存在传统的单点故障的问题,可以水平扩展。尽管CEPH目前已经很好地支持了对象存储,用户可以通过S3API接口来操作存储桶、对象以及获取对象,但是CEPH本身并不支持对象搜索的功能。针对对象搜索功能,ElasticSearch可通过以下两种方案解决:1、前端应用将对象上传给CEPHRGW中,并把这个对象的自定义元数据发送到ElasticSearch中。对外提供ElasticSearch通用接口,当用户需要获取某个对象信息时,向ElasticSearch发送查询请求来获取对象。2、通过CEPHRGW同步插件,在前端应用上传对象到CEPHRGW中时,同步对象元数据到ElasticSearch中。对外提供ElasticSearch通用接口,当用户需要获取某个对象信息时,向ElasticSearch发送查询请求来获取对象。但是上述两种方案均存在问题,如:1、ElasticSearch都是直接同步对象元数据,并没有对数据进行索引。所以并不能支持模糊、分页查询。2、ElasticSearch部署成本较高,且不易维护。3、ElasticSearch必须独立部署,且不支持和应用集成。
技术实现思路
针对现有技术中的问题,本专利技术目提供了一种CEPH存储对象搜索方法、装置及存储设备。一方面,本专利技术提供了一种CEPH存储对象搜索方法,应用于存储设备,所述方法包括:通过CEPHRGWAPI接口向CEPHRGW发送上传对象请求,并将对象上传至CEPHRGW,上传成功后CEPHRGW返回对象信息;通过CEPHRGW提供的CEPHRESTAPI接口查询对象元数据信息,所述对象元数据信息包括用户、桶、对象类型、对象名称、创建时间和大小等;按照对象元数据信息中的内容将对象的元数据分别存储至数据库中;通过CEPHRESTAPI接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,从而从数据库中查询到拟查询的对象。可选地,所述按照对象元数据信息中的内容将对象的元数据分别存储至数据库中,包括:按照用户、桶和对象类型将对象的元数据分别分表存储至数据库中;每个用户一个表用于存储该用户下对象的元数据信息,每个桶一个表用于存储该桶下对象的元数据信息,每个对象类型一个表用于存储该对象类型下对象的元数据信息。可选地,所述通过CEPHRESTAPI接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,包括:通过调用CEPHRESTAPI接口向CEPHRGW发送查询请求;CEPHRGW返回查询响应,并返回请求对象元数据信息。另一方面,本专利技术提供了一种CEPH存储对象搜索装置,运行于存储设备,所述搜索装置包括:对象上传模块,用于通过CEPHRGWAPI接口向CEPHRGW发送上传对象请求,并将对象上传至CEPHRGW,上传成功后CEPHRGW返回对象信息;元数据查询模块,用于通过CEPHRGW提供的CEPHRESTAPI接口查询对象元数据信息,所述对象元数据信息包括用户、桶、对象类型、对象名称、创建时间和大小等;元数据存储模块,用于按照对象元数据信息中的内容将对象的元数据分别存储至数据库中;对象查询模块,用于通过CEPHRESTAPI接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,从而从数据库中查询到拟查询的对象。可选地,所述对象查询模块包括请求发送模块和数据返回模块。请求发送模块,用于通过调用CEPHRESTAPI接口向CEPHRGW发送查询请求;数据返回模块,用于供CEPHRGW返回查询响应,并返回请求对象元数据信息。第三方面,本专利技术还提供了一种存储设备,所述存储设备包括处理器和存储器,所述处理器和所述存储器通过总线电连接;所述存储器中存储有程序代码;所述处理器,用于通过所述总线从所述存储器中读取并运行所述程序代码,执行上述的方法。本专利技术具有以下有益效果:本专利技术通过调用CEPHRGWAPI查询对象元数据信息,按照用户、桶、对象进行分类分表保存,通过提供RESTAPI接口给应用进行对象查询。按照用户、桶、对象进行分类分表,提高查询效率,通过按照用户到桶,然后再到对象分层索引,可以提供模糊、分页查询。基于RESTAPI协议及数据库存储,大大降低应用成本,及二次开发成本。附图说明为了更清楚地说明本专利技术实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1是本专利技术实施例中所述的一种CEPH存储对象搜索方法流程示意图;图2是本专利技术实施例中所述的一种CEPH存储对象搜索装置结构框图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本专利技术实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本专利技术的实施例的详细描述并非旨在限制要求保护的本专利技术的范围,而是仅仅表示本专利技术的选定实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本专利技术的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。如图1所示,本申请实施例提供了一种CEPH存储对象搜索方法,应用于存储设备,所述方法包括步骤S10、步骤S20、步骤S30和步骤S40。步骤S10:通过CEPHRGWAPI接口向CEPHRGW发送上传对象请求,并将对象上传至CEPHRGW,上传成功后CEPHRGW返回对象信息。步骤S20:通过CEPHRGW提供的CEPHRESTAPI接口查询对象元数据信息,所述对象元数据信息包括用户、桶、对象类型、对象名称、创建时间和大小等。步骤S30:按照对象元数据信息中的内容将对象的元数据分别存储至数据库中。具体的,本步骤按照用户、桶和对象类型将对象的元数据分别分表存储至数据库中;每个用户一个表用于存储该用户下对象的元数据信息,每个桶一个表用于存储该桶下对象的元数据信息,每个对象类型一本文档来自技高网
...

【技术保护点】
1.一种CEPH存储对象搜索方法,其特征在于,应用于存储设备,所述方法包括:/n通过CEPH RGW API接口向CEPH RGW发送上传对象请求,并将对象上传至CEPH RGW,上传成功后CEPH RGW返回对象信息;/n通过CEPH RGW提供的CEPH REST API接口查询对象元数据信息;/n按照对象元数据信息中的内容将对象的元数据分别存储至数据库中;/n通过CEPH REST API接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,从而从数据库中查询到拟查询的对象。/n

【技术特征摘要】
1.一种CEPH存储对象搜索方法,其特征在于,应用于存储设备,所述方法包括:
通过CEPHRGWAPI接口向CEPHRGW发送上传对象请求,并将对象上传至CEPHRGW,上传成功后CEPHRGW返回对象信息;
通过CEPHRGW提供的CEPHRESTAPI接口查询对象元数据信息;
按照对象元数据信息中的内容将对象的元数据分别存储至数据库中;
通过CEPHRESTAPI接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,从而从数据库中查询到拟查询的对象。


2.根据权利要求1所述的CEPH存储对象搜索方法,其特征在于:所述元数据信息包括用户、桶和对象类型。


3.根据权利要求2所述的CEPH存储对象搜索方法,其特征在于,所述按照对象元数据信息中的内容将对象的元数据分别存储至数据库中,包括:
按照用户、桶和对象类型将对象的元数据分别分表存储至数据库中;每个用户一个表用于存储该用户下对象的元数据信息,每个桶一个表用于存储该桶下对象的元数据信息,每个对象类型一个表用于存储该对象类型下对象的元数据信息。


4.根据权利要求2所述的CEPH存储对象搜索方法,其特征在于,所述通过CEPHRESTAPI接口按照对象元数据信息中的内容进行对象的元数据查询,将查询到的元数据返回,包括:
通过调用CEPHRESTAPI接口...

【专利技术属性】
技术研发人员:李梦飞
申请(专利权)人:深圳创新科技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1