【技术实现步骤摘要】
分布式存储数据处理方法和装置
本专利技术涉及数据处理领域，具体而言，涉及一种分布式存储数据处理方法和装置。
技术介绍
目前分布式存储系统CHPH实现的快照是写时拷贝COW，在打上时间点快照之后，每写入一个IO，会将对应的对象数据4M拷贝出来，写入新的对象，然后将新的数据写入对应的位置。但是，虽然目前分布式存储系统CHPH实现了快照功能，仍存在两个未解决的问题：1)每一次写IO涉及到三次IO操作(一次读原来的对象数据，一次写入新的对象，一次写入新的IO)，严重导致卷性能严重下降，根据实际测试情况，甚至可能下降一半以上；2)每次写入新的IO，需要拷贝一个4M数据的对象，存在只更新很小的数据情况下也需要占用4M的空间，导致快照占用的存储空间较大，大大浪费了存储空间，现有技术中分布式存储系统CHPH的数据处理方法存在快照占用的存储空间较大的技术问题。针对上述的问题，目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种分布式存储数据处理方法和装置，以至少解决现有技术中分布式存储系统的数据处理方法存在快照占用的存储空间较大的技术问题。根据本专利技术实施例的一个方...
【技术保护点】
1.一种分布式存储数据处理方法，其特征在于，包括：在接收到来自目标客户端的数据操作请求的情况下，检测分布式存储系统中是否配置有快照模块，其中，所述数据操作请求至少包括：数据写入请求和数据读取请求；依据检测结果确定与所述数据操作请求对应的操作方式；在操作成功的情况下，返回数据操作结果至所述目标客户端。
【技术特征摘要】
1.一种分布式存储数据处理方法，其特征在于，包括：在接收到来自目标客户端的数据操作请求的情况下，检测分布式存储系统中是否配置有快照模块，其中，所述数据操作请求至少包括：数据写入请求和数据读取请求；依据检测结果确定与所述数据操作请求对应的操作方式；在操作成功的情况下，返回数据操作结果至所述目标客户端。2.根据权利要求1所述的方法，其特征在于，检测分布式存储系统中是否配置有快照模块，包括：根据目标数据分布算法和所述数据操作请求，定位所述分布式存储系统中的目标存储模块，其中，所述目标存储模块用于维护所述分布式存储系统的元数据库；检测所述目标存储模块中是否配置有所述快照模块，得到所述检测结果。3.根据权利要求1所述的方法，其特征在于，在所述数据操作请求为数据写入请求的情况下，依据检测结果确定与所述数据操作请求对应的操作方式，包括：若所述检测结果为所述分布式存储系统中配置有所述快照模块，则将所述分布式存储系统中的快照对象和新建对象写入元数据库，并基于目标分配粒度将待写入数据写入所述新建对象中，其中，所述新建对象是为存储所述待写入数据新建的对象；若所述检测结果为所述分布式存储系统中未配置有所述快照模块，则写入所述待写入数据至与所述待写入数据对应的原存储对象中，所述快照对象的第一识别码和所述原存储对象的第二识别码相同。4.根据权利要求3所述的方法，其特征在于，在将所述分布式存储系统中的快照对象和新建对象写入元数据库之前，所述方法还包括：将所述分布式存储系统中的原存储对象重命名为所述快照对象；依据所述原存储对象的原始命名确定所述新建对象的新建对象名，其中，所述元数据库中存储有所述第一识别码与新建对象名的第一映射关系，以及所述第二识别码与所述新建对象名的第二映射关系。5.根据权利要求3所述的方法，其特征在于，在所述数据操作请求为数据写入请求的情况下，返回数据操作...
【专利技术属性】
技术研发人员：肖永玲，王豪迈，胥昕，
申请(专利权)人：星辰天合北京数据科技有限公司，
类型：发明
国别省市：北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。