一种复制ceph块存储数据至对象存储的定时备份方法及系统技术方案

本发明专利技术公开了一种复制ceph块存储数据至对象存储的定时备份方法及系统，属于定时备份块存储至对象存储领域，本发明专利技术要解决的技术问题为如何将定时备份的应用系统和和平台层的方案衔接在一起，确保数据的可靠性并能降低数据存储成本，技术方案为：该方法是通过调用openstack cinder‑backup服务备份块数据，openstack Cinder‑backup服务后端备份驱动配置为Swift，Swift驱动调用rgw的swift接口，将块存储系统中的数据备份至ceph对象存储系统；具体如下：用户根据实际需求在应用系统中创建备份策略；用户按照自己的需求将备份策略与硬盘绑定；应用系统按照用户指定的规则执行备份策略；执行备份策略时将绑定备份策略的所有云硬盘从块存储系统备份至对象存储系统；备份结束后异步通知用户前端界面备份结果。

【技术实现步骤摘要】
一种复制ceph块存储数据至对象存储的定时备份方法及系统
本专利技术涉及定时备份块存储至对象存储领域，具体地说是一种复制ceph块存储数据至对象存储的定时备份方法及系统。
技术介绍
最近几年云计算相关技术日趋成熟和广泛应用，随着共有云、政务云、专有云等系统的发展，数据呈现爆发式的增长，数据安全可靠性和存储成本成为使用者不得不面对和考虑的问题，为了提高数据可靠性或者降低数据存储成本，可以将数据进行冗余备份亦或备份至成本更廉价的存储介质，但是数据的安全性能就随之降低；又或者每天或者固定时间由人工进行备份，但是工人备份既浪费人工成本，又容易出现由于人为疏忽而造成损失的情况。云计算的发展促进了分布式存储系统的大范围应用，对象存储和块存储是当前主流的存储方式，ceph提供了块存储和对象存储能力，从应用层来看，云硬盘对应ceph的块存储。应用系统通过对接openstack和ceph，可以将云硬盘备份至ceph的对象存储系统。通过以上分析，平台层已经有了比较成熟的备份方法。故如何将定时备份的应用系统和和平台层的方案衔接在一起，实现由系统自动备份块存储数据至对象存储，同时确保数据的可靠性并能降低数据存储成本是目前亟待解决的技术问题。专利号为CN110716829A的专利文献公开了一种基于Ceph技术的块存储备份方法、终端及存储介质，该方法通过OpenStack的Cinder项目提供块存储服务，将Ceph集成到OpenStack的Cinder项目中，通过Ceph的RBD快照技术、采用增量备份的方式将数据备份至Ceph集群中。终端包括处理器和存储器，存储器用于存储计算机程序，处理器被配置用于调用程序指令执行上述方法。存储介质存储有计算机程序，计算机程序包括程序指令，程序指令当被处理器执行时处理器执行上述方法。但是该技术方案不能实现将定时备份的应用系统和和平台层的方案衔接在一起，实现由系统自动备份块存储数据至对象存储。
技术实现思路
本专利技术的技术任务是提供一种复制ceph块存储数据至对象存储的定时备份方法及系统，来解决如何将定时备份的应用系统和和平台层的方案衔接在一起，实现由系统自动备份块存储数据至对象存储，同时确保数据的可靠性并能降低数据存储成本的问题。本专利技术的技术任务是按以下方式实现的，一种复制ceph块存储数据至对象存储的定时备份方法，该方法是通过调用openstackcinder-backup服务备份块数据，openstackCinder-backup服务后端备份驱动配置为Swift，Swift驱动调用rgw的swift接口，将块存储系统中的数据备份至ceph对象存储系统；具体如下：用户根据实际需求在应用系统中创建备份策略；用户按照自己的需求将备份策略与硬盘(块存储)绑定；应用系统按照用户指定的规则执行备份策略；执行备份策略时将绑定该备份策略的所有云硬盘从块存储系统备份至对象存储系统；备份结束后异步通知用户前端界面备份结果。作为优选，所述应用系统采用前端和后端分离的方式，前端用于接收用户请求，与后端通信以及给用户反馈给后端处理消息；后端用于实际的业务处理。更优地，所述创建备份策略具体如下：用户在前端界面设定策略名称并选择备份周期；应用系统根据用户选择的备份周期生成备份周期表达式，备份周期表达式随着用户的提交动作由前端传递给后端解析使用；用户点击提交后，前端发送POST请求给后端，后端将策略名称、备份周期表达式、策略状态(初创时默认为启用状态)、用户在openstack平台中对应的项目以及domain导入数据库表，并生成对应的策略ID和创建时间。更优地，所述用户按照自己的需求将策略与云硬盘(块存储)绑定具体如下：用户创建策略后，给策略关联云硬盘；用户在前端界面调用后端接口查看到自己拥有的云硬盘并决定将哪些云硬盘关联策略；云硬盘与策略关联成功后，云硬盘按照策略指定的周期自动进行备份；同时用户能够调用后端接口解除云硬盘与策略的关联关系；云硬盘与策略的关联关系在后端通过策略与云硬盘关联关系表中实现。更优地，所述应用系统的后端启动，具体如下：(1)、启动一个定时备份的进程，进程每隔20秒扫描一遍数据库表中的策略表，读取策略表中的备份周期表达式并解析；(2)、判断当前时间与备份周期表达式解析后的结果是否相吻合：①、若是，则执行步骤(3)；(3)、后端根据策略表查询策略与云硬盘的关联关系表，找到绑定该策略表的所有云硬盘，并判断策略绑定的云硬盘是否大于0；①、若是，则执行步骤(4)；(4)、后端根据该策略表对应的项目和domain，使用管理员用户调用openstack的接口获取能够操作openstack中云硬盘资源(该策略对应的domain和项目下的资源)的token；(5)、后端拿到token后，调用cinder-backup的服务发送备份请求；(6)、策略对应的云硬盘开始并发执行备份动作；(7)、进入备份中，后端将cinder-backup备份接口返回的备份id和用户名称记入数据库表，以备后续备份结束后，能够读取相关信息并通过websocket服务器异步通知前端。更优地，所述备份结束后异步通知用户前端界面备份结果具体如下：后端启动时，启动一个异步通知进程；异步通知进程有规律的扫描数据库表中的异步通知表，并通过调用openstack平台的接口，查询表中备份id的备份结果，并判断openstack平台是否处理完毕：若是，则异步通知进程通知websocket服务器，将处理结果转发给前端。更优地，所述用户在前端界面管理策略，管理策略包括启用策略、禁用策略、更新策略及删除策略；其中，用户禁用策略时，策略处于禁用状态，则定时备份的经常会该策略，不再对该策略关联的云硬盘进行备份；用户删除策略是，后端接收到用户删除策略的请求后，从策略表删除对应的策略，并将该策略与云硬盘关联关系表中相应的云硬盘的记录清除。一种复制ceph块存储数据至对象存储的定时备份系统，该系统给包括，创建单元，用于用户根据实际需求在应用系统中创建备份策略；其中，应用系统采用前端和后端分离的方式，前端用于接收用户请求，与后端通信以及给用户反馈给后端处理消息；后端用于实际的业务处理；创建单元包括，设定模块，用于用户在前端界面设定策略名称并选择备份周期；生成模块，用于应用系统根据用户选择的备份周期生成备份周期表达式，备份周期表达式随着用户的提交动作由前端传递给后端解析使用；导入模块，用于在用户点击提交后，前端发送POST请求给后端，后端将策略名称、备份周期表达式、策略状态(初创时默认为启用状态)、用户在openstack平台中对应的项目以及domain导入数据库表，并生成对应的策略ID和创建时间；绑定单元，用于用户按照自己的需求将备份策略与硬盘(块存储)绑定；绑定单元包括，关联模块，用于在本文档来自技高网...

【技术保护点】
1.一种复制ceph块存储数据至对象存储的定时备份方法，其特征在于，该方法是通过调用openstack cinder-backup服务备份块数据，openstack Cinder-backup服务后端备份驱动配置为Swift，Swift驱动调用rgw的swift接口，将块存储系统中的数据备份至ceph对象存储系统；具体如下：/n用户根据实际需求在应用系统中创建备份策略；/n用户按照自己的需求将备份策略与硬盘绑定；/n应用系统按照用户指定的规则执行备份策略；/n执行备份策略时将绑定该备份策略的所有云硬盘从块存储系统备份至对象存储系统；/n备份结束后异步通知用户前端界面备份结果。/n

【技术特征摘要】
1.一种复制ceph块存储数据至对象存储的定时备份方法，其特征在于，该方法是通过调用openstackcinder-backup服务备份块数据，openstackCinder-backup服务后端备份驱动配置为Swift，Swift驱动调用rgw的swift接口，将块存储系统中的数据备份至ceph对象存储系统；具体如下：
用户根据实际需求在应用系统中创建备份策略；
用户按照自己的需求将备份策略与硬盘绑定；
应用系统按照用户指定的规则执行备份策略；
执行备份策略时将绑定该备份策略的所有云硬盘从块存储系统备份至对象存储系统；
备份结束后异步通知用户前端界面备份结果。


2.根据权利要求1所述的复制ceph块存储数据至对象存储的定时备份方法，其特征在于，所述应用系统采用前端和后端分离的方式，前端用于接收用户请求，与后端通信以及给用户反馈给后端处理消息；后端用于实际的业务处理。


3.根据权利要求2所述的复制ceph块存储数据至对象存储的定时备份方法，其特征在于，所述创建备份策略具体如下：
用户在前端界面设定策略名称并选择备份周期；
应用系统根据用户选择的备份周期生成备份周期表达式，备份周期表达式随着用户的提交动作由前端传递给后端解析使用；
用户点击提交后，前端发送POST请求给后端，后端将策略名称、备份周期表达式、策略状态、用户在openstack平台中对应的项目以及domain导入数据库表，并生成对应的策略ID和创建时间。


4.根据权利要求1或2或3所述的复制ceph块存储数据至对象存储的定时备份方法，其特征在于，所述用户按照自己的需求将策略与云硬盘绑定具体如下：
用户创建策略后，给策略关联云硬盘；
用户在前端界面调用后端接口查看到自己拥有的云硬盘并决定将哪些云硬盘关联策略；
云硬盘与策略关联成功后，云硬盘按照策略指定的周期自动进行备份；同时用户能够调用后端接口解除云硬盘与策略的关联关系；云硬盘与策略的关联关系在后端通过策略与云硬盘关联关系表中实现。


5.根据权利要求4所述的复制ceph块存储数据至对象存储的定时备份方法，其特征在于，所述应用系统的后端启动，具体如下：
(1)、启动一个定时备份的进程，进程每隔20秒扫描一遍数据库表中的策略表，读取策略表中的备份周期表达式并解析；
(2)、判断当前时间与备份周期表达式解析后的结果是否相吻合：
①、若是，则执行步骤(3)；
(3)、后端根据策略表查询策略与云硬盘的关联关系表，找到绑定该策略表的所有云硬盘，并判断策略绑定的云硬盘是否大于0；
①、若是，则执行步骤(4)；
(4)、后端根据该策略表对应的项目和domain，使用管理员用户调用openstack的接口获取能够操作openstack中云硬盘资源的token；
(5)、后端拿到token后，调用cinder-backup的服务发送备份请求；
(6)、策略对应的云硬盘开始并发执行备份动作；
(7)、进入备份中，后端将cinder-backup备份接口返回的...

【专利技术属性】
技术研发人员：李超，于昊，赵益鑫，李凯，
申请(专利权)人：山东汇贸电子口岸有限公司，
类型：发明
国别省市：山东;37