一种大数据快速备份的系统技术方案

本发明专利技术提供了一种大数据快速备份的系统，其包括数据迁移准备程序、数据导出程序、字段调整程序、数据迁移系统、数据导入程序和数据备份模块功能与系统，其无需要进行复杂的运算，也不必用到复杂的迁移工具，只需要用到常用的EXCEL表格和常见的关系型数据库，通过巧妙的操作实现了数据异步而产生的数据迁移问题，使用数据同步更简单、成本更低。

A system for fast backup of large data

The present invention provides a system backup data, including data migration, data export program preparation procedure and field adjustment program, data migration system, data import procedures and data backup module and system function, no need to perform complex operations, also do not need to use the migration tool complex, only need to use form EXCEL and relational database common, through the ingenious operation to achieve asynchronous data generated data migration issues, data synchronization using simpler and lower cost.

【技术实现步骤摘要】
一种大数据快速备份的系统
本专利技术属于数据迁移、数据处理和数据同步的领域，具体是一种大数据快速备份的系统。
技术介绍
数据是我们每天都要面对的无法缺少的信息基础，数据迁移(又称分级存储管理，hierarchicalstoragemanagement，hsm)是一种将离线存储与在线存储融合的技术。它将高速、高容量的非在线存储设备作为磁盘设备的下一级设备，然后将磁盘中常用的数据按指定的策略自动迁移到磁带库（简称带库）等二级大容量存储设备上。当需要使用这些数据时，分级存储系统会自动将这些数据从下一级存储设备调回到上一级磁盘上。对于用户来说，上述数据迁移操作完全是透明的，只是在访问磁盘的速度上略有怠慢，而在逻辑磁盘的容量上明显感觉大大提高了。数据迁移是将很少使用或不用的文件移到辅助存储系统(如磁带或光盘)的存档过程。这些文件通常是需在未来任何时间可进行方便访问的图像文档或历史信息。迁移工作与备份策略相结合,并且仍要求定期备份。还包括电脑数据迁移，迁移旧电脑（旧系统）中的数据、应用程序、个性化设置等到新电脑（新系统），在系统升级后很有必要。数据的异步必然会产生数据迁移，以及迁移后同步。目前，我们常见的数据迁移的方法相对复杂，并且依赖于一些较为复杂的迁移工具，进行着复杂的运算。
技术实现思路
为了解决上述问题，本专利技术提供了一种大数据快速备份的系统，本方法无需要进行复杂的运算，也不必用到复杂的迁移工具，只需要用到常用的EXCEL表格和常见的关系型数据库，通过巧妙的操作实现了数据异步而产生的数据迁移问题，使用数据同步更简单、成本更低。本专利技术提供了一种大数据快速备份的系统，其包括数据迁移准备程序、数据导出程序、字段调整程序、数据迁移系统、数据导入程序和数据备份模块功能与系统；其中，数据迁移准备程序：通过关系数据库的读取，准备好需要需要迁移的数据，并编写SQL语句或者SQL语句段；数据导出程序：准备好SQL语句或者SQL语句段后，通过查询编辑器进行可执行的查询编写，并且导出为EXCEL格式的文件；字段调整程序：根据实际情况调整字段数量、字段内容和字段先后顺序，同时，将字段关键属性进行备注；数据迁移系统：根据字段调整程序的字段调整准备，对比迁移的目标EXCEL表格的字段，核对无误后，将需要导出的数据的单列复制，然后粘贴到目标EXCEL表格对应的字段里；然后重复操作单列复制、粘贴操作，直至全部需要迁移的字段的数据全部粘贴到目标EXCEL表格中，然后保存，关闭EXCEL文件；数据导入程序：通过关系数据库自带的导入功能，将步骤S40所获得的EXCEL文件导入到目标数据库中，数据表的命名根据实际情况命名，然后根据数据库的所见即所得的导入提示一步一步完成导入即可；数据备份模块：使用关系数据库自带的备份功能进行备份，至此，本次数据迁移的操作已经全部完成。其中，所述的字段调整程序中，当目标表格中的字段数多于原数据表中的字段数时，根据目标表格的字段的实际情况进行默认值设置，在数据复制时，使用手动的方式进行数据填充。其中，所述的字段调整程序中，当目标表格中的字段数少于原数据表中的字段数时，多出的字段及其所包含的内容直接不复制即可；当原表的字段与目标表的字段名称不相同而信息相符时，直接复制相应的信息到相应的字段下即可。其中，所述的数据迁移系统中，还包括数据处理模块，即在数据粘贴到目标表后，在未进行下一字段信息复制之前，将需要更改的修改通过EXCEL自带的“查找”、“全部替换”功能进行数据处理。一种大数据快速备份的实现方法，其包括如下步骤：步骤S10，数据迁移准备：通过关系数据库的读取，准备好需要需要迁移的数据，并编写SQL语句或者SQL语句段；步骤S20，数据导出：准备好SQL语句或者SQL语句段后，通过查询编辑器进行可执行的查询编写，并且导出为EXCEL格式的文件；步骤S30，字段调整：根据实际情况调整字段数量、字段内容和字段先后顺序，同时，将字段关键属性进行备注；步骤S40，数据迁移：根据步骤S30的字段调整准备，对比迁移的目标EXCEL表格的字段，核对无误后，将需要导出的数据的单列复制，然后粘贴到目标EXCEL表格对应的字段里；然后重复操作单列复制、粘贴操作，直至全部需要迁移的字段的数据全部粘贴到目标EXCEL表格中，然后保存，关闭EXCEL文件；步骤S50，数据导入：通过关系数据库自带的导入功能，将步骤S40所获得的EXCEL文件导入到目标数据库中，数据表的命名根据实际情况命名，然后根据数据库的所见即所得的导入提示一步一步完成导入即可；步骤S60，数据备份：使用关系数据库自带的备份功能进行备份，至此，本次数据迁移的操作已经全部完成。其中，所述的步骤S30字段调整中，当目标表格中的字段数多于原数据表中的字段数时，根据目标表格的字段的实际情况进行默认值设置，在数据复制时，使用手动的方式进行数据填充。其中，所述的步骤S30字段调整中，当目标表格中的字段数少于原数据表中的字段数时，多出的字段及其所包含的内容直接不复制即可；当原表的字段与目标表的字段名称不相同而信息相符时，直接复制相应的信息到相应的字段下即可。其中，所述的步骤S40的数据迁移操作中，还包括步骤S401数据处理，即在数据粘贴到目标表后，在未进行下一字段信息复制之前，将需要更改的修改通过EXCEL自带的“查找”、“全部替换”功能进行数据处理。具体实施方式一种大数据快速备份的系统，其包括数据迁移准备程序、数据导出程序、字段调整程序、数据迁移系统、数据导入程序和数据备份模块功能与系统；其中，数据迁移准备程序：通过关系数据库的读取，准备好需要需要迁移的数据，并编写SQL语句或者SQL语句段；数据导出程序：准备好SQL语句或者SQL语句段后，通过查询编辑器进行可执行的查询编写，并且导出为EXCEL格式的文件；字段调整程序：根据实际情况调整字段数量、字段内容和字段先后顺序，同时，将字段关键属性进行备注；数据迁移系统：根据字段调整程序的字段调整准备，对比迁移的目标EXCEL表格的字段，核对无误后，将需要导出的数据的单列复制，然后粘贴到目标EXCEL表格对应的字段里；然后重复操作单列复制、粘贴操作，直至全部需要迁移的字段的数据全部粘贴到目标EXCEL表格中，然后保存，关闭EXCEL文件；数据导入程序：通过关系数据库自带的导入功能，将步骤S40所获得的EXCEL文件导入到目标数据库中，数据表的命名根据实际情况命名，然后根据数据库的所见即所得的导入提示一步一步完成导入即可；数据备份模块：使用关系数据库自带的备份功能进行备份，至此，本次数据迁移的操作已经全部完成。其中，所述的字段调整程序中，当目标表格中的字段数多于原数据表中的字段数时，根据目标表格的字段的实际情况进行默认值设置，在数据复制时，使用手动的方式进行数据填充。其中，所述的字段调整程序中，当目标表格中的字段数少于原数据表中的字段数时，多出的字段及其所包含的内容直接不复制即可；当原表的字段与目标表的字段名称不相同而信息相符时，直接复制相应的信息到相应的字段下即可。其中，所述的数据迁移系统中，还包括数据处理模块，即在数据粘贴到目标表后，在未进行下一字段信息复制之前，将需要更改的修改通过EXCEL自带的“查找”、“全部替换”功能进行数据处理本文档来自技高网...

【技术保护点】
一种大数据快速备份的系统，其特征在于，其包括数据迁移准备程序、数据导出程序、字段调整程序、数据迁移系统、数据导入程序和数据备份模块功能与系统；其中，数据迁移准备程序：通过关系数据库的读取，准备好需要需要迁移的数据，并编写SQL语句或者SQL语句段；数据导出程序：准备好SQL语句或者SQL语句段后，通过查询编辑器进行可执行的查询编写，并且导出为EXCEL格式的文件；字段调整程序：根据实际情况调整字段数量、字段内容和字段先后顺序，同时，将字段关键属性进行备注；数据迁移系统：根据字段调整程序的字段调整准备，对比迁移的目标EXCEL表格的字段，核对无误后，将需要导出的数据的单列复制，然后粘贴到目标EXCEL表格对应的字段里；然后重复操作单列复制、粘贴操作，直至全部需要迁移的字段的数据全部粘贴到目标EXCEL表格中，然后保存，关闭EXCEL文件；数据导入程序：通过关系数据库自带的导入功能，将步骤S40所获得的EXCEL文件导入到目标数据库中，数据表的命名根据实际情况命名，然后根据数据库的所见即所得的导入提示一步一步完成导入即可；数据备份模块：使用关系数据库自带的备份功能进行备份，至此，本次数据迁移的操作已经全部完成。...

【技术特征摘要】
1.一种大数据快速备份的系统，其特征在于，其包括数据迁移准备程序、数据导出程序、字段调整程序、数据迁移系统、数据导入程序和数据备份模块功能与系统；其中，数据迁移准备程序：通过关系数据库的读取，准备好需要需要迁移的数据，并编写SQL语句或者SQL语句段；数据导出程序：准备好SQL语句或者SQL语句段后，通过查询编辑器进行可执行的查询编写，并且导出为EXCEL格式的文件；字段调整程序：根据实际情况调整字段数量、字段内容和字段先后顺序，同时，将字段关键属性进行备注；数据迁移系统：根据字段调整程序的字段调整准备，对比迁移的目标EXCEL表格的字段，核对无误后，将需要导出的数据的单列复制，然后粘贴到目标EXCEL表格对应的字段里；然后重复操作单列复制、粘贴操作，直至全部需要迁移的字段的数据全部粘贴到目标EXCEL表格中，然后保存，关闭EXCEL文件；数据导入程序：通过关系数据库自带的导入功能，将步骤S40所获得的EXCEL文件导入到目标数据库中，数据表的命名根据实际情况命名，然后根据数据库的所见即所得的导入提示一步一步完成导入即可；数据备份模块：使用关系数据库自带的备份功能进行备份，至此，本次数据迁移的操作已经全部完成。2.根据权利要求1所述的一种大数据快速备份的系统，其特征在于，所述的字段调整程序中，当目标表格中的字段数多于原数据表中的字段数时，根据目标表格的字段的实际情况进行默认值设置，在数据复制时，使用手动的方式进行数据填充。3.根据权利要求1所述的一种大数据快速备份的系统，其特征在于，所述的字段调整程序中，当目标表格中的字段数少于原数据表中的字段数时，多出的字段及其所包含的内容直接不复制即可；当原表的字段与目标表的字段名称不相同而信息相符时，直接复制相应的信息到相应的字段下即可。4.根据权利要求1所述的一种大数据快速备份的系统，其特征在于，所述的数据迁移系统中，还包括数据处理模块，即在数据粘贴到目标表后，在未进行下一字段信息复制之前，将需要更改的修改通过EXCEL自带的“查找”、“全部替换”功能进行数据处理。...

【专利技术属性】
技术研发人员：劳志军，
申请(专利权)人：清远市云商科技有限公司，
类型：发明
国别省市：广东,44