本发明专利技术涉及大数据服务器数据整理的技术领域，特别是涉及一种大数据服务器的冗余闲时整理系统，其通过将文字数据转为图像数据的方式，方便对所有数据一同处理，并且对处理的图像数据增加水印和涂层，并进行编码、拆分和打乱，再进行储存，调出时再对数据进行还原，减少储存的文字数据泄露或被恶意篡改，提高对个人信息进行保护效果，从而提高对数据整理的便捷性和对数据的保护效果；包括：数据上传模块、数据标识模块、大数据服务器、数据传输模块、数据备份模块、文图转换模块、数据分析模块、安全模块和管理模块。
【技术实现步骤摘要】
本专利技术涉及大数据服务器数据整理的，特别是涉及一种大数据服务器的冗余闲时整理系统。
技术介绍
1、大数据服务器是为处理大数据而配置的专用服务器，并且大数据服务器由多个储存单元组成，由于大数据服务器内的数据较多，并且种类繁杂，所以在大数据服务器中的储存单元闲时，需要对储存单元中的数据进行整理。
2、一般的整理系统如公开号为cn107967331a的专利技术专利中公开的匹配于高性能计算机结构的数据整理方法和共公开号为cn108021644a的专利技术专利中公开的一种云数据整理方法等，对数据进行整理。
3、但是由于大数据服务器中的数据繁杂，存在图像数据和文字数据较多，在整理过程还需要通过不同类型的处理系统对图片和文字数据进行分开整理，并且其中储存的文字数据容易泄露或被恶意篡改，不方便对个人信息进行保护，导致实用性较差，因此亟需一种大数据服务器的冗余闲时整理系统对上述问题进行改善。
技术实现思路
1、为解决上述技术问题，本专利技术提供一种通过将文字数据转为图像数据的方式，方便对所有数据一同处理，并且对处理的图像数据增加水印和涂层，并进行编码、拆分和打乱，再进行储存，调出时再对数据进行还原，减少储存的文字数据泄露或被恶意篡改，提高对个人信息进行保护效果，从而提高对数据整理的便捷性和对数据的保护效果的一种大数据服务器的冗余闲时整理系统。
2、本专利技术的一种大数据服务器的冗余闲时整理系统，包括：
3、数据上传模块：将数据上传至大数据服务器中；</p>4、数据标识模块：数据进入大数据服务器之前，对数据进行标记，将文字数据与图像数据进行区分；
5、大数据服务器：内部由多个储存单元组成，对大量的数据进行储存，方便将数据存入或调出；
6、数据传输模块：大数据服务器中的部分存储单元空闲时，将空闲服务器中的数据调出，传输至备份模块中；
7、数据备份模块：对数据进行备份，防止数据整理过程中数据丢失情况的出现，并根据数据中的标记对文字数据和图像数据进行快速区分，再将文字数据传输至文图转换模块中，将图像数据传输至数据分析模块中；
8、文图转换模块：将文字数据转换为图像数据，并将图像数据传输至数据分析模块中；
9、数据分析模块：将文字转换为图像的数据与备份中的数据进行对比，确保文字转换为图像的数据与原数据内容相同，对图像数据进行分析，对相同的数据、不完整的数据和违法数据进行处理；
10、安全模块：对图像增加水印，对个人信息图像增加涂层，遮挡重要信息，之后对图像进行拆分，使一张图像分为多份，并对拆分的图像进行编码，将若干拆分后的图像打乱后重新存回大数据服务器中，数据调出时，根据编码将拆分的图像重新组合，将涂层和水印去除，并将文字数据转换为图像的数据重新转换为文字，再将数据调出；
11、管理模块：对登录人员进行身份核实，对登录人员的操作过程进行记录，发现违规登录人员和违规操作时，向管理人员发出警报，提醒管理人员及时处理。
12、优选的，所述数据标识模块包括：
13、图文识别模块：对图像和文字进行识别并进行区分；
14、图文标记模块：对图像和文字进行标记，方便后续数据处理中对图像和文字进行快速区分。
15、优选的，所述数据备份模块：
16、储存模块：对接收的数据进行储存备份；
17、删除模块：数据整理完成后，将储存备份的数据删除，减少多余数据对储存模块的占用；
18、限期恢复模块：对设定的期限内对误删的数据进行删除。
19、优选的，所述数据分析模块包括：
20、数据对比模块：将文字数据转换为图像的数据与备份模块中备份的数据进行对比，判断将文字数据转换为图像的数据与原数据是否相同；
21、深度学习处理模块：对图像数据进行分析分出处理，将重复、缺失和违法的数据调出，将合格的图像数据传输至安全模块中。
22、优选的，所述安全模块包括：
23、图像处理模块：对合格的图像数据增加水印，并对个人信息数据增加涂层，之后对图像进行拆分和编码，并打乱所有拆分的图像的位置，再将处理后的图像传回至大数据服务器中；
24、图像还原模块：将大数据服务器中的图像调出时，对处理的图像进行还原；
25、图文转换模块：对还原的文字数据转换为图像的数据重新转换为文字。
26、优选的，所述图像处理模块包括：
27、涂层增加模块：对图像增添水印，对个人信息的图像增加水印后，再增加遮挡涂层；
28、图像拆分模块：将增加水印和涂层后的图像拆分为多个图像；
29、图像编码模块：对拆分的后的图像进行编码，方便调出时对拆分的图像进行还原。
30、优选的，所述管理模块包括：
31、登录人员管理模块：对登录人员的身份进行识别和记录；
32、操作流程记录模块：对登录人员的操作流程进行记录。
33、优选的，所述深度学习处理模块采用pytorch框架，并采用卷积神经网络。
34、优选的，所述涂层增加模块定期对水印样式进行更换。
35、优选的，包括：
36、s1、通过数据上传模块将数据上传至大数据服务器中，并且通过数据标识模块在数据进入大数据服务器之前，通过图文识别模块对图像和文字进行识别并进行区分，通过图文标记模块对图像和文字进行标记，方便后续数据处理中对图像和文字进行快速区分；
37、s2、通过大数据服务器对大量的数据进行储存，方便将数据存入或调出；
38、s3、通过数据传输模块在大数据服务器中的部分存储单元空闲时，将空闲服务器中的数据调出，传输至备份模块中；
39、s4、通过储存模块对接收的数据进行储存备份，防止数据整理过程中数据丢失情况的出现，并根据数据中的标记对文字数据和图像数据进行快速区分，再将文字数据传输至文图转换模块中，将图像数据传输至数据分析模块中，数据整理完成后，通过删除模块将储存备份的数据删除，减少多余数据对储存模块的占用，在对设定的期限内可通过限期恢复模块对误删的数据进行删除；
40、s5、通过文图转换模块将文字数据转换为图像数据，并将图像数据传输至数据分析模块中；
41、s6、通过数据对比模块将文字数据转换为图像的数据与备份模块中备份的数据进行对比，判断将文字数据转换为图像的数据与原数据是否相同，确保文字转换为图像的数据与原数据内容相同，通过深度学习处理模块对图像数据进行分析分出处理，将重复、缺失和违法的数据调出，将合格的图像数据传输至安全模块中；
42、s7、通过图像处理模块对合格的图像数据增加水印，并对个人信息数据增加涂层，之后对图像进行拆分和编码，并打乱所有拆分的图像的位置，再将处理后的图像传回至大数据服务器中，通过图像还原模块将大数据服务器中的图像调出时，对处理的图像进行还原，通过图文转换模本文档来自技高网
...
【技术保护点】
1.一种大数据服务器的冗余闲时整理系统，其特征在于，包括：
2.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据标识模块包括：
3.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据备份模块：
4.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据分析模块包括：
5.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述安全模块包括：
6.如权利要求5所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述图像处理模块包括：
7.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述管理模块包括：
8.如权利要求4所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述深度学习处理模块采用PyTorch框架，并采用卷积神经网络。
9.如权利要求6所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述涂层增加模块定期对水印样式进行更换。
10.一种使用权利要求1-9任一项所述的大数据服务器的冗余闲时整理系统的整理方法，其特征在于，包括：
...
【技术特征摘要】
1.一种大数据服务器的冗余闲时整理系统，其特征在于，包括：
2.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据标识模块包括：
3.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据备份模块：
4.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述数据分析模块包括：
5.如权利要求1所述的一种大数据服务器的冗余闲时整理系统，其特征在于，所述安全模块包括：
6.如权利要求5所述的一种大数据服务器的冗余闲...
【专利技术属性】
技术研发人员：朱文春，孔兵，王星，
申请(专利权)人：北京神州新桥科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。