一种基于大数据的智能处理方法技术

本发明专利技术公开了一种基于大数据的智能处理方法，应用于智能处理系统，所述智能处理系统包括数据整合模块、提取处理模块与统计管控模块，所述数据整合模块与提取处理模块电连接，所述统计管控模块与提取处理模块数据连接，所述数据整合模块用于对采集到的大数据信息进行整合处理，所述提取处理模块用于对大数据信息进行提取分析处理，所述统计管控模块用于进行大数据隐私管理控制，所述数据整合模块包括补充录入单元、识别整合模块与筛选滤除模块，所述补充录入单元与识别整合模块电连接，所述筛选滤除模块与识别整合模块数据连接，所述补充录入单元用于对人工采集的大数据信息进行补充录入，本发明专利技术，具有实用性强及效率高的特点。点。点。

【技术实现步骤摘要】
一种基于大数据的智能处理方法


[0001]本专利技术涉及智能处理
，具体为一种基于大数据的智能处理方法。

技术介绍

[0002]近年来，大数据技术与系统在性能和效率方面已经取得了显著的提升，大数据应用到各个行业，赋能产业智能化发展，成为信息社会进入智能化阶段的关键要素。
[0003]然而，在完成数据信息的采集后通过现有技术进行大数据信息的处理过程中，面临着采集到的大数据信息泛滥与价值并存、大数据信息分析复杂等挑战，且容易造成被采集到的用户个人隐私信息遭到泄露进而使用户造成较大的经济损失。因此，设计实用性强及效率高的一种基于大数据的智能处理方法是很有必要的。

技术实现思路

[0004]本专利技术的目的在于提供一种基于大数据的智能处理方法，以解决上述
技术介绍
中提出的问题。
[0005]为了解决上述技术问题，本专利技术提供如下技术方案：一种基于大数据的智能处理方法，应用于智能处理系统，所述智能处理系统包括数据整合模块、提取处理模块与统计管控模块，所述数据整合模块与提取处理模块电连接，所述统计管控模块与提取处理模块数据连接，所述数据整合模块用于对采集到的大数据信息进行整合处理，所述提取处理模块用于对大数据信息进行提取分析处理，所述统计管控模块用于进行大数据隐私管理控制。
[0006]根据上述技术方案，所述数据整合模块包括补充录入单元、识别整合模块与筛选滤除模块，所述补充录入单元与识别整合模块电连接，所述筛选滤除模块与识别整合模块数据连接，所述补充录入单元用于对人工采集的大数据信息进行补充录入，所述识别整合模块用于对不同类型的大数据信息进行识别整合，所述筛选滤除模块用于对大数据信息进行筛选滤除。
[0007]根据上述技术方案，所述提取处理模块包括框架搭建模块、数据标记模块与图像提取模块，所述框架搭建模块分别与数据标记模块、图像提取模块电连接，所述框架搭建模块用于框架搭建对大数据信息进行提取，所述数据标记模块用于对大数据信息进行标记，所述图像提取模块用于对图像进行大数据信息进行提取。
[0008]根据上述技术方案，所述统计管控模块包括敏感度判定模块、查阅权限控制模块与数据控制模块，所述敏感度判定模块与查阅权限控制模块电连接，所述数据控制模块分别与敏感度判定模块、查阅权限控制模块网络连接，所述敏感度判定模块用于对大数据信息的隐私敏感度进行判定，所述查阅权限控制模块用于对大数据信息的查阅权限进行控制管理，所述数据控制模块用于对大数据信息进行管理控制。
[0009]根据上述技术方案，所述基于大数据的智能处理方法的包括以下步骤：
[0010]步骤S1：对采集到的大数据信息上传到智能处理系统准备进行处理分析；
[0011]步骤S2：将人工采集的大数据信息上传到智能处理系统后，进一步对大数据信息
进行整合完成大数据信息的初步处理分析；
[0012]步骤S3：进一步对大数据信息进行分析提取处理，得到精细化的大数据信息；
[0013]步骤S4：根据分析提取结果对大数据信息所包含的用户隐私信息进行控制管理。
[0014]根据上述技术方案，所述步骤S2进一步包括以下步骤：
[0015]步骤S21：通过补充录入单元相关工作人员将人工采集的大数据信息录入至智能处理系统进行存储记录；
[0016]步骤S22：将人工采集的大数据信息与系统采集的大数据信息进行接受后，识别整合模块对全部大数据信息进行格式识别，将大数据信息按照图像格式与文字信息格式整合为两类；
[0017]步骤S23：进一步通过筛选滤除模块分别对图像格式与文字信息格式的大数据信息进行识别并滤除内容重复的大数据信息。
[0018]根据上述技术方案，所述步骤S23进一步包括以下步骤：
[0019]步骤S231：首先对文学信息格式的大数据信息进行语义、关键词识别，将识别到的语义、关键词重复的大数据信息进行滤除；
[0020]步骤S232：然后对照图像格式的大数据信息进行识别分析处理，对大数据图像信息进行特征提取将特征相同的图像进行滤除。
[0021]根据上述技术方案，所述步骤S3进一步包括以下步骤：
[0022]步骤S31：根据本次进行大数据信息采集所要应用的领域范围，通过框架搭建模块搭建大数据信息的处理框架，将步骤S23中完成重复内容滤除文字信息格式的大数据信息代入处理框架中完成处理筛选；
[0023]步骤S32：将步骤S232中完成相同图像滤除的已被提取出的特征在所属图像中进行展示，并先将图像通过图像提取模块进行识别，提取出符合本次进行大数据信息采集所要应用领域范围的图像，将其中无法被图像提取模块识别提取的转入人工进行处理提取并将提取结果存储至系统中；
[0024]步骤S33：在进行大数据信息的识别筛选时，识别到数据信息内容涉及到用户的隐私数据信息，其中包括姓名、地址、性别、年龄、肖像，则通过数据标记模块进行标记。
[0025]根据上述技术方案，所述步骤S4进一步包括以下步骤：
[0026]步骤S41：对被标记的用户隐私用户的隐私数据信息通过敏感度判定模块进行敏感度等级判定，将用户的姓名、肖像及地址相关的数据信息标记为一级敏感，否则为二级敏感度；
[0027]步骤S42：将被标记为二级敏感度的数据信息通过查阅权限控制模块设置查阅权限，将标记为一级敏感度的数据信息通过数据控制模块进行滤除。
[0028]与现有技术相比，本专利技术所达到的有益效果是：本专利技术，通过设置有数据整合模块、提取处理模块与统计管控模块，可保证大数据信息的独立完整性，同时使大数据信息条例规划更为清晰，为后续进一步对大数据信息的存储、分析提取提供可靠的处理依据；并使系统的分析运算资源使用更加高效、准确，同时保证图像特征提取的精准、高效，且选取的特征不仅能够很好地描述图像，还能够很好地区分所表达信息不同图像，使图像格式的大数据信息更加科学、高效。
附图说明
[0029]附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与本专利技术的实施例一起用于解释本专利技术，并不构成对本专利技术的限制。在附图中：
[0030]图1是本专利技术的系统模块组成示意图。
具体实施方式
[0031]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0032]请参阅图1，本专利技术提供技术方案：一种基于大数据的智能处理方法，包括应用于智能处理系统，智能处理系统包括数据整合模块、提取处理模块与统计管控模块，数据整合模块与提取处理模块电连接，统计管控模块与提取处理模块数据连接，数据整合模块用于对采集到的大数据信息进行整合处理，提取处理模块用于对大数据信息进行提取分析处理，统计管控模块用于进行大数据隐私管理控制。
[0033]数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于大数据的智能处理方法，其特征在于：应用于智能处理系统，所述智能处理系统包括数据整合模块、提取处理模块与统计管控模块，所述数据整合模块与提取处理模块电连接，所述统计管控模块与提取处理模块数据连接，所述数据整合模块用于对采集到的大数据信息进行整合处理，所述提取处理模块用于对大数据信息进行提取分析处理，所述统计管控模块用于进行大数据隐私管理控制。2.根据权利要求1所述的一种基于大数据的智能处理方法，其特征在于：所述数据整合模块包括补充录入单元、识别整合模块与筛选滤除模块，所述补充录入单元与识别整合模块电连接，所述筛选滤除模块与识别整合模块数据连接，所述补充录入单元用于对人工采集的大数据信息进行补充录入，所述识别整合模块用于对不同类型的大数据信息进行识别整合，所述筛选滤除模块用于对大数据信息进行筛选滤除。3.根据权利要求2所述的一种基于大数据的智能处理方法，其特征在于：所述提取处理模块包括框架搭建模块、数据标记模块与图像提取模块，所述框架搭建模块分别与数据标记模块、图像提取模块电连接，所述框架搭建模块用于框架搭建对大数据信息进行提取，所述数据标记模块用于对大数据信息进行标记，所述图像提取模块用于对图像进行大数据信息进行提取。4.根据权利要求3所述的一种基于大数据的智能处理方法，其特征在于：所述统计管控模块包括敏感度判定模块、查阅权限控制模块与数据控制模块，所述敏感度判定模块与查阅权限控制模块电连接，所述数据控制模块分别与敏感度判定模块、查阅权限控制模块网络连接，所述敏感度判定模块用于对大数据信息的隐私敏感度进行判定，所述查阅权限控制模块用于对大数据信息的查阅权限进行控制管理，所述数据控制模块用于对大数据信息进行管理控制。5.根据权利要求4所述的一种基于大数据的智能处理方法，其特征在于：所述基于大数据的智能处理方法的包括以下步骤：步骤S1：对采集到的大数据信息上传到智能处理系统准备进行处理分析；步骤S2：将人工采集的大数据信息上传到智能处理系统后，进一步对大数据信息进行整合完成大数据信息的初步处理分析；步骤S3：进一步对大数据信息进行分析提取处理，得到精细化的大数据信息；步骤S4：根据分析提取结果对大数据信息所包含的用户隐私信息进行控制管理。6.根据...

【专利技术属性】
技术研发人员：杨康康，
申请(专利权)人：杨康康，
类型：发明
国别省市：