一种大数据分析方法技术

本发明专利技术涉及一种大数据分析方法，属于计算机科学技术领域。该大数据分析方法，包括：（1）接入数据资源并将数据资源发送至内容过滤服务器；（2）内容过滤服务器对数据资源进行过滤；（3）内容过滤服务器将过滤后的数据资源发送至大数据集群中；（4）对大数据集群中数据进行对比和分类，然后存入关系型数据库中；（5）对关系型数据库中数据进行解析和挖掘；（6）将数据进行细分，并对每块数据块进行编号；（7）根据用户的访问请求，筛选对应编号的数据块；（8）筛选出的数据块进行加密；（9）将加密后的数据块发送给客户并进行解密和展示。本发明专利技术通过多次的分类、汇总和聚合，实现了数据细化，大大提高了后期数据提取的效率。

【技术实现步骤摘要】
一种大数据分析方法
本专利技术涉及一种大数据分析方法，属于计算机科学

技术介绍
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，提取有用信息和形成结论而对数据加以详细研究和概括总结的过程，这一过程也是质量管理体系的支持过程，在实用中，数据分析可以帮助人们做出判断，以便采取适当的行动，数据分析的数学基础在20世纪早期就已确立，但直到计算机的出现才使得实际操作成为现实，并使得数据分析得以推广，数据分析是数学与计算机科学相结合的产物。目前对于大数据处理面临数据容量大，形式多样化，从而造成分析对比的难度较大，而且存储到数据库时容易造成数据存储混乱，导致在调取分析数据的时候方法较为复杂并且耗时较长。
技术实现思路
本专利技术要解决的技术问题是，针对现有技术不足，提出一种一种大数据分析方法。本专利技术为解决上述技术问题提出的技术方案是：一种大数据分析方法，包括以下步骤：（1）接入数据资源并将数据资源发送至内容过滤服务器；（2）内容过滤服务器对数据资源进行过滤；（3）内容过滤服务器将过滤后的数据资源发送至大数据集群中；（4）对大数据集群中数据进行对比和分类，然后存入关系型数据库中；（5）对关系型数据库中数据进行解析和挖掘；（6）将解析和挖掘后的数据进行细分，分为多块数据块，并对每块数据块进行编号；（7）大数据资源服务器根据用户的访问请求，筛选对应编号的数据块；（8）筛选出的数据块进行加密；（9）将加密后的数据块发送给客户并进行解密和展示。上述技术方案的改进是：步骤（2）中内容过滤服务器对数据资源进行筛选，将过期数据、错误数据、重复数据筛选出来后删除。上述技术方案的改进是：步骤（8）和（9）中数据块加密和解密时用到的密钥的生成步骤为：A、生成N维随机初始序列；B、将所述N维随机初始序列按比特位取反运算以后追加到该N维随机初始序列之后，形成一个2N维序列；C、将该2N维序列作为加密密钥和/或解密密钥。上述技术方案的改进是：步骤（9）展示的形式包括文字、图形以及表格中的任意一种或者任意组合。上述技术方案的改进是：步骤（5）中解析和挖掘具体为：对关系型数据库中的数据进行提取和计算；然后对计算后的数据进行分类和/或汇总和/或聚合。本专利技术采用上述技术方案的有益效果是：（1）本专利技术的大数据分析方法通过数据资源进行过滤，减少了数据量，提升了后续数据处理效率；（2）本专利技术的大数据分析方法通过对数据进行对比和分类，然后存入关系型数据库中；再对关系型数据库中数据进行解析和挖掘；通过多次的分类、汇总和聚合，实现了数据细化，大大提高了后期数据提取的效率；（3）本专利技术的大数据分析方法通过对筛选出的数据块进行加密，保证了数据传输过程中的安全性；（4）本专利技术的大数据分析方法通过以文字、图形以及表格中的任意一种或者任意组合的形式，对用户进行多元化、多方式展示，展示效果更好，数据体现更加直接。具体实施方式实施例本实施例的大数据分析方法，包括以下步骤：（1）接入数据资源并将数据资源发送至内容过滤服务器；（2）内容过滤服务器对数据资源进行过滤；（3）内容过滤服务器将过滤后的数据资源发送至大数据集群中；（4）对大数据集群中数据进行对比和分类，然后存入关系型数据库中；（5）对关系型数据库中数据进行解析和挖掘；（6）将解析和挖掘后的数据进行细分，分为多块数据块，并对每块数据块进行编号；（7）大数据资源服务器根据用户的访问请求，筛选对应编号的数据块；（8）筛选出的数据块进行加密；（9）将加密后的数据块发送给客户并进行解密和展示。本实施例大数据分析方法的步骤（2）中内容过滤服务器对数据资源进行筛选，将过期数据、错误数据、重复数据筛选出来后删除。本实施例大数据分析方法的步骤（8）和（9）中数据块加密和解密时用到的密钥的生成步骤为：A、生成N维随机初始序列；B、将所述N维随机初始序列按比特位取反运算以后追加到该N维随机初始序列之后，形成一个2N维序列；C、将该2N维序列作为加密密钥和/或解密密钥。本实施例大数据分析方法的步骤（9）展示的形式包括文字、图形以及表格中的任意一种或者任意组合。本实施例大数据分析方法的步骤（5）中解析和挖掘具体为：对关系型数据库中的数据进行提取和计算；然后对计算后的数据进行分类和/或汇总和/或聚合。本专利技术的大数据分析方法通过数据资源进行过滤，减少了数据量，提升了后续数据处理效率；本专利技术的大数据分析方法通过对数据进行对比和分类，然后存入关系型数据库中；再对关系型数据库中数据进行解析和挖掘；通过多次的分类、汇总和聚合，实现了数据细化，大大提高了后期数据提取的效率；本专利技术的大数据分析方法通过对筛选出的数据块进行加密，保证了数据传输过程中的安全性；本专利技术的大数据分析方法通过以文字、图形以及表格中的任意一种或者任意组合的形式，对用户进行多元化、多方式展示，展示效果更好，数据体现更加直接。本专利技术不局限于上述实施例。凡采用等同替换形成的技术方案，均落在本专利技术要求的保护范围。本文档来自技高网...

【技术保护点】
1.一种大数据分析方法，其特征在于：包括以下步骤：/n（1）接入数据资源并将数据资源发送至内容过滤服务器；/n（2）内容过滤服务器对数据资源进行过滤；/n（3）内容过滤服务器将过滤后的数据资源发送至大数据集群中；/n（4）对大数据集群中数据进行对比和分类，然后存入关系型数据库中；/n（5）对关系型数据库中数据进行解析和挖掘；/n（6）将解析和挖掘后的数据进行细分，分为多块数据块，并对每块数据块进行编号；/n（7）大数据资源服务器根据用户的访问请求，筛选对应编号的数据块；/n（8）筛选出的数据块进行加密；/n（9）将加密后的数据块发送给客户并进行解密和展示。/n

【技术特征摘要】
1.一种大数据分析方法，其特征在于：包括以下步骤：
（1）接入数据资源并将数据资源发送至内容过滤服务器；
（2）内容过滤服务器对数据资源进行过滤；
（3）内容过滤服务器将过滤后的数据资源发送至大数据集群中；
（4）对大数据集群中数据进行对比和分类，然后存入关系型数据库中；
（5）对关系型数据库中数据进行解析和挖掘；
（6）将解析和挖掘后的数据进行细分，分为多块数据块，并对每块数据块进行编号；
（7）大数据资源服务器根据用户的访问请求，筛选对应编号的数据块；
（8）筛选出的数据块进行加密；
（9）将加密后的数据块发送给客户并进行解密和展示。


2.根据权利要求1所述的大数据分析方法，其特征在于：步骤（2）中内容过滤服务器对数据资源进行筛...

【专利技术属性】
技术研发人员：仇庭元，
申请(专利权)人：南京謇张大数据科技有限公司，
类型：发明
国别省市：江苏;32