一种基于用户画像的大数据安全处理系统技术方案

技术编号:29790612 阅读:24 留言:0更新日期:2021-08-24 18:09
本发明专利技术公开了一种基于用户画像的大数据安全处理系统,包括用户画像数据生成模块、语义模块、安全审查模块、数据分析模块、异常处理模块、展示模块和备份管理模块。本发明专利技术通过用户画像数据生成模块从网络端口采集数据,并将采集的数据进行初步处理,使用户数据所占内存减少,后续处理速度也进一步提升,通过安全审查模块可有效对大数据进行审查检验,从而采集的大数据当中存在非法数据而造成危险,通过异常处理模块可对系统整体进行监控,使系统运行更加稳定,最后通过备份管理模块多次对数据进行存储,保障了数据的安全性。

【技术实现步骤摘要】
一种基于用户画像的大数据安全处理系统
本专利技术涉及安全处理系统,特别涉及一种基于用户画像的大数据安全处理系统。
技术介绍
随着互联网技术和移动技术的高速发展,在网络中和各种应用系统中会留下大量的个人痕迹,而且这种痕迹在不断的扩大和增长,它反映和隐含着个人的多样化的信息,比如生活习惯,消费趋向和态度等。用户画像根据用户信息来提取典型的用户特征,比如用户的基本自然属性特征,行为特征,社交特征,兴趣特征等。用户画像研究是当前学术界和产业界的一个热门话题,通过大数据的简单算法可以产生比比小数据复杂算法更好的结果。其基本流程主要包括预处理,模型形成,系统评测和实际应用等。通过大数据构建用户画像,描述用户的个性和群体特征,从而为网络管理,舆论控制,群体细分,产品研发,广告投放,精准营销提供数据支撑,这在学术界与产业界都具有重大意义。但是随着大数据处理的兴起,相应的大数据信息安全仍不够完善,系统的稳定性无法得到有效保证。
技术实现思路
本专利技术要解决的技术问题是克服现有技术的缺陷,提供一种基于用户画像的大数据安全处理系统。...

【技术保护点】
1.一种基于用户画像的大数据安全处理系统,其特征在于,包括:/n用户画像数据生成模块,用于采集网络数据后生成用户画像数据,作为数据源;/n语义模块,用于将采集的数据类型进行转换,从而实现数据的计算和查询;/n安全审查模块,用于对生成的数据内容进行审查过滤;/n数据分析模块,用于对经过安全审查的数据进行分析,将数据分布式处理后获取所需要的的信息结果;/n异常处理模块,用于对系统整体进行监控,当系统出现异常时进行内部审查判定,并反馈异常问题同时发出警报;/n展示模块,用于将数据结果显示在各个终端当中,进而进行相对应的操作;/n备份管理模块,用于对大数据进行相应备份管理,避免数据丢失。/n

【技术特征摘要】
1.一种基于用户画像的大数据安全处理系统,其特征在于,包括:
用户画像数据生成模块,用于采集网络数据后生成用户画像数据,作为数据源;
语义模块,用于将采集的数据类型进行转换,从而实现数据的计算和查询;
安全审查模块,用于对生成的数据内容进行审查过滤;
数据分析模块,用于对经过安全审查的数据进行分析,将数据分布式处理后获取所需要的的信息结果;
异常处理模块,用于对系统整体进行监控,当系统出现异常时进行内部审查判定,并反馈异常问题同时发出警报;
展示模块,用于将数据结果显示在各个终端当中,进而进行相对应的操作;
备份管理模块,用于对大数据进行相应备份管理,避免数据丢失。


2.根据权利要求1所述的一种基于用户画像的大数据安全处理系统,其特征在于,所述用户画像数据生成模块包括数据采集单元、数据处理单元和数据存储单元;
所述数据采集单元通过Thrift从不同数据源当中采集数据,根据实际需求将采集的数据传输至数据处理单元当中,采集的数据类型分为社会属性数据、生活习惯数据和消费行为数据;
所述数据处理单元对采集的大数据进行清洗,将无效数据进行过滤后,对特征进行提取,最终将数据进行拆分和合并处理;
所述数据存储单元与数据处理单元相连接,用于将处理过后的用户图像数据进行存储,采用可扩展、适用于大规模分布式系统的后台存储,并且没有兼容性问题的存储工具,从而实现为采集的大数据提供稳定而健康的数...

【专利技术属性】
技术研发人员:邱毅龙
申请(专利权)人:哈尔滨无限力创网络科技有限公司
类型:发明
国别省市:黑龙江;23

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1