一种基于大数据分析的政策信息服务系统及方法技术方案

本发明专利技术属于管理技术领域，公开了一种基于大数据分析的政策信息服务系统及方法，数据挖掘模块用于获取最新政策文件以及相关信息；数据处理模块用于进行数据预处理；数据提取模块用于对数据进行多维度分析；数据分类模块用于进行政策的分类汇总；存储模块用于存储获取到的相关政策文件；数据更新模块用于进行政策信息的实时更新；查询模块用于进行相关政策的查询；反馈模块进行政策反馈；统计模块用于生成统计报表；定制提醒模块用于进行相关政策的定制提醒。本发明专利技术通过对获取到的原数据进行预处理分析，提高了数据的准确度以及可靠度，实现了政策的精准分析，提高了政策信息的价值利用率。

【技术实现步骤摘要】
一种基于大数据分析的政策信息服务系统及方法
本专利技术属于管理
，尤其涉及一种基于大数据分析的政策信息服务系统及方法。
技术介绍
目前，政策宣讲是政策落地实施的重要前提，也是推进社会发展的重要手段之一。近年来，中小企业对政策信息及相关咨询服务的需求越来越迫切，全面快捷地获取政策类资讯信息，为企业发展提供决策依据。然而政策在贯彻宣传过程中存在层级过多、渠道单一、缺乏反馈等问题，从而导致科技政策实施过程中出现理解不全、执行偏差等情况。通过上述分析，现有技术存在的问题及缺陷为：现有政策宣传以及公开主要通过政务网实现，层级过多，渠道单一且并无反馈渠道。
技术实现思路
针对现有技术存在的问题，本专利技术提供了一种基于大数据分析的政策信息服务系统及方法。本专利技术是这样实现的，一种基于大数据分析的政策信息服务方法，包括：步骤一，利用大数据挖掘技术从各个政务公开网站获取最新政策文件以及相关信息；利用大数据分析处理技术对获取到的各个政策文件、相关信息进行预处理并获取从各个政务公开网站获取最新政策文件以及相关数据本文档来自技高网...

【技术保护点】
1.一种基于大数据分析的政策信息服务方法，其特征在于，所述基于大数据分析的政策信息服务方法包括：/n步骤一，利用大数据挖掘技术从各个政务公开网站获取最新政策文件以及相关信息；利用大数据分析处理技术对获取到的各个政策文件、相关信息进行预处理并获取从各个政务公开网站获取最新政策文件以及相关数据信息；/n步骤二，对获取到的相关文件、数据信息进行数据来源验证，验证通过则转向步骤三，验证未通过则删除相关数据；/n步骤三，对验证来源通过的数据进行去重、过滤、归一化处理；首先由数据处理模块计算需要存储文件的文件特征和每个数据块的指纹，然后将文件特征指纹与每个数据块指纹发送给主节点单元；所述数据指纹是通过哈希...

【技术特征摘要】
1.一种基于大数据分析的政策信息服务方法，其特征在于，所述基于大数据分析的政策信息服务方法包括：
步骤一，利用大数据挖掘技术从各个政务公开网站获取最新政策文件以及相关信息；利用大数据分析处理技术对获取到的各个政策文件、相关信息进行预处理并获取从各个政务公开网站获取最新政策文件以及相关数据信息；
步骤二，对获取到的相关文件、数据信息进行数据来源验证，验证通过则转向步骤三，验证未通过则删除相关数据；
步骤三，对验证来源通过的数据进行去重、过滤、归一化处理；首先由数据处理模块计算需要存储文件的文件特征和每个数据块的指纹，然后将文件特征指纹与每个数据块指纹发送给主节点单元；所述数据指纹是通过哈希函数生成的散列值，能唯一标识生成该数据指纹的数据块，具有全局唯一性；
步骤四，由主节点单元根据该文件特征指纹去主索引中检索；所述的主索引为key-value键值对的数据结构，key为文档特征指纹，代表某一类文件，value为该指向类文件的相似性集合的指针，指向某一特定文件的相似性集合，即指向从索引；
步骤五，如果未检索到与该文件特征指纹相同的记录，则表明该文件为一新文件；若检索到已存在与该文件特征指纹相同的记录，则表明存在同类型的文件数据存在，则将此文件进行删除；
步骤六，基于步骤三至步骤五提取到的文件标签以及自定义分类属性进行政策的分类汇总；基于大数据分析技术对预处理后的政策文件以及相关信息内容进行多维度分析；
步骤七，利用数据库存储获取到的相关政策文件，并建立政策文件关键词和政策文档之间的索引映射关系表；进行政策信息的实时更新；所述建立政策文件关键词和政策文档之间的索引映射关系表包括：获取各个政策文件以及相关数据信息的标签；基于大数据分析技术计算各个政策文件以及相关数据信息中某个标签出现的次数，将标签出现次数与文档编号建立索引关系；
基于建立的索引关系通过行列运算计算相对于标签的文档相关性排序；基于建立的索引关系按照相关性排序结果构建索引映射关系表；
步骤八，通过自定义查询条件或输入查询关键词查询相关政策文件，并输出查询报表；针对查询过或正在查询的政策文件提供数据反馈通道，收集针对查看的政策的相关意见或建议信息，并进行信息反馈。


2.如权利要求1所述基于大数据分析的政策信息服务方法，其特征在于，所述步骤三中的哈希函数采用的为SHA-1算法。


3.如权利要求1所述基于大数据分析的政策信息服务方法，其特征在于，所述步骤八中，根据定义统计条件进行政策信息及相关数据文件的统计，并生成统计报表；同时阅阅览相关政策信息，基于自定义的政策订阅条件进行相关政策的定制提醒；同时针对感兴趣或正在查看的政策文件提供相应政策解读文件或相关数据链接。


4.如权利要求3所述基于大数据分析的政策信息服务方法，其特征在于，所述基于自定义的政策订阅条件进行相关政策的定制提醒方法包括：
步骤1，自定义的政策订阅条件；
步骤2，提取订阅条件中有关政策的相关关键词；
步骤3，根据提取到的关键词在政策文件关键词和政策文档之间的索引映射关系表中进行检索；
步...

【专利技术属性】
技术研发人员：刘合安，
申请(专利权)人：湖南城市学院，
类型：发明
国别省市：湖南;43