基于大数据的科技成果数据融合方法技术

本发明专利技术实施例公开了一种基于大数据的科技成果数据融合方法，包括：搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控；对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总；对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入；对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险。本发明专利技术能够实现跨平台、跨领域、跨专业的科技成果数据接入，能方便的查询、展示、共享科技成果信息，将生产经营中形成的科技成果进行深度挖掘，提高管理效率和业务精确度。

【技术实现步骤摘要】
基于大数据的科技成果数据融合方法
本专利技术涉及数据管理
，尤其是一种基于大数据的科技成果数据融合方法。
技术介绍
研究如何跨平台、跨领域、跨专业实现科技成果数据深度融合，实现可查询、可统计、可分析、可挖掘的科研成果数据安全管理，时数据管理的核心。科技成果数据范围较广，数据源头较多，根据不同数据来源的差异性，研究数据获取及传输的技术手段，克服数据格式不统一，数据库类型不统一，数据采集方式不统一等问题的方法。主要包括：一是对不同平台、不同领域、不同专业的科技成果数据及产业数据的接入；二是通过统计分析及数据转化完成多源数据融合。在现有技术中，科技成果类数据的管理与挖掘能力较为薄弱，科技成果缺乏统一的数据格式、数据源头、采集方法及使用方式，无法同项目信息形成关联关系，统计分析困难，不能直观方便的查询科技成果信息，成果和过程资料展示不全面，数据共享困难，亟需开展科技成果数据融合和共享研究工作，将生产经营管理研究中形成的成果进行深度挖掘，提高管理效率和业务的精确度。因此，现有技术需要改进。
技术实现思路
本专利技术实施例所要解决的一个技术问题是：提供一种基于大数据的科技成果数据融合方法，以解决现有技术存在的问题。所述基于大数据的科技成果数据融合方法包括：搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控；对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总；对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入；对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控包括：对生产经营管理数据进行建模，构建科技成果数据指标体系；设置科技成果数据指标体系中各项指标数据的填报模板，实时接收并存储科技成果数据；设置各项指标的具体健康阈值，并设置不健康指标的预警条件；对数据库中的科技成果数据进行监控，当数据触发不健康指标的预警条件时，启动预警机制。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总包括：通过同比、环比、占比方式分析科技成果数据；利用饼状图、柱状图、折线图对科技成果数据进行可视化展示；制定科技成果数据的报表生成模板，自动生成科技成果数据报表；使用JAVA可视化场景，对科技成果数据模型进行可视化展示。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入包括：应用informatica工具进行ETL程序开发，将科技成果数据抽取到全业务数据中心；定义科技成果数据接入接口的规范，明确数据交换的时间、格式、内容要求；通过报表和日志的方式完成对数据接口的验证，对科技成果数据进行抽取，所述抽取包括初始抽取和定期抽取，所述初始抽取是从源系统中将相关的科技成果数据一次性的抽取，所述定期抽取是指根据不同的数据内容，按照数据抽取周期，在指定的时间内对数据进行抽取；判断科技成果数据是否为全业务中心数据，如果是，则直接导入数据库使用；否则，申请数据接入，判断申请数据接入的科技成果数据是否支持页面导入；如果是，则通过系统导入接口将科技成果数据导入数据库；否则，通过人工方式，将数据录入到数据库。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险包括：对科技成果数据用户的应用安全进行认证，对用户身份信息进行认证，对用户操作进行授权，对数据的输入输出进行验证，对系统的配置、会话、参数操作和异常情况进行管理；对科技成果数据安全进行管理，使科技成果数据的存储、传输、备份、访问控制进行安全管理；对操作系统安全进行管理，对操作系统进行身份认证、访问控制限制、病毒入侵防范、漏洞扫描、补丁更新、安全审计、数据备份、恶意代码防范；对数据库安全进行管理，对数据库系统身份认证、访问控制、漏洞扫描、安全审计和补丁更新。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对用户身份信息进行认证包括：通过MD5方式将密码存储在数据库中；不在cookie中保存登录密码，当浏览器关闭时，所有认证信息均销毁；进行密码强度配置，支持密码强度配置开关和强制修改密码开关，登陆时校验密码强度，强度不够时强制修改密码；登录失败次数超额锁定，当登录失败次数超过设定的阈值时，自动锁定账户，并将事件写入日志；配置登录账户的IP地址，拒绝统一账户在多个IP地址登录。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对数据的输入输出进行验证包括：通过过滤器对URL的请求参数以及表单的GET、POST数据中包含的javascript脚本的非法字符进行过滤，防止信息篡改；基于正则表达式进行输入验证，满足不同场景的科技成果数据需要；对用户登录等过程是否有sql注入的参数进行验证，防止sql注入攻击；基于身份认证后上传文件，支持配置上传文件的类型；对用户在客户端输入或导入的数据进行长度、范围、数据类型属性的合法性进行检验，对不合法的数据禁止输入模块，并且提示错误信息；统一输入及输出数据验证接口，保障验证逻辑的一致性；按照各接口数据格式，对输入数据数据进行格式化，包括URL、日期、数字、字符串格式，确保数据格式正确；对特殊字符进行检测，防止XML注入、SQL注入及脚本注入攻击，包括单引号、1＝1、CDATA、for、loop；执行数据过滤及筛选，对不合法数据进行丢弃及报警、统一各集成接口错误提示信息。在基于本专利技术上述基于大数据的科技成果数据融合方法的另一个实施例中，所述对系统的配置、会话、参数操作和异常情况进行管理包括：系统配置管理：设定配置变更管理流程，关键信息发生配置变更时，实行审批制度，所述关键信息包括：数据库连接、运行参数、模板信息；设置配置信息的保存及版本控制规则，避免发生版本丢失或混淆；使用基于角色的授权策略控制配置管理角色，控制配置权限粒度，配置管理功能经过授权的操作员和管理员访问；数据库连接、系统运行参数等配置交由中间件进行统一管理，模板配置信息进行加密存储；系统会话管理：设置会话存活时间，超时后自动销毁用户会话，删除会话信息；...

【技术保护点】
1.一种基于大数据的科技成果数据融合方法，其特征在于，包括：/n搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控；/n对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总；/n对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入；/n对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险。/n

【技术特征摘要】
1.一种基于大数据的科技成果数据融合方法，其特征在于，包括：
搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控；
对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总；
对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入；
对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险。


2.根据权利要求1所述的基于大数据的科技成果数据融合方法，其特征在于，所述搭建基于大数据的科技成果数据融合数据库，构建科技成果数据指标体系，设置各项指标的健康阈值，对健康状况进行监控包括：
对生产经营管理数据进行建模，构建科技成果数据指标体系；
设置科技成果数据指标体系中各项指标数据的填报模板，实时接收并存储科技成果数据；
设置各项指标的具体健康阈值，并设置不健康指标的预警条件；
对数据库中的科技成果数据进行监控，当数据触发不健康指标的预警条件时，启动预警机制。


3.根据权利要求1所述的基于大数据的科技成果数据融合方法，其特征在于，所述对科技成果数据利用可视化图形进行可视化展示，对应用数据进行自动分析汇总包括：
通过同比、环比、占比方式分析科技成果数据；
利用饼状图、柱状图、折线图对科技成果数据进行可视化展示；
制定科技成果数据的报表生成模板，自动生成科技成果数据报表；
使用JAVA可视化场景，对科技成果数据模型进行可视化展示。


4.根据权利要求1所述的基于大数据的科技成果数据融合方法，其特征在于，所述对数据进行融合处理，对数据获取进行转换和不同数据平台的数据抽取，实现跨平台、跨领域、跨专业的科技成果数据接入包括：
应用informatica工具进行ETL程序开发，将科技成果数据抽取到全业务数据中心；
定义科技成果数据接入接口的规范，明确数据交换的时间、格式、内容要求；
通过报表和日志的方式完成对数据接口的验证，对科技成果数据进行抽取，所述抽取包括初始抽取和定期抽取，所述初始抽取是从源系统中将相关的科技成果数据一次性的抽取，所述定期抽取是指根据不同的数据内容，按照数据抽取周期，在指定的时间内对数据进行抽取；
判断科技成果数据是否为全业务中心数据，如果是，则直接导入数据库使用；
否则，申请数据接入，判断申请数据接入的科技成果数据是否支持页面导入；
如果是，则通过系统导入接口将科技成果数据导入数据库；
否则，通过人工方式，将数据录入到数据库。


5.根据权利要求1所述的基于大数据的科技成果数据融合方法，其特征在于，所述对用户及数据进行安全认证，防止科技成果数据涉及泄密和篡改信息、恶意代码风险包括：
对科技成果数据用户的应用安全进行认证，对用户身份信息进行认证，对用户操作进行授权，对数据的输入输出进行验证，对系统的配置、会话、参数操作和异常情况进行管理；
对科技成果数据安全进行管理，使科技成果数据的存储、传输、备份、访问控制进行安全管理；
对操作系统安全进行管理，对操作系统进行身份认证、访问控制限制、病毒入侵防范、漏洞扫描、补丁更新、安全审计、数据备份、恶意代码防范；
对数据库安全进行管理，对数据库系统身份认证、访问控制、漏洞扫描、安全审计和补丁更新。


6.根据权利要求1所述的基于大数据的科技成果数据融合方法，其特征在于，所述对用户身份信息进行认证包括：
通过MD5方式将密码存储在数据库中；
不在cookie中保存登录密码，当浏览器关闭时，所有认证信息均销毁；
进行密码强度配置，支持密码强度配置开关和强制修改密码开关，登陆时校验密码强度，强度不够时强制修改密码；
登录失败次数超额锁定，当登录失败次数超过设定的阈值时，自动锁定账户，并将事件写入日志；
配置登录账户的IP地址，拒绝统一账户在多个IP地址登录。


7.根据权利要求5所述的基于大数据的科技成果数据融合方法，其特征在于，所述对数据的输入输出进行验证包括：
通过过滤器对URL的请求参数以及表单的GET、POST数据中包含的javas...

【专利技术属性】
技术研发人员：秦砺寒，黄毅臣，运晨超，赵微，何慧，吴小明，
申请(专利权)人：国网冀北电力有限公司经济技术研究院，北京博望华科科技有限公司，国家电网有限公司，
类型：发明
国别省市：北京;11