一种数据处理方法及系统技术方案

技术编号:18668355 阅读:33 留言:0更新日期:2018-08-14 20:39
本发明专利技术涉及一种数据处理方法及系统,其中数据处理方法包括:确定向候选数据提供数据库的参考属性信息;获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;匹配成功,则所述候选数据筛选为目标数据;本发明专利技术的数据处理方法在开发一款APP设备软件,能够自动地实时更新,能够帮助企业对数据的处理具有长期有效性、自动更新性、节约工作成本、提高工作效力。

A data processing method and system

The invention relates to a data processing method and a system, wherein the data processing method includes: determining the reference attribute information of a database to be provided to candidate data; obtaining the candidate data information, extracting the candidate data attribute information from the candidate data information and matching the reference attribute information of the database; If the matching is successful, the candidate data is selected as the target data; the data processing method of the invention is developing an APP device software, which can automatically update the data in real time, and can help the enterprise to process the data with long-term effectiveness, automatic update, save the work cost and improve the work efficiency.

【技术实现步骤摘要】
一种数据处理方法及系统
本专利技术涉及数据处理
,尤其涉及一种数据处理方法及系统。
技术介绍
数据(Data)是对事实、概念或指令的一种表达形式,可由人工或自动化装置进行处理。数据经过解释并赋予一定的意义之后,便成为信息。数据处理(dataprocessing)是对数据的采集、存储、检索、加工、变换和传输。数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据。数据处理是系统工程和自动控制的基本环节。数据处理贯穿于社会生产和社会生活的各个领域。数据处理技术的发展及其应用的广度和深度,极大地影响着人类社会发展的进程。
技术实现思路
针对现有技术的不足,本专利技术提供了一种高效运行的数据处理方法及系统。为实现上述目的,本专利技术采用如下技术方案:一种数据处理方法,包括:确定向候选数据提供数据库的参考属性信息;获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;匹配成功,则所述候选数据筛选为目标数据。其中,所述确定向候选数据提供数据库的参考属性信息,包括:更新所述数据库的参考属性信息。其中,获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:更新所述获取的候选数据信息。其中,获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:对获取的所述候选数据信息进行脱敏处理,所述脱敏处理是指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。作为优选,所述匹配成功,则所述候选数据筛选为目标数据后包括:对所述目标数据设置一定的阀值,当所述候选数据筛选为所述目标数据的数量超过所述阀值时,则超出的所述目标数据部分在下一次筛选时具有优先权。为实现上述目的,本专利技术采用如下另一技术方案:一种数据处理系统,包括:确定模块,用于确定向候选数据提供数据库的参考属性信息;获取模块,用于获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;筛选模块,用于匹配成功,则所述候选数据筛选为目标数据。其中,所述确定模块包括第一更新模块,所述第一更新模块用于所述确定向候选数据提供数据库的参考属性信息时,更新所述数据库的参考属性信息。其中,所述获取模块包括第二更新模块,所述第二更新模块用于获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配时,更新所述获取的候选数据信息。其中,所述获取模块包括脱敏模块,所述脱敏模块用于获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配时,对获取的所述候选数据信息进行脱敏处理。作为优选,所述的数据处理系统包括优先权模块;所述优先权模块用于所述匹配成功,则所述候选数据筛选为目标数据后,对所述目标数据设置一定的阀值,当所述候选数据筛选为所述目标数据的数量超过所述阀值时,则超出的所述目标数据部分在下一次筛选时具有优先权。本专利技术所阐述的一种数据处理方法及系统,其有益效果在于:与现有技术相比,本专利技术的数据处理方法,包括:确定向候选数据提供数据库的参考属性信息;获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;匹配成功,则所述候选数据筛选为目标数据;在对数据的筛选采取了一些行之有效的方法,特别在更新所述数据库的参考属性信息以及更新所述获取的候选数据信息时,对数据的实时更新时,开发一款APP设备软件,能够自动地实时更新,能够帮助企业对数据的处理具有长期有效性、自动更新性、节约工作成本、提高工作效力。附图说明图1是本专利技术实施例的一种数据处理方法的流程图。图2是本专利技术实施例的另一种数据处理方法的流程图。图3是本专利技术实施例的一种数据处理系统的结构框图。具体实施方式下面结合附图与具体实施例来对本专利技术作进一步描述。参照图1所示,其显示出了本专利技术实施例的一种数据处理方法,包括以下步骤:步骤S101、确定向候选数据提供数据库的参考属性信息;步骤S102、获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;其中,获取所述候选数据信息,可以通过AAP设备对信息进行更新,也可以对候选数据的信息进行线下记录等。例如候选数据的信息与参考属性的信息进行匹配,或候选数据的信息与参考属性的信用信息进行匹配,对每一项匹配度设置一定的分值,总共的匹配就有一个总的分值,再从高分到低分进行排序等。步骤S103、匹配成功,则所述候选数据筛选为目标数据。其中,步骤S101、确定向候选数据提供数据库的参考属性信息,包括:步骤S1011、更新所述数据库的参考属性信息,通过APP软件自动更新。其中,步骤S102、获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:步骤S1021、更新所述获取的候选数据信息,通过APP软件自动更新。其中,步骤S102、获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:步骤S1012、对获取的所述候选数据信息进行脱敏处理。对获取的所述候选数据信息进行脱敏处理是指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。在涉及客户安全数据或者一些商业性敏感数据的情况下,在不违反系统规则条件下,对真实数据进行改造并提供测试使用。数据库安全技术之一,数据库安全技术主要包括:数据库漏扫、数据库加密、数据库防火墙、数据脱敏、数据库安全审计系统。数据库安全风险包括:拖库、刷库、撞库。参照图2所示,其显示出了本专利技术实施例的一种数据处理方法,包括以下步骤:步骤S201、确定向候选数据提供数据库的参考属性信息;步骤S202、获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;步骤S203、匹配成功,则所述候选数据筛选为目标数据。其中步骤S201、步骤S202、步骤S203和图1中的步骤S101、步骤S102、步骤S103一样,这里不再叙述。步骤S204、对所述目标数据设置一定的阀值,当所述候选数据筛选为所述目标数据的数量超过所述阀值时,则超出的所述目标数据部分在下一次筛选时具有优先权。此方法中对超出的所述目标数据部分在下一次筛选时具有优先权对于下一次筛选节约了时间、提高了效力。参照图3所示,其显示出了本专利技术实施例的一种数据处理系统,包括:确定模块1,用于确定向候选数据提供数据库的参考属性信息;获取模块2,用于获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;筛选模块3,用于匹配成功,则所述候选数据筛选为目标数据。其中,所述确定模块1包括第一更新模块11,所述第一更新模块11用于所述确定向候选数据提供数据库的参考属性信息时,更新所述数据库的参考属性信息。其中,所述获取模块2包括第二更新模块21,所述第二更新模块21用于获取所述候选数据信息,从所述候选数据信息中本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:确定向候选数据提供数据库的参考属性信息;获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;匹配成功,则所述候选数据筛选为目标数据。

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:确定向候选数据提供数据库的参考属性信息;获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配;匹配成功,则所述候选数据筛选为目标数据。2.根据权利要求1所述的数据处理方法,其特征在于,所述确定向候选数据提供数据库的参考属性信息,包括:更新所述数据库的参考属性信息。3.根据权利要求2所述的数据处理方法,其特征在于,获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:更新所述获取的候选数据信息。4.根据权利要求3所述的数据处理方法,其特征在于,获取所述候选数据信息,从所述候选数据信息中提取所述候选数据属性信息与所述数据库的参考属性信息进行匹配,包括:对获取的所述候选数据信息进行脱敏处理,所述脱敏处理是指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。5.根据权利要求4所述的数据处理方法,其特征在于,所述匹配成功,则所述候选数据筛选为目标数据后包括:对所述目标数据设置一定的阀值,当所述候选数据筛选为所述目标数据的数量超过所述阀值时,则超出的所述目标数据部分在下一次筛选时具有优先权。6.一种数据处理系统,其特征在于,包括:确定模块,用于确定...

【专利技术属性】
技术研发人员:郭标
申请(专利权)人:深圳市汗青文化传媒有限公司
类型:发明
国别省市:广东,44

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1