无特征数据处理方法、装置、计算机设备及存储介质制造方法及图纸

本发明专利技术实施例公开了无特征数据处理方法、装置、计算机设备及存储介质。所述方法包括：获取API接口上传输的数据，以得到待处理数据；获取终端所定义的数据标签；获取用户访问的URL，以得到待关联URL；对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果；展示所述分析结果。通过实施本发明专利技术实施例的方法可实现可对从API接口上传输数据进行采集，且对无特征数据进行定义标签，并自动进行数据的识别、分类以及分级，提高数据处理效率。提高数据处理效率。提高数据处理效率。

【技术实现步骤摘要】
无特征数据处理方法、装置、计算机设备及存储介质


[0001]本专利技术涉及数据处理方法，更具体地说是指无特征数据处理方法、装置、计算机设备及存储介质。

技术介绍

[0002]在现有的数据处理中，一般都需要对数据进行数据标签处理，数据标签处理包括对数据的标识、分类以及分级等处理，数据包括传输中的数据以及相对静态存储于数据库系统中的数据，对于传输中的数据，特别是经过API(应用程序接口，Application Programming Interface)接口传输的数据，目前仅能针对有数据特征的数据进行处理，有数据特征的数据是指待识别的数据可以通过数据本身总结或抽象出一个或多个明显区别其它数据的特征，通过单个特征或组合多个特征使用正则、关键字、字典、机器学习模型、脚本等可以对数据进行唯一标识，如个人隐私数据中的姓名、性别、手机号码、邮箱等数据；但是，对于经过API接口传输的无数据特征的数据，则无法自动且快速地进行数据处理，无数据特征是指无法从数据本身通过单个特征或组合多个特征使用正则、关键字、字典、机器学习模型、脚本等可以对数据进行唯一标识，如财务类相关数据、销售类相关的成本/价格/利润
…
、不同行业中的业务数据等数据；由于无法对无特征数据进行识别、分类以及分级等处理，只能由人工执行，存在效率低下，且影响后续对于数据分析的效果。
[0003]因此，有必要设计一种新的方法，实现可对从API接口上传输数据进行采集，且对无特征数据进行定义标签，并自动进行数据的识别、分类以及分级，提高数据处理效率。/>
技术实现思路

[0004]本专利技术的目的在于克服现有技术的缺陷，提供无特征数据处理方法、装置、计算机设备及存储介质。
[0005]为实现上述目的，本专利技术采用以下技术方案：无特征数据处理方法，包括：
[0006]获取API接口上传输的数据，以得到待处理数据；
[0007]获取终端所定义的数据标签；
[0008]获取用户访问的URL，以得到待关联URL；
[0009]对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果；
[0010]展示所述分析结果。
[0011]其进一步技术方案为：所述获取终端所定义的数据标签，包括：
[0012]由终端启动浏览器插件，并利用所述浏览器插件拦截用户交互动作的请求信息或响应信息；
[0013]由终端根据所拦截的信息定位用户访问指定的页面数据对应的URL及字段；
[0014]由终端对用户访问指定的页面数据对应的URL及字段进行数据标签定义，以得到数据标签；
[0015]获取所述数据标签。
[0016]其进一步技术方案为：所述由终端根据所拦截的信息定位用户访问指定的页面数据对应的URL及字段，包括：
[0017]由终端从用户访问页面复制指定的数据，并与所拦截的信息通过使用关键字或正则进行双向模糊匹配，当匹配到数据，获取匹配的数据所对应字段和URL，若页面数据上不同字段对应的数据不相同，则进行再次定位；若页面数据上存在不同字段对应的数据有相同值，则从上一次匹配结果中再次执行页面交互和定位动作，以获取用户访问指定的页面数据对应的URL及字段。
[0018]其进一步技术方案为：所述数据标签包括对数据的标识、分类以及分级的定义规则；所述数据标签可引用预置或自定义的数据标识名称、数据分类名称、数据分级名称，以对自定义的数据标识名称、数据分类名称、数据分级名称对应的字段进行数据标识、数据分类、数据分级。
[0019]其进一步技术方案为：所述对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果，包括：
[0020]对所述待关联URL匹配对应的API接口，以得到目标API接口；
[0021]将所述待关联URL对应的字段与所述目标API接口对应的字段进行关联；
[0022]将所述数据标签中关于所述待关联URL对应的字段所对应的数据标签关联至所述目标API接口对应的字段，以得到关联结果；
[0023]根据所述关联结果生成所述目标API接口所采集的待处理数据对应的标签列表及图形，以得到分析结果。
[0024]其进一步技术方案为：所述对所述待关联URL匹配对应的API接口，以得到目标API接口，包括：
[0025]对所述待关联URL进行信息分割，以得到访问URL路径；
[0026]对所述访问URL路径进行分割，以得到第一有序数组；
[0027]对所述API接口进行信息分割和路径分割，以得到第二有序数组；
[0028]遍历所述第一有序数组，并将所述第一有序数组与所述第二有序数组相同位置的值进行对比，以确定所述待关联URL所匹配成功的API接口；
[0029]对所述待关联URL所匹配成功的API接口进行打标识，以得到目标API接口。
[0030]其进一步技术方案为：所述标签列表包括目标API接口名称、用户访问URL、URL对应的字段名称以及数据标签信息；所述图形包括有数据标签和无数据标签的API接口数量统计结果、有数据标签和无数据标签的API接口数量的百分比统计结果、前一百名的API接口数据标签、按天绘制新增数据标签的API接口数量的趋势图以及数据标签类别筛选统计结果。
[0031]本专利技术还提供了无特征数据处理装置，包括：
[0032]数据获取单元，用于获取API接口上传输的数据，以得到待处理数据；
[0033]标签获取单元，用于获取终端所定义的数据标签；
[0034]URL获取单元，用于获取用户访问的URL，以得到待关联URL；
[0035]关联单元，用于对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果；
[0036]展示单元，用于展示所述分析结果。
[0037]本专利技术还提供了一种计算机设备，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述的方法。
[0038]本专利技术还提供了一种存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时可实现上述的方法。
[0039]本专利技术与现有技术相比的有益效果是：本专利技术通过获取API接口上传输的数据，并在终端上定义数据标签，获取用户访问的URL，根据用户访问的URL匹配API接口，并由数据标签和匹配的API接口上传输的数据进行关联，实现可对从API接口上传输数据进行采集，且对无特征数据进行定义标签，并自动进行数据的识别、分类以及分级，提高数据处理效率。
[0040]下面结合附图和具体实施例对本专利技术作进一步描述。
附图说明
[0041]为了更清楚地说明本专利技术实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.无特征数据处理方法，其特征在于，包括：获取API接口上传输的数据，以得到待处理数据；获取终端所定义的数据标签；获取用户访问的URL，以得到待关联URL；对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果；展示所述分析结果。2.根据权利要求1所述的无特征数据处理方法，其特征在于，所述获取终端所定义的数据标签，包括：由终端启动浏览器插件，并利用所述浏览器插件拦截用户交互动作的请求信息或响应信息；由终端根据所拦截的信息定位用户访问指定的页面数据对应的URL及字段；由终端对用户访问指定的页面数据对应的URL及字段进行数据标签定义，以得到数据标签；获取所述数据标签。3.根据权利要求2所述的无特征数据处理方法，其特征在于，所述由终端根据所拦截的信息定位用户访问指定的页面数据对应的URL及字段，包括：由终端从用户访问页面复制指定的数据，并与所拦截的信息通过使用关键字或正则进行双向模糊匹配，当匹配到数据，获取匹配的数据所对应字段和URL，若页面数据上不同字段对应的数据不相同，则进行再次定位；若页面数据上存在不同字段对应的数据有相同值，则从上一次匹配结果中再次执行页面交互和定位动作，以获取用户访问指定的页面数据对应的URL及字段。4.根据权利要求1所述的无特征数据处理方法，其特征在于，所述数据标签包括对数据的标识、分类以及分级的定义规则；所述数据标签可引用预置或自定义的数据标识名称、数据分类名称、数据分级名称，以对自定义的数据标识名称、数据分类名称、数据分级名称对应的字段进行数据标识、数据分类、数据分级。5.根据权利要求1所述的无特征数据处理方法，其特征在于，所述对所述待关联URL匹配对应的API接口，并对所述数据标签以及待处理数据进行关联分析，以得到分析结果，包括：对所述待关联URL匹配对应的API接口，以得到目标API接口；将所述待关联URL对应的字段与所述目标API接口对应的字段进行关联；将所述数据标签中关于所述待关联URL对应的字段所...

【专利技术属性】
技术研发人员：刘小龙，
申请(专利权)人：深圳红途科技有限公司，
类型：发明
国别省市：