特征数据的导入方法、管控方法、装置及电子设备制造方法及图纸

技术编号:24497848 阅读:35 留言:0更新日期:2020-06-13 03:45
本申请提供了一种特征数据的导入方法、管控方法、装置及电子设备,特征数据的导入方法应用于特征平台服务器,包括:获取用户从特征表向元数据表导入的特征元数据,其中,特征表为用户采集的特征数据组成的结构化表,元数据表为特征数据库中的模板对应的表;校验用户是否有特征元数据的导入权限;如果用户有导入权限,校验特征元数据是否符合元数据表的要求;如果特征元数据符合要求,将特征元数据写入元数据表中。本申请相比于现有的通过手动输入导入特征数据的方式,大大提高了特征数据导入效率。

Import method, control method, device and electronic equipment of characteristic data

【技术实现步骤摘要】
特征数据的导入方法、管控方法、装置及电子设备
本申请涉及大数据
,尤其涉及一种特征数据的导入方法、管控方法、装置及电子设备。
技术介绍
随着神经网络技术的快速发展,越来越多的公司业务会用到机器学习或者模型训练,需要获取大量的样本数据或者特征,因此,建立一个特征平台,通过特征平台对特征数据进行管理,变的非常重要。而现有的特征平台,往往需要获取工作人员手动填表,建表完成特征数据的导入,工作效率差。
技术实现思路
有鉴于此,本申请实施例提供一种特征数据的导入方法、管控方法、装置及电子设备,首先从用户的特征表中获取特征元数据,然后在验证用户有权限和数据满足元数据表要求时,再导入数据,这种方式相比于现有的通过手动输入的方式导入特征数据,大大提高了特征数据导入效率。根据本申请的一个方面,提供一种电子设备,可以包括一个或多个存储介质和一个或多个与存储介质通信的处理器。一个或多个存储介质存储有处理器可执行的机器可读指令。当电子设备运行时,处理器与存储介质之间通过总线通信,处理器执行所述机器可读指令,以执行特征数据的导入方法和/本文档来自技高网...

【技术保护点】
1.一种特征数据的导入方法,其特征在于,所述方法应用于特征平台服务器,包括:/n获取用户从特征表向元数据表导入的特征元数据,其中,所述特征表为所述用户采集的特征数据组成的结构化表,所述元数据表为特征数据库中的模板对应的表;/n校验所述用户是否有所述特征元数据的导入权限;/n如果所述用户有导入权限,校验所述特征元数据是否符合所述元数据表的要求;/n如果所述特征元数据符合要求,将所述特征元数据写入所述元数据表中。/n

【技术特征摘要】
1.一种特征数据的导入方法,其特征在于,所述方法应用于特征平台服务器,包括:
获取用户从特征表向元数据表导入的特征元数据,其中,所述特征表为所述用户采集的特征数据组成的结构化表,所述元数据表为特征数据库中的模板对应的表;
校验所述用户是否有所述特征元数据的导入权限;
如果所述用户有导入权限,校验所述特征元数据是否符合所述元数据表的要求;
如果所述特征元数据符合要求,将所述特征元数据写入所述元数据表中。


2.根据权权要求1所述的方法,其特征在于,获取用户从特征表向元数据表导入的特征元数据的步骤,包括:
监听用户是否对特征表中的特征数据进行拖拽操作;
如果是,获取被拖拽的特征数据的特征元数据和所述特征元数据对应的元数据表。


3.根据权权要求2所述的方法,其特征在于,获取所述特征元数据对应的元数据表的步骤,包括:
如果接收到所述用户的新建指令,为所述特征元数据新建元数据表;
如果接收到所述用户的添加指令,查找与所述特征元数据匹配的元数据表,将查找到的元数据表作为所述特征元数据对应的元数据表。


4.根据权权要求1所述的方法,其特征在于,校验所述用户是否有所述特征元数据的导入权限的步骤,包括:
向权限服务器发送查询请求;其中,所述查询请求中携带有所述用户的账号及所述元数据表的标识;
如果接收到所述权限服务器返回有权限的提示信息,确定所述用户有所述特征元数据的导入权限;其中,所述有权限的提示信息为所述权限服务器在查找到所述用户的账号对应有所述元数据表时生成的。


5.根据权权要求1所述的方法,其特征在于,所述元数据表的要求包括:对所述特征表的分区要求、带有国家码的特征表的国家码要求和数据唯一性要求。


6.根据权权要求1所述的方法,其特征在于,所述特征表为Hive表。


7.一种特征数据的管控方法,其特征在于,所述方法应用于特征平台服务器,所述特征平台服务器存储有特征数据库,所述特征数据库中的特征元数据表中的特征元数据采用权权要求1-6任一项所述方法导入的,所述管控方法包括:
接收用户的特征数据操作请求;其中,所述特征数据操作请求携带有操作类型;
查找所述用户的管理权限;
如果查找到的所述管理权限包含有所述操作类型对应的操作权限,响应所述操作类型对应的操作。


8.根据权权要求7所述的方法,其特征在于,如果查找到的所述管理权限包含有所述操作类型对应的操作权限,响应所述操作类型对应的操作的步骤,包括:
如果查找到的所述管理权限为查看权限,且所述操作类型为查看操作,显示所述特征数据操作请求对应的数据;
如果查找到的所述管理权限为提取权限或审批权限,且所述操作类型为查看操作或提取操作,提供所述特征数据操作请求对应的数据;
如果查找到的所述管理权限为审批权限,且所述操作类型为审批操作,为所述审批操作对应的用户分配所述特征数据操作请求对应的数据的查看权限或提取权限。


9.根据权权要求7所述的方法,其特征在于,所述方法还包括:
按照预设的权限维度,分配所述元数据表中的特征元数据的管理权限;其中,所述预设的权限维度包括:特征类型、用户类型、区域范围中的至少一个维度。


10.根据权权要求9所述的方法,其特征在于,按照预设的权限维度,分配所述元数据表中的特征元数据的管理权限的步骤,包括:
如果预设的权限维度包括特征类型,获取当前元数据表的特征类型对应的安全标签;
根据所述安全标签分配所述元数据表中的特征元数据的管理权限。


11.根据权权要求9所述的方法,其特征在于,按照预设的权限维度,分配所述元数据表中的特征元数据的管理权限的步骤,包括:
如果预设的权限维度包括用户类型,按照所述用户类型中的管理等级和/或价值等级分配所述元数据表中的特征元数据的管理权限。


12.根据权权要求9所述的方法,其特征在于,按照预设的权限维度,分配所述元数据表中的特征元数据的管理权限的步骤,包括:
如果预设的权限维度包括区域范围,按照区域范围划分所述元数据表中的特征元数据,对划分后的特征元数据分配管理权限。


13.一种特征数据的导入装置,其特征在于,所述装置应用于特征平台服务器,包括:
数据获取模块,用于获取用户从特征表向元数据表导入的特征元数据,其中,所述特征表为所述用户采集的特征数据组成的结构化表,所述元数据表为特征数据库中的模板对应的表;
...

【专利技术属性】
技术研发人员:王志明何龙杜龙志付俊强范育峰余芳李奘
申请(专利权)人:北京嘀嘀无限科技发展有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1