The invention discloses a data evaluation method, device, terminal device and readable storage medium. The method includes: data quality evaluation function based on data evaluation system and data open evaluation function, collecting data quality evaluation information and data open evaluation information from data resource detail interface, and opening evaluation information of data quality evaluation information and data respectively. Price information is input into the pre-constructed data quality evaluation model and data open evaluation model for evaluation and analysis, and the corresponding evaluation report is output. The invention can analyze the data quality and existing problems of the whole data lake, find out the causes of the problems, rectify common problems of data quality, and continuously promote the continuous opening and sharing of the data lake.
【技术实现步骤摘要】
一种数据评价方法、装置、终端设备及可读存储介质
本专利技术涉及数据处理
,具体涉及一种数据评价方法、装置、终端设备及可读存储介质。
技术介绍
当数据湖的数据被大规模使用后,各种数据质量的评价、问题反馈便会随之而来,对此,需要一套可以利用收集到的评价信息形成的数据质量评价体系,以确保整体数据质量。在对现有技术的研究与实践过程中,本专利技术的专利技术人发现,基于从数据使用者处(机构、组织)收集评价信息并对数据质量评判,包括数据是否及时、数据是否完整、数据的价值如何,能够分析整个数据湖的数据质量及存在问题,找出问题的原因,整改数据质量的常见问题,持续推进数据湖的持续开放和共享。
技术实现思路
本专利技术实施例所要解决的技术问题在于,提供一种构建数据评价体系的方法,能够分析整个数据湖的数据质量及存在问题,找出问题的原因,整改数据质量的常见问题,持续推进数据湖的持续开放和共享。为解决上述问题,本专利技术的一个实施例提供一种构建数据评价体系的方法,适用于在计算机设备中执行,至少包括如下步骤:基于数据评价体系的数据质量评价功能和数据开放的评价功能,从数据资源详情界面中收集数据 ...
【技术保护点】
1.一种数据评价方法,适于在计算设备中执行,其特征在于,至少包括如下步骤:基于数据评价体系的数据质量评价功能和数据开放的评价功能,从数据资源详情界面中收集数据质量评价信息和数据开放评价信息;分别将所述数据质量评价信息和所述数据开放评价信息输入预先构建的数据质量评价模型和数据开放评价模型中进行评价分析,输出相应的评价报告。
【技术特征摘要】
1.一种数据评价方法,适于在计算设备中执行,其特征在于,至少包括如下步骤:基于数据评价体系的数据质量评价功能和数据开放的评价功能,从数据资源详情界面中收集数据质量评价信息和数据开放评价信息;分别将所述数据质量评价信息和所述数据开放评价信息输入预先构建的数据质量评价模型和数据开放评价模型中进行评价分析,输出相应的评价报告。2.根据权利要求1所述的数据评价方法,其特征在于,所述分别将所述数据质量评价信息和所述数据开放评价信息输入预先构建的数据质量评价模型和数据开放评价模型中进行评价分析,输出相应的评价报告,具体为:将所述数据质量评价信息输入预先构建的数据质量评价模型,进行数据及时性、数据完整性和数据一致性分析,并按设定的周期生成数据质量评价报告;将所述数据开放评价信息输入预先构建的数据开放评价模型,进行数据资源个数、数据资源记录数、数据资源存储大小和数据资源更新周期分析,并按设定的周期生成数据开放评价报告;根据所述数据质量评价报告和所述数据开放评价报告,输出最终的评价报告,以使客户端根据所述评价报告对相应的数据质量和数据开放的相关问题进行整改。3.根据权利要求2所述的数据评价方法,其特征在于,所述数据质量评价模型对所述数据质量评价信息中的数据一致性的评价分析步骤为:从所述数据质量评价信息中抽取需要进行数据一致性评价的数据,形成样本数据表;对所述样本数据表中的数据进行格式化,即从所述数据质量评价...
【专利技术属性】
技术研发人员:谢桂园,刘忻,魏文国,蔡君,
申请(专利权)人:广东技术师范学院,广州市品高软件股份有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。