数据检测方法及装置制造方法及图纸

技术编号:28498754 阅读:30 留言:0更新日期:2021-05-19 22:37
本申请实施例公开了一种数据检测方法,包括:接收质检用户通过用户交互界面输入的待检数据的检测请求;对所述检测请求按照预定条件进行有效性测试;响应于测试通过的情况,按照检测请求的所述数据检测周期和所述优先级加入任务队列,生成检测任务,并将所述检测任务发送至所述执行器;所述执行器按照异步方式执行所述检测任务,得到检测结果;将所述检测结果发送至所述用户交互界面,并按照所述预警方式提示所述质检用户。其能够保证数据的准确性、完整性、及时性。及时性。及时性。

【技术实现步骤摘要】
数据检测方法及装置


[0001]本申请涉及计算机
,尤其涉及一种数据检测方法、装置、电子设备及计算机可读介质。

技术介绍

[0002]证券行业对证券信息数据服务商所提供数据的准确性、完整性、及时性有很高的要求,每个交易日有海量、繁杂的数据需要处理,同时也需要对数据的采集、处理、发布等各个环节进行全面检测与监控,来确保数据的准确性、完整性、及时性。目前大多都是依赖于人工或简单的工具如查询分析器等进行检查与处理。随着需要检测的数据日益增多,由此带来的是工作强度大、操作繁琐、问题发现和处理不及时、处理过程无法追踪及溯源等弊端。

技术实现思路

[0003]本申请实施例提供一种数据检测方法,其能够保证数据的准确性、完整性、及时性。
[0004]本申请实施例提供一种数据检测方法,所述方法应用于数据检测系统,该系统具有用户交互界面、执行器,包括:
[0005]接收质检用户通过用户交互界面输入的待检数据的检测请求,其中,所述待检数据的检测请求包括待检测对象名称及其属性数据、数据检测周期、预警方式,及所述质检用户定义;...

【技术保护点】

【技术特征摘要】
1.一种数据检测方法,所述方法应用于数据检测系统,该系统具有用户交互界面、执行器,其特征在于,包括:接收质检用户通过用户交互界面输入的待检数据的检测请求,其中,所述待检数据的检测请求包括待检测对象名称及其属性数据、数据检测周期、预警方式,及所述质检用户定义;对所述检测请求按照预定条件进行有效性测试;响应于测试通过的情况,按照检测请求的所述数据检测周期和所述优先级加入任务队列,生成检测任务,并将所述检测任务发送至所述执行器;所述执行器按照异步方式执行所述检测任务,得到检测结果;将所述检测结果发送至所述用户交互界面,并按照所述预警方式提示所述质检用户。2.根据权利要求1所述的方法,其特征在于,所述响应于测试通过的情况,按照检测请求的所述数据检测周期和所述优先级加入任务队列,生成检测任务,包括:利用异步任务处理器或定时任务分配器根据所述数据检测周期和所述优先级,将标注为激活状态的所述检测请求生成检测任务对象,放入队列管理工具Celery任务队列中,生成检测任务。3.根据权利要求2所述的方法,其特征在于,所述执行器按照异步方式执行所述检测任务,得到检测结果,包括:所述执行器根据所述检测任务的数量启动多个队列管理工具Celery集群,按照异步方式执行所述检测任务,得到检测结果。4.根据权利要求2或3所述的方法,其特征在于,所述执行器按照异步方式执行所述检测任务,得到检测结果,包括:当接收到所述启动检测任务指令时,队列管理工具Celery通过调度进程Beat向Redis队列发布检测任务;所述队列管理工具Celery的工作进程采用竞争模式从所述Redis队列中获取并执行所述检测任务,获得所述检测结果。5.根据权利要求1所述的方法,其特征在于,所述检测对象名称包括宏引用,所述执行器按照异步方式执行所述检测任务,得到检测结果,包括:查询是否存在所述宏引用对应的宏变量的当前值;响应于不存...

【专利技术属性】
技术研发人员:樊平
申请(专利权)人:深圳市今日投资数据科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1