This application discloses a chain data state acquisition system and a method in which the chain data state acquisition system collects the state parameters and processing results of all the processing subsystems of the chain data processing system through a server, and generates them respectively according to the state parameters and processing results of the collected chain data. The process data and the result data of the chained data are stored in the client. When the state data of the chained data need to be obtained to know the state of the chained data, the query can be made from the state database of the chained data stored in the client without requiring multiple teams in turn on the machines of each processing subsystem. The process of viewing log and data container greatly reduces the difficulty of obtaining state data of chain data, reduces the communication cost of obtaining state data of chain data, and improves the efficiency of obtaining state data of chain data.
【技术实现步骤摘要】
一种链式数据状态采集系统及方法
本申请涉及计算机应用
,更具体地说,涉及一种链式数据状态采集系统及方法。
技术介绍
链式数据处理系统是指对数据进行多次顺序处理的系统,一般包括若干个处理子系统,一条链式数据在链式数据处理系统中一般需要经过多次处理,例如链式数据A经过处理子系统M的处理后,得到链式数据A的第一次处理结果B,这个第一次处理结果B又是处理子系统N的输入数据,处理子系统N对第一次处理结果B进行处理后获得第二次处理结果C,得到的第二次处理结果C再被其他处理子系统进行处理,最终获得处理结果。有时候我们需要知道链式数据处理系统中链式数据的处理进度如何,这条数据是否还会继续在后续数据处理系统中出现,或者获得链式数据的原始数据,例如在搜索离线数据的过程中,我们经常需要经过多个处理子系统才能将原始数据推送到线上服务,在现有技术中,这个过程可能需要多个团队在各个处理子系统的机器上依次查看日志和数据容器才能获悉。随着处理子系统、机器和团队的增多,这种获取链式数据状态的方法显然存在着效率低下和沟通成本高的问题。
技术实现思路
为解决上述技术问题,本专利技术提供了一种链式数据状态采集系统及方法,以实现降低获取链式数据状态的沟通成本,提高获取链式数据的状态数据的效率的目的。为实现上述技术目的,本专利技术实施例提供了如下技术方案:一种链式数据状态采集系统,用于采集链式数据处理系统中链式数据的状态数据,所述链式数据的状态数据包括链式数据的过程数据和链式数据的结果数据;所述链式数据处理系统包括多个处理子系统;所述链式数据状态采集系统包括:服务器和客户端;其中,所述服务器,用于 ...
【技术保护点】
1.一种链式数据状态采集系统,其特征在于,用于采集链式数据处理系统中链式数据的状态数据,所述链式数据的状态数据包括链式数据的过程数据和链式数据的结果数据;所述链式数据处理系统包括多个处理子系统;所述链式数据状态采集系统包括:服务器和客户端;其中,所述服务器,用于采集所述多个处理子系统中链式数据的状态参数,并根据采集的链式数据的状态参数生成所述链式数据的过程数据;所述客户端,用于采集所述多个处理子系统中链式数据的处理结果,并根据采集的链式数据的处理结果生成所述链式数据的结果数据;以及用于对所述过程数据和结果数据进行存储,获得链式数据的状态数据库。
【技术特征摘要】
1.一种链式数据状态采集系统,其特征在于,用于采集链式数据处理系统中链式数据的状态数据,所述链式数据的状态数据包括链式数据的过程数据和链式数据的结果数据;所述链式数据处理系统包括多个处理子系统;所述链式数据状态采集系统包括:服务器和客户端;其中,所述服务器,用于采集所述多个处理子系统中链式数据的状态参数,并根据采集的链式数据的状态参数生成所述链式数据的过程数据;所述客户端,用于采集所述多个处理子系统中链式数据的处理结果,并根据采集的链式数据的处理结果生成所述链式数据的结果数据;以及用于对所述过程数据和结果数据进行存储,获得链式数据的状态数据库。2.根据权利要求1所述的系统,其特征在于,所述客户端还用于根据用户输入的查询参数查询所述链式数据的状态数据库,获得目标数据的过程数据和结果数据。3.根据权利要求2所述的系统,其特征在于,所述查询参数为链式数据编号。4.根据权利要求1所述的系统,其特征在于,所述采集所述多个处理子系统中链式数据的状态参数,并根据采集的链式数据的状态参数生成所述链式数据的过程数据的具体过程包括:采集所述多个处理子系统中链式数据的状态参数;对采集的所述链式数据的状态参数进行解析和转换,获得所述链式数据的过程数据。5.根据权利要求1所述的系统,其特征在于,所述状态参数包括:链式数据编号、链式数据更新编号、当前处理子系统参数和数据处理参数。6.一种...
【专利技术属性】
技术研发人员:王磊,
申请(专利权)人:北京奇艺世纪科技有限公司,
类型:发明
国别省市:北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。