确定业务指标的方法、装置及存储介质制造方法及图纸

技术编号:26890735 阅读:30 留言:0更新日期:2020-12-29 16:07
本申请公开了一种确定业务指标的方法、装置及存储介质,涉及数据处理技术。具体方案包括:获取业务服务器发来的携带实时业务数据的消息信息;根据消息信息的类型,确定业务指标对应的历史业务数据在后台数据库中的存储位置标识;根据存储位置标识从后台数据库中获取预设时间范围内的历史业务数据,并基于历史业务数据进行计算确定离线的业务指标;在每次获取消息信息时,基于实时业务数据进行计算确定实时的业务指标,并根据离线的业务指标和实时的业务指标确定目标业务指标。本申请提高历史业务数据的获取效率,将实时业务数据和历史业务数据的获取和计算过程独立起来,减小对离线存储介质的依赖,从而满足业务指标的计算任务对时效性的要求。

【技术实现步骤摘要】
确定业务指标的方法、装置及存储介质
本申请涉及数据处理技术,特别是涉及一种确定业务指标的方法、装置及存储介质。
技术介绍
在通过计算业务指标,来生成用户使用业务产生的行为数据的统计信息,从而对用户使用业务产生的行为进行分析时,经常需要结合实时业务数据和历史数据的计算结果进行联合分析。现有的实现实时业务数据和历史数据联合计算的方式是,将历史业务数据存储在离线存储介质中,如分布式存储系统Hbase集群,在每次收到实时业务数据后,需要在Hbase数据库中遍历查询历史业务数据,获取历史业务数据后再做根据实时业务数据和历史业务数据进行计算。因此,现有的业务指标确定方法存在获取效率低,对离线存储介质依赖程度大的缺点,无法满足秒级甚至毫秒的业务指标的计算任务的要求。
技术实现思路
有鉴于此,本申请的主要目的在于提供一种确定业务指标的方法,该方法无需在每次进行实时业务数据计算时均对历史业务数据进行查询和获取,提高历史业务数据的获取效率,将实时业务数据和历史业务数据的获取和计算过程独立起来,减小对离线存储介质的依赖,从而满足业务指标的计算任务本文档来自技高网...

【技术保护点】
1.一种确定业务指标的方法,其特征在于,包括:/n获取业务服务器发来的携带有实时业务数据的消息信息;所述实时业务数据为用户使用业务产生的实时数据;/n根据所述消息信息的类型,确定业务指标对应的历史业务数据在后台数据库中的存储位置标识;所述历史业务数据为用户使用业务产生的历史数据;所述业务指标为针对用户使用业务产生的行为数据的统计信息;/n根据所述存储位置标识和预设的调度周期,从所述后台数据库中获取预设时间范围内的所述历史业务数据,并基于所述历史业务数据进行计算,确定离线的业务指标;/n在每次获取所述消息信息时,基于所述实时业务数据进行计算,确定实时的业务指标,并根据所述离线的业务指标和所述实时...

【技术特征摘要】
1.一种确定业务指标的方法,其特征在于,包括:
获取业务服务器发来的携带有实时业务数据的消息信息;所述实时业务数据为用户使用业务产生的实时数据;
根据所述消息信息的类型,确定业务指标对应的历史业务数据在后台数据库中的存储位置标识;所述历史业务数据为用户使用业务产生的历史数据;所述业务指标为针对用户使用业务产生的行为数据的统计信息;
根据所述存储位置标识和预设的调度周期,从所述后台数据库中获取预设时间范围内的所述历史业务数据,并基于所述历史业务数据进行计算,确定离线的业务指标;
在每次获取所述消息信息时,基于所述实时业务数据进行计算,确定实时的业务指标,并根据所述离线的业务指标和所述实时的业务指标,确定目标业务指标。


2.根据权利要求1所述的方法,其特征在于,在获取业务服务器发来的携带有实时业务数据的消息信息时,所述方法还包括:
将所述消息信息加入消息队列中;所述消息队列为以队列形式存储的各个消息信息。


3.根据权利要求1所述的方法,其特征在于,在获取业务服务器发来的携带有实时业务数据的消息信息时,所述方法还包括:
将所述消息信息携带的所述实时业务数据保存到所述后台数据库中,作为历史业务数据存储;
记录存储的历史业务数据在所述后台数据库中的存储位置标识。


4.根据权利要求1所述的方法,其特征在于,根据所述存储位置标识和预设的调度周期,从所述后台数据库中获取预设时间范围内的所述历史业务数据的步骤包括:
获取调度周期,判断当前时间是否满足所述调度周期规定的时间间隔;
如果当前时间满足所述调度周期规定的条件,根据所述存储位置标识,从所述后台数据库中获取预设时间范围内的所述历史业务数据。


5.一种确定业务指标的装置,其特征在于,包括:
实时业务数据获取模块,用于获取业务服务器发来的携带有实时业务数据...

【专利技术属性】
技术研发人员:王瑶程建波吕军吴冲钱智钦王美青
申请(专利权)人:京东数字科技控股有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1