业务数据加载方法、装置、电子设备、产品及存储介质制造方法及图纸

技术编号:43044551 阅读:22 留言:0更新日期:2024-10-22 14:30
本申请涉及数据处理技术领域,提供一种业务数据加载方法、装置、电子设备、产品及存储介质。所述方法包括:根据用户实时访问多个业务数据表的多条实时访问记录,确定每个所述业务数据表的实际访问占比;根据所述用户在历史周期内访问多个所述业务数据表的多条历史访问记录,确定多个所述业务数据表的趋势数组指标;基于所述实际访问占比和所述趋势数组指标,加载所述业务数据表的业务数据。本申请通过实际访问占比和趋势数组指标,加载业务数据,实现了基于用户需求加载业务数据,提升了缓存资源的使用率,有利于提升访问效率,能够更好的服务于用户。

【技术实现步骤摘要】

本申请涉及数据处理,具体涉及一种业务数据加载方法、装置、电子设备、产品及存储介质


技术介绍

1、目前在互联网和电子商务领域,分布式缓存系统被用于实时数据分析、数据湖集成和加速、大规模数据提取-转换-加载,(extract-transform-load,etl)等场景。它可以将数据从hadoop等批处理系统缓存到内存中,提供低延迟的数据查询和分析,增强实时决策能力。除了上述行业,还有许多大规模的行业也在广泛应用分布式缓存系统来处理大规模数据和加速数据处理任务,例如人工智能和机器学习、广告技术、物联网安全、基因组学等领域。

2、现有的分布式缓存系统加载业务数据的方式主要是通过被动加载以及基于规则主动加载方式,被动加载方式在业务高峰时容易产生资源争用,而基于规则主动加载方式不灵活同时维护成本也高,效果难以评估。

3、上述业务数据的加载方法的资源利用率低。


技术实现思路

1、本申请实施例提供一种业务数据加载方法、装置、电子设备、产品及存储介质,用以解决业务数据加载的资源利用率低的技术问题。<本文档来自技高网...

【技术保护点】

1.一种业务数据加载方法,其特征在于,包括:

2.根据权利要求1所述的业务数据加载方法,其特征在于,所述根据用户实时访问多个业务数据表的多条实时访问记录,确定每个所述业务数据表的实际访问占比,包括:

3.根据权利要求1所述的业务数据加载方法,其特征在于,所述根据所述用户在历史周期内访问多个所述业务数据表的多条历史访问记录,确定多个所述业务数据表的趋势数组指标,包括:

4.根据权利要求1所述的业务数据加载方法,其特征在于,所述基于所述实际访问占比和所述趋势数组指标,加载所述业务数据表的业务数据,包括:

5.根据权利要求4所述的业务数据加载方法...

【技术特征摘要】

1.一种业务数据加载方法,其特征在于,包括:

2.根据权利要求1所述的业务数据加载方法,其特征在于,所述根据用户实时访问多个业务数据表的多条实时访问记录,确定每个所述业务数据表的实际访问占比,包括:

3.根据权利要求1所述的业务数据加载方法,其特征在于,所述根据所述用户在历史周期内访问多个所述业务数据表的多条历史访问记录,确定多个所述业务数据表的趋势数组指标,包括:

4.根据权利要求1所述的业务数据加载方法,其特征在于,所述基于所述实际访问占比和所述趋势数组指标,加载所述业务数据表的业务数据,包括:

5.根据权利要求4所述的业务数据加载方法,其特征在于,所述基于所述实际访问占比和所述趋势数组指标,将所述业务数据表确定为待加载业务数据表,包括:

6....

【专利技术属性】
技术研发人员:王雪峰王晓征郭岳潘宇虹吴天东王淼鑫
申请(专利权)人:中国移动通信集团浙江有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1