【技术实现步骤摘要】
本申请实施例涉及计算机,尤其涉及一种数据入库方法、电子设备及计算机存储介质。
技术介绍
1、在企业信息和数据征信业务处理过程中,需要采集、传输、存储、加工目标企业的不同数据维度的数据内容,以确定目标企业的风险、征信和可靠性等信息。而对于实时性要求较高的业务场景,要实现从多种不同的数据源获取数据内容,并将数据内容入库耗时尽量少,才能保证实时性,同时需要保证对数据内容进行加工和分析之前,不同源的数据内容均已入库,否则会出现数据分析不准确的问题。目前,多采用按数据量及数据维度数量预估入库时间,基于预估入库时间控制数据分析启动的方式来满足实时性要求。这种方式可靠性差,容易出现数据分析结果不准确的问题。
技术实现思路
1、有鉴于此,本申请实施例提供一种数据入库方案,以至少部分解决上述问题。
2、根据本申请实施例的第一方面,提供了一种数据入库方法,包括:获取待分析的目标对象的多个数据维度的数据内容,并存储至缓存库中;创建控制总线和各所述数据维度对应的异步线程;使所述控制总线控制各所述异步线
...【技术保护点】
1.一种数据入库方法,包括:
2.根据权利要求1所述的方法,其中,所述获取待分析的目标对象的多个数据维度的数据内容,并存储至缓存库中,包括:
3.根据权利要求2所述的方法,其中,所述获取待分析的目标对象的多个数据维度的数据内容,并存储至缓存库中,还包括:
4.根据权利要求1-3中任一项所述的方法,其中,所述使所述控制总线控制各所述异步线程,从所述缓存库中读取所述异步线程对应数据维度的数据内容,并传输至存储数据库中,包括:
5.根据权利要求4所述的方法,其中,所述分布式消息集群被配置为:对各所述数据维度的数据内容打包为数据
...【技术特征摘要】
1.一种数据入库方法,包括:
2.根据权利要求1所述的方法,其中,所述获取待分析的目标对象的多个数据维度的数据内容,并存储至缓存库中,包括:
3.根据权利要求2所述的方法,其中,所述获取待分析的目标对象的多个数据维度的数据内容,并存储至缓存库中,还包括:
4.根据权利要求1-3中任一项所述的方法,其中,所述使所述控制总线控制各所述异步线程,从所述缓存库中读取所述异步线程对应数据维度的数据内容,并传输至存储数据库中,包括:
5.根据权利要求4所述的方法,其中,所述分布式消息集群被配置为:对各所述数据维度的数据内容打包为数据包,并将所述数据包发送至所述存储数据库内,所述数据包的大小根据数据处理算力和网络带宽确定。
6.根据权...
【专利技术属性】
技术研发人员:郭奇,董典贞,聂慧萍,侯祎莎,杨艳辉,单晓伟,
申请(专利权)人:爱信诺征信有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。