System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及数据处理,具体而言,涉及一种数据中台的数据处理方法及计算机设备。
技术介绍
1、数据中台是一种数据管理体系,作用是支持企业的多个部门的业务数据和提供计算服务,为企业提供数据共享、数据分析和数据应用,数据中台是新型信息化应用框架体系的核心,对于企业的运营和发展具有重要的战略意义。
2、在整个数据中台实施及运维阶段,基于用户层面的深度统计分析、关联操作是贯穿整体的核心,用户层面的操作通常是以用户标识为基础的,但现有的用户标识是字符串形式,需要进行遍历字符串、字符转换等额外操作,耗费了数据中台的运算资源,导致数据中台的运算速度慢,不能满足联机分析处理场景。
技术实现思路
1、本申请针对上述现有技术中的不足,提供一种数据中台的数据处理方法及计算机设备,以便解决现有技术中存在的问题。
2、本申请实施例采用的技术方案如下:
3、第一方面,本申请实施例提供了一种数据中台的数据处理方法,包括:
4、从预设应用系统的数据库中拉取用户的字符串身份标识;
5、依次创建各所述用户的数字身份标识;
6、根据所述用户的字符串身份标识、所述用户的数字身份标识以及所述用户的数字身份标识的创建日期,生成所述用户的身份信息记录;
7、将所述用户的身份信息记录存储至预设用户信息数据表中,用以基于所述用户的数字身份标识,对所述用户的业务数据进行关联分析。
8、在一实施例中,所述方法还包括:
9、根据各所述
10、所述根据所述用户的字符串身份标识、所述用户的数字身份标识以及所述用户的数字身份标识的创建日期,生成所述用户的身份信息记录,包括:
11、根据所述用户的字符串身份标识、所述用户的数字身份标识、所述用户的数字身份标识的创建日期,以及各所述用户的来源标志生成所述用户的身份信息记录。
12、在一实施例中,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
13、从所述预设应用系统的日志数据库中拉取第一用户的实时行为日志;
14、基于所述实时行为日志获取所述第一用户的字符串身份标识;
15、所述根据各所述用户的字符串身份标识对应的拉取来源的信息,分别生成各所述用户的来源标志,包括:
16、根据所述日志数据库的信息,生成所述第一用户的第一来源标志,以指示所述第一用户的字符串身份标识的拉取来源为所述日志数据库。
17、在一实施例中,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
18、从所述预设应用系统的付费数据库中拉取第二用户的付费记录信息;
19、基于所述付费记录信息获取所述第二用户的字符串身份标识;
20、所述根据各所述用户的字符串身份标识对应的拉取来源的信息,分别生成各所述用户的来源标志,包括:
21、根据所述付费数据库的信息,生成所述第二用户的第二来源标志,以指示所述第二用户的字符串身份标识的拉取来源为所述付费数据库。
22、在一实施例中,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
23、从所述预设应用系统的注册数据库中拉取第三用户的注册信息以及所述第三用户的注册日期;
24、基于所述第三用户的注册信息获取所述第三用户的字符串身份标识;
25、所述根据各所述用户的字符串身份标识对应的拉取来源的信息,分别生成各所述用户的来源标志,包括:
26、根据所述注册数据库的信息,生成所述第三用户的第三来源标志,以指示所述第三用户的字符串身份标识的拉取来源为所述注册数据库;
27、所述根据所述用户的字符串身份标识、所述用户的数字身份标识、所述用户的数字身份标识的创建日期,以及各所述用户的来源标志生成所述用户的身份信息记录,包括:
28、根据所述第三用户的字符串身份标识、所述第三用户的数字身份标识、所述第三用户的数字身份标识的创建日期、所述第三用户的来源标志以及所述第三用户的注册日期,生成所述第三用户的身份信息记录。
29、在一实施例中,所述依次创建各所述用户的数字身份标识之前,所述方法还包括:
30、根据所述第三用户的字符串身份标识,确定所述第三用户是否存在预先创建的数字身份标识;
31、所述依次创建各所述用户的数字身份标识,包括;
32、若所述第三用户不存在预先创建的数字身份标识,则依次创建各所述第三用户的数字身份标识。
33、在一实施例中,所述方法还包括:
34、若所述第三用户存在预先创建的数字身份标识,则根据所述第三用户的字符串身份标识、所述预先创建的数字身份标识以及所述第三用户的注册日期,生成所述第三用户的身份信息记录;
35、将所述第三用户的身份信息记录存储至预设用户信息数据表中。
36、在一实施例中,所述方法还包括:
37、获取各所述用户的有效指示信息,以指示所述用户是否为有效用户;
38、根据各用户的有效指示信息,以及所述用户的创建日期,采用所述预设用户信息数据表,从各所述用户中查找实时有效用户。
39、在一实施例中,所述方法还包括:
40、获取各所述第三用户的有效指示信息,以指示各所述第三用户是否为有效用户;
41、根据各所述第三用户的有效指示信息,以及所述第三用户的注册日期,采用所述预设用户信息数据表,从所述第三用户中查找基础有效用户。
42、第二方面,本申请实施例提供了一种计算机设备,包括:处理器、存储介质和总线,所述存储介质存储有所述处理器可执行的程序指令,当计算机设备运行时,所述处理器与所述存储介质之间通过总线通信,所述处理器执行所述程序指令,以实现上述任一实施例所述的数据中台的数据处理方法。
43、本申请的有益效果是:本申请提供了一种数据中台的数据处理方法及计算机设备,该方法包括从预设应用系统的数据库中拉取用户的字符串身份标识;依次创建各用户的数字身份标识;根据用户的字符串身份标识、用户的数字身份标识以及用户的数字身份标识的创建日期,生成用户的身份信息记录;将用户的身份信息记录存储至预设用户信息数据表中,用以基于用户的数字身份标识,对用户的业务数据进行关联分析。采用本申请的方法,在数据中台需处理涉及字符串身份标识的业务需求时,可以使用数字身份标识替代原有的字符串身份标识,节省了数据中台的运算资源,提高了数据中台的运算速度,能够满足联机分析处理场景。
本文档来自技高网...【技术保护点】
1.一种数据中台的数据处理方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
4.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
5.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
6.根据权利要求5所述的方法,其特征在于,所述依次创建各所述用户的数字身份标识之前,所述方法还包括:
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
9.根据权利要求6所述的方法,其特征在于,所述方法还包括:
10.一种计算机设备,其特征在于,包括:处理器、存储介质和总线,所述存储介质存储有所述处理器可执行的程序指令,当计算机设备运行时,所述处理器与所述存储介质之间通过总线通信,所
...【技术特征摘要】
1.一种数据中台的数据处理方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
4.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
5.根据权利要求2所述的方法,其特征在于,所述从预设应用系统的数据库中拉取用户的字符串身份标识,还包括:
6.根据权利要求5所述的方法,其特征在于,所述依...
【专利技术属性】
技术研发人员:李鸣,肖云,曾泽基,刘旺,
申请(专利权)人:未来电视有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。