一种多通道实时用户数据分析方法技术

本申请公开了一种多通道实时用户数据分析方法

【技术实现步骤摘要】
一种多通道实时用户数据分析方法、装置、设备、介质


[0001]本专利技术涉及大数据实时处理
，特别涉及一种多通道实时用户数据分析方法
、
装置
、
设备
、
介质
。

技术介绍

[0002]现有技术中对于用户数据分析主要是利用用户数据分析系统并利用离线数据分析技术实现用户数据的数据分析，对于用户数据的处理和分析
、
用户多身份的唯一识别，多平台多途径的用户数据的合并都是离线进行的，也即缺乏时效性，无法充分利用实时数据的实时价值
。
[0003]综上，如何实现对实时用户数据的数据分析，充分保证用户数据的时效性，利用用户数据的实时价值是本领域有待解决的技术问题
。

技术实现思路

[0004]有鉴于此，本专利技术的目的在于提供一种多通道实时用户数据分析方法
、
装置
、
设备
、
介质，能够实现对实时用户数据的数据分析，充分保证用户数据的时效性，利用用户数据的实时价值
。
...

【技术保护点】

【技术特征摘要】
1.
一种多通道实时用户数据分析方法，其特征在于，包括：获取通过各个通道的收集的外部数据源的实时用户数据；对可重用组件按照数据清洗任务进行流程编排，以获取预配置可重用组件；利用所述预配置可重用组件对所述实时用户数据进行数据清洗，以获取预设数据格式的目标实时用户数据；提取所述目标实时用户数据的身份标识，并基于所述身份标识与预设用户身份表对所有实时用户数据进行数据合并，以获取多个携带唯一身份标识的用户数据组；其中，一个用户数据组中的所有实时用户数据对应同一个唯一身份标识，每个用户数据组的唯一身份标识均不同于其他用户数据组
。2.
根据权利要求1所述的多通道实时用户数据分析方法，其特征在于，所述获取通过各个通道的收集的外部数据源的实时用户数据，包括：获取通过各个通道的收集的外部数据源的实名用户数据和匿名用户数据
。3.
根据权利要求1所述的多通道实时用户数据分析方法，其特征在于，所述对可重用组件按照数据清洗任务进行流程编排，以获取预配置可重用组件，包括：通过处理条件
、
组件名称
、
组件参数
、
失败策略对可重用组件进行流程编排控制；当接收数据清洗指令时，通过动态编译技术对所述可重用组件进行编译，以生成对应的组件实例作为预配置可重用组件；相应的，所述利用所述预配置可重用组件对所述实时用户数据进行数据清洗，以获取预设数据格式的目标实时用户数据，包括：利用所述组件实例对所述实时用户数据进行数据清洗，以获取预设数据格式的目标实时用户数据
。4.
根据权利要求1所述的多通道实时用户数据分析方法，其特征在于，所述提取所述目标实时用户数据的身份标识，并基于所述身份标识与预设用户身份表对所有实时用户数据进行数据合并，以获取多个携带唯一身份标识的用户数据组，包括：从所述目标实时用户数据的身份字段中提取身份标识，并基于所有目标实时用户数据的身份标识构建身份标识集合；查询预设用户身份表，判断所述预设用户身份表中是否存在与所述身份标识集合中的各个身份标识对应的用户编号；若存在，则将所述用户编号存储至用户
ID
集合中；若不存在，则新生成对应的新用户编号，并构建存储所述新用户编号与对应的身份标识的身份映射关系于所述预设用户身份表中，并将该新用户编号存储至所述用户
ID
集合中；查询所述用户
ID
集合，若所述
ID
用户集合有且仅有一个用户编号，则将所述用户编号作为唯一身份标识；若所述用户
ID
集合有多个用户编号，则取数值最小的用户编号作为唯一身份标识；对含有多个用户编号的每个用户
ID
集合中除所述唯一身份标识外的其他用户编号对应的目标实时用户数据进行数据合并，以...

【专利技术属性】
技术研发人员：娄瑶佳，
申请(专利权)人：上海盟聚信息科技有限公司，
类型：发明
国别省市：