【技术实现步骤摘要】
基于数据中台的业务数据智能存储方法及系统
[0001]本专利技术涉及数据存储处理
,尤其涉及基于数据中台的业务数据智能存储方法及系统。
技术介绍
[0002]随着数字化时代的到来,企业面临着日益增长的业务数据量和复杂的数据需求,为了更好地管理和利用企业的数据资产,数据业务中台应运而生。数据业务中台是一个统一的数据管理和服务平台,旨在集中管理企业内各类数据资源,提供数据共享、数据治理和数据服务等功能,以支持企业的决策和业务创新,从而实现对业务的赋能加速。然而,现有技术业务数据存储量较大,数据存储处理缺乏标准化,导致存储效率较低。
技术实现思路
[0003]本申请通过提供基于数据中台的业务数据智能存储方法及系统,解决了现有技术业务数据存储量较大,数据存储处理缺乏标准化,导致存储效率较低的技术问题,达到利用业务数据标识实现数据分流处理,保证数据存储处理准确性和存储处理标准化,进而提高数据存储效率的技术效果。
[0004]鉴于上述问题,本专利技术提供了基于数据中台的业务数据智能存储方法及系统。
...
【技术保护点】
【技术特征摘要】
1.基于数据中台的业务数据智能存储方法,其特征在于,所述方法包括:搭建业务数据中台,所述业务数据中台的功能架构包括数据感知层、数据资产层和数据服务层;通过所述数据感知层对业务流程数据进行记录,采集获取业务异构数据信息;获取数据标识规则,基于所述数据标识规则对所述业务异构数据信息进行标识,获得业务数据标识信息;按照所述业务数据标识信息对所述业务异构数据信息进行整合、分流,获得业务数据处理流向信息;基于所述业务数据处理流向信息对所述业务异构数据信息进行分支预处理,生成标准业务数据信息;将所述标准业务数据信息传输至所述数据资产层进行数据编码压缩,得到业务资产压缩数据信息;将所述业务资产压缩数据信息在所述数据资产层进行标签化存储,并基于所述数据服务层对所述业务资产压缩数据信息进行调用服务。2.如权利要求1所述的方法,其特征在于,所述获得业务数据标识信息,包括:根据所述数据标识规则,确定属性标识规则和敏感度标识规则;通过所述属性标识规则构建属性分类器,所述属性分类器包括产生时间、数据层级、数据类型、生成格式;按照所述属性分类器对所述业务异构数据信息进行分类标识,获得数据属性标识信息;基于所述敏感度标识规则对所述业务异构数据信息进行敏感度评估,确定数据敏感度标识信息;基于所述数据属性标识信息和所述数据敏感度标识信息,组合生成所述业务数据标识信息。3.如权利要求1所述的方法,其特征在于,所述获得业务数据处理流向信息,包括:基于所述业务数据标识信息对所述业务异构数据信息进行分类整合,得到业务异构同属数据信息;根据所述业务数据标识信息,设置数据处理双通道,所述数据处理双通道包括结构化数据处理通道和非结构化数据处理通道;对所述业务异构同属数据信息进行结构化分类,获得业务同属数据结构化格式;基于所述数据处理双通道对所述业务同属数据结构化格式进行分流,确定所述业务数据处理流向信息。4.如权利要求3所述的方法,其特征在于,所述生成标准业务数据信息,包括:基于所述结构化数据处理通道对所述业务异构数据信息进行异常数据识别,获取异常业务数据信息;对所述异常业务数据信息进行数据清洗处理,得到标准结构化业务数据信息;依据所述非结构化数据处理通道对所述业务异构数据信息进行去噪预处理、特征提取,得到标准业务特征数据信息;基于所述标准结构化业务数据信息和所述标准业务特征数据信息,生成所述标准业务
...
【专利技术属性】
技术研发人员:胡树,谢进,郑亚飞,周黎,周洋旭,刘彭闵,耿莉萍,刘勇,丁鹏,魏渊,梁凯,
申请(专利权)人:成都智慧锦城大数据有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。