【技术实现步骤摘要】
本专利技术涉及数据处理,特别涉及一种动态编排实时数据集成工作流的系统。
技术介绍
1、电商平台上的数据源具有多样性和实时性的特点,传统的电商数据集成工作流一般是固定不变的,无法根据实时数据的变化进行动态调整,从而导致电商数据集成的灵活性不足,无法满足实时数据集成的需求。
技术实现思路
1、为解决上述问题,本专利技术提供了一种动态编排实时数据集成工作流的系统,以解决现有技术中电商数据集成工作流固定不变、缺乏灵活性的问题。
2、本专利技术采用以下技术方案:
3、一种动态编排实时数据集成工作流的系统,包括数据源模块、数据转换模块、数据集成模块和工作流编排模块;
4、所述数据源模块用于获取电商平台的实时数据源,并将实时数据源传输给所述数据转换模块;
5、所述数据转换模块用于对接收到的实时数据进行转换处理,并将转换后的数据传输给所述数据集成模块;
6、所述数据集成模块用于将接收到的转换后的数据进行集成,生成集成数据并将所述集成数据传输给所述
...【技术保护点】
1.一种动态编排实时数据集成工作流的系统,其特征在于:包括数据源模块、数据转换模块、数据集成模块和工作流编排模块;
2.如权利要求1所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述数据源模块通过API接口连接到电商平台以获取实时数据源。
3.如权利要求2所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述数据源模块采用流式处理框架并根据预设的数据获取规则获取所述实时数据源。
4.如权利要求3所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述实时数据源包括商品信息、订单信息以及用户信息中的任意一种或几种。
5.如...
【技术特征摘要】
1.一种动态编排实时数据集成工作流的系统,其特征在于:包括数据源模块、数据转换模块、数据集成模块和工作流编排模块;
2.如权利要求1所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述数据源模块通过api接口连接到电商平台以获取实时数据源。
3.如权利要求2所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述数据源模块采用流式处理框架并根据预设的数据获取规则获取所述实时数据源。
4.如权利要求3所述的一种动态编排实时数据集成工作流的系统,其特征在于:所述实时数据源包括商品信息、订单信息以及用户信息中的任意一种或几种。
5.如权利要求4所述的一种动态编排实时数据集成工作流的系统,其特...
【专利技术属性】
技术研发人员:陈碧勇,方敏,许志龙,
申请(专利权)人:厦门南讯股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。