【技术实现步骤摘要】
工业物联网数据传输Worker服务实现方法及装置
本专利技术属于工业物联网数据传输
，涉及一种工业物联网数据传输Worker服务实现方法及装置。
技术介绍
在当前的工业设备数据系统生态中，设备数据统一由采集网关对外部Kafka集群实时上传数据。但是在采集网关上传数据过程中往往因工业现场状况、设备类型、生产厂家不同，会造成同种设备数据不同数据结构相互混合、不同厂家设备状态标识相同含义不同、设备种类繁多需要创建多个Topic来发送数据，导致后续数据清洗复杂，新增设备数据需新开发任务来处理数据，且Kafka集群需创建新Topic增加运维维护工作量。
技术实现思路
为了解决相关技术的技术问题，本申请提供了一种工业物联网数据传输Worker服务实现方法及装置，技术方案如下：第一方面，本申请提供了一种工业物联网数据传输Worker服务实现方法，所述方法包括：在Worker服务启动时，利用开发的路由信息请求接口从DC系统获取路由信息，所述路由信息包括消费者Kafka集群路由信息和生产者Kafka集...
【技术保护点】
1.一种工业物联网数据传输Worker服务实现方法，其特征在于，所述方法包括：/n在Worker服务启动时，利用开发的路由信息请求接口从DC系统获取路由信息，所述路由信息包括消费者Kafka集群路由信息和生产者Kafka集群路由信息；/n根据所述路由信息匹配Controller服务，通过Helix服务与匹配的所述Controller服务交互；/n每隔预定时间间隔利用开发的规则引擎请求接口从所述DC系统获取并更新规则引擎，所述规则引擎包括：SrcTopic、DestTopic、规则条件和规则元素；/n利用开发的RuleMessageTransformer类实现IMessage...
【技术特征摘要】
1.一种工业物联网数据传输Worker服务实现方法，其特征在于，所述方法包括：
在Worker服务启动时，利用开发的路由信息请求接口从DC系统获取路由信息，所述路由信息包括消费者Kafka集群路由信息和生产者Kafka集群路由信息；
根据所述路由信息匹配Controller服务，通过Helix服务与匹配的所述Controller服务交互；
每隔预定时间间隔利用开发的规则引擎请求接口从所述DC系统获取并更新规则引擎，所述规则引擎包括：SrcTopic、DestTopic、规则条件和规则元素；
利用开发的RuleMessageTransformer类实现IMessageTransformer接口，利用IMessageTransformer接口在数据批量处理processList方法中处理ConsumerRecord数据。
2.根据权利要求1所述的方法，其特征在于，所述利用开发的路由信息请求接口从DC系统获取路由信息，包括：
通过预存的配置文件参数调用所述路由信息请求接口以访问所述DC系统，从所述DC系统获取路由信息。
3.根据权利要求1所述的方法，其特征在于，所述每隔预定时间间隔利用开发的规则引擎请求接口从所述DC系统获取并更新规则引擎，包括：
在Worker服务WorkerInstance类中创建ExecutorService线程池；
利用所述ExecutorService线程池每隔预定时间间隔从所述DC系统获取当前路由信息内所有规则引擎Map集合；
把所述规则引擎Map集合的引用指向开发的RuleMessageTransformer类中的规则引擎Map集合，完成数据规则引擎的更新并更新规则引擎。
4.根据权利要求1所述的方法，其特征在于，所述利用IMessageTransformer接口在数据批量处理processList方法中处理ConsumerRecord数据，包括：
利用IMessageTransformer接口在processList方法中，从所述规则引擎中匹配与所述ConsumerRecord数据对应的规则引擎，利用匹配的所述规则引擎中的规则元素对所述ConsumerRecord数据进行处理，在ProducerThread类中完成数据批量多数据源传输。
5.根据权利要求4所述的方法，其特征在于，所述从所述规则引擎中匹配与所述ConsumerRecord数据对应的规则引擎，包括：
根据所述ConsumerRecord数据的SrcTopic信息找出对应的规则引擎Map集合；
遍历所述规则引擎Map集合，把规则引擎的规则条件转换成正则表达式，将所述正则表达...
【专利技术属性】
技术研发人员：高明明，韩锦，潘正颐，侯大为，
申请(专利权)人：常州微亿智造科技有限公司，
类型：发明
国别省市：江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。