一种基于ANTLR 4的数据处理架构方法技术

本发明专利技术公开了一种基于ANTLR 4的数据处理架构方法，该方法支持更加丰富的规则语法并提供了多种预置的数据计算规则，同时融入了周期更新数据处理规则的热加载机制，可以为实时和离线大数据的处理逻辑编排提供灵活配置、免编译和热加载的技术方案，在大数据处理过程中临时修改数据处理逻辑后并不需要重新编译部署或者重启运行程序就能及时便捷地使规则生效并得到最新数据加工逻辑的处理结果。

【技术实现步骤摘要】

本专利技术属于大数据处理，具体涉及一种基于antlr 4的数据处理架构方法。

技术介绍

1、大数据是指大小超出了传统数据库软件工具的抓取、存储、管理和分析能力的数据群，因此对大数据的处理往往会用到分布式的多台计算机资源，而统筹分布式计算资源进行大数据处理相关的技术就是大数据处理技术。当前主流的大数据处理框架和技术包括hadoop、spark、flink、storm、hive、hbase和kafka等，这些框架或者技术平台可以统筹利用分布式的计算机资源进行大数据的分析处理和存储操作。而大数据开发人员可以利用上述大数据处理框架、平台来构建大数据处理应用程序，从而实现对海量数据的处理、分析工作。

2、语法分析(syntactic analysis)是根据某种给定的形式文法对由单词序列构成的输入文本(比如程序代码)进行分析并确定其语法结构的一种过程。而语法分析器(parser)通常是作为编译器或解释器的组件出现的，它的作用是进行语法检查、分析、并构建由输入的单词组成的数据结构(比如抽象语法树ast)。antlr(another tool forlang本文档来自技高网...

【技术保护点】

1.一种基于ANTLR 4的数据处理架构方法，其特征在于，包括如下步骤：

2.根据权利要求1所述的一种基于ANTLR 4的数据处理架构方法，其特征在于，所述步骤3中从数据库中周期读取步骤2中编写的数据处理表达式是通过表达式配置与解析模块完成。

3.根据权利要求2所述的一种基于ANTLR 4的数据处理架构方法，其特征在于，所述步骤4中处理ANTLRInputStream流是通过基于自定义规则生成的词法分析器XLogicLexer进行。

4.根据权利要求3所述的一种基于ANTLR 4的数据处理架构方法，其特征在于，所述步骤5中处理步骤4中的词法分析结果Co...

【技术特征摘要】

1.一种基于antlr 4的数据处理架构方法，其特征在于，包括如下步骤：

2.根据权利要求1所述的一种基于antlr 4的数据处理架构方法，其特征在于，所述步骤3中从数据库中周期读取步骤2中编写的数据处理表达式是通过表达式配置与解析模块完成。

3.根据权利要求2所述的一种基于antlr 4的数据处理架构方法，其特征在于，所述步骤4中处理antlrinputstream流是通过基于自定义规则生成的词法分析器xlogiclex...

【专利技术属性】
技术研发人员：方福文，赵景锋，白雨，李朝雄，
申请(专利权)人：电信科学技术第十研究所有限公司，
类型：发明
国别省市：