一种日志处理方法、装置、终端设备及计算机可读存储介质制造方法及图纸

技术编号:23190859 阅读:19 留言:0更新日期:2020-01-24 16:14
本发明专利技术涉及一种数据分析技术领域,揭露了一种日志处理方法,该方法包括:根据预先定义的搜索处理语言的语法格式,获取目标语法文件;通过JAVACC根据预设的语法功能函数对目标语法文件进行语法转换,得到Query DSL结构的搜索请求;通过Elasticsearch搜索服务器根据Query DSL结构的搜索请求进行搜索,获得搜索结果。本发明专利技术还提供一种日志处理装置、终端设备及计算机可读存储介质。本发明专利技术提供的日志处理方法、终端设备及计算机可读存储介质,能够通过定义搜索处理语言的语法格式,获取对应的目标语法文件,通过语法功能函数将目标语法文件转换为Query DSL结构的搜索请求,进而通过Query DSL结构的搜索请求获得搜索结果,简化用户操作,简化日志信息处理的操作过程,降低操作难度。

A log processing method, device, terminal equipment and computer readable storage medium

【技术实现步骤摘要】
一种日志处理方法、装置、终端设备及计算机可读存储介质
本专利技术涉及数据分析
,尤其涉及一种日志处理方法、终端设备及计算机可读存储介质。
技术介绍
随着网络技术的不断发展,很多公司将业务搭载在网络上进行日常业务管理。在公司的运维和安全领域方面,对于业务系统的网络访问日志处理尤为重要,运维和开发人员通过分析日志可以了解服务器的性能安全性、网站的访问流量等信息。目前,当业务系统遇到问题时,可以登录服务器查找日志文件定位相应漏洞,然后找出解决方案。目前通过开源的ELK(ElasticsearchLogstashKibana)搭建日志分析平台进行日志信息统计、分析等处理时,需要使用基于JSON的完整的查询域特定语言(QueryDSL)来定义搜索语句。由于QueryDSL十分复杂,基于QueryDSL的搜索语句往往十分复杂且内容庞大,导致现有技术中用户向ELK日志分析平台输入搜索语句的过程操作复杂且耗费大量时间。
技术实现思路
有鉴于此,本专利技术提出一种日志处理方法、终端设备及计算机可读存储介质,以解决现有技术中用户向ELK日志分析平台输入搜索语句的过程操作复杂且耗费大量时间的问题。首先,为实现上述目的,本专利技术提出一种日志处理方法,该方法包括步骤:根据预先定义的搜索处理语言的语法格式,获取目标语法文件;通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求;通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果。可选地,所述通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求的步骤包括:通过所述爪哇编译器从所述预设的语法功能函数中确定与所述目标语法文件相对应的目标语法功能函数;通过所述爪哇编译器根据所述目标语法功能函数对所述目标语法文件进行语法转换,得到所述查询域特定语言结构的搜索请求。可选的,所述通过所述爪哇编译器根据所述目标语法功能函数对所述目标语法文件进行语法转换,得到所述查询域特定语言结构的搜索请求的步骤包括:通过所述爪哇编译器对所述目标语法文件进行编译得到目标可执行爪哇代码,根据所述目标语法功能函数对所述目标可执行爪哇代码进行语法转换,得到所述查询域特定语言结构的搜索请求。可选地,所述所述通过所述爪哇编译器对所述目标语法文件进行编译得到目标可执行爪哇代码,根据所述目标语法功能函数对所述目标可执行爪哇代码进行语法转换,得到所述查询域特定语言结构的搜索请求,包括:在所述目标语法文件为网址访问统计语句的情况下,通过所述爪哇编译器从所述预设的语法功能函数中确定与所述网址访问统计语句相对应的网址访问统计语法功能函数;通过所述爪哇编译器根据所述网址访问统计语法功能函数对所述网址访问统计进行语法转换,得到所述查询域特定语言结构的网址访问情况搜索请求。可选地,所述通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果,包括:通过Elasticsearch搜索服务器根据所述网址访问情况搜索请求进行搜索,获得网址访问情况。可选地,所述根据预先定义的搜索处理语言的语法格式,获取目标语法文件的步骤包括:通过可视界面显示搜索框,通过所述搜索框接收根据所述语法格式生成的目标语法文件。可选地,所述通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果的步骤包括:通过所述Elasticsearch搜索服务器将所述查询域特定语言结构的搜索请求输入域特定语言解析器;通过所述域特定语言解析器对所述查询域特定语言结构的搜索请求进行编译,得到查询域特定语言语法树;通过所述Elasticsearch搜索服务器根据所述查询域特定语言语法树进行搜索,得到搜索结果。为实现上述目的,本专利技术还提供一种日志处理装置,包括:获取模块,用于根据预先定义的搜索处理语言的语法格式,获取目标语法文件;转换模块,用于通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求;搜索模块,用于通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果。此外,为实现上述目的,本专利技术还提供一种终端设备,包括存储器、处理器,所述存储器上存储有可在所述处理器上运行的日志处理系统,所述日志处理系统被所述处理器执行时实现如上述的日志处理方法的步骤。进一步地,为实现上述目的,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质存储有日志处理系统,所述日志处理系统可被至少一个处理器执行,以使所述至少一个处理器执行如上述的日志处理方法的步骤。相较于现有技术,本专利技术所提出的日志处理方法、装置、终端设备及计算机可读存储介质,能够通过定义搜索处理语言的语法格式,获取对应的目标语法文件,通过语法功能函数将目标语法文件转换为QueryDSL结构的搜索请求,进而通过QueryDSL结构的搜索请求获得搜索结果。这样用户可以无需提供复杂的搜索语句,通过输入简洁的语法文件就能实现搜索功能,简化用户向ELK日志分析平台输入搜索语句的操作过程、减少用户操作时间。附图说明图1是本专利技术终端设备一可选的硬件架构的示意图;图2是本专利技术日志处理系统第一实施例的程序模块示意图;图3是本专利技术日志处理系统实施例中QueryDSL结构的Query语法形式示意图;图4是本专利技术日志处理系统实施例中DSL解析器的示意图;图5是本专利技术日志处理系统实施例中QueryDSL语法树的示意图;图6是本专利技术日志处理系统第二实施例的流程示意图;图7是本专利技术日志处理方法第一实施例的流程示意图;图8是本专利技术日志处理方法第二实施例的流程示意图。本专利技术目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本专利技术进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本专利技术,并不用于限定本专利技术。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。需要说明的是,在本专利技术中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本专利技术要求的保护范围之内。参阅图1所示,是本专利技术终端设备2一可本文档来自技高网...

【技术保护点】
1.一种日志处理方法,其特征在于,所述方法包括步骤:/n根据预先定义的搜索处理语言的语法格式,获取目标语法文件;/n通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求;/n通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果。/n

【技术特征摘要】
1.一种日志处理方法,其特征在于,所述方法包括步骤:
根据预先定义的搜索处理语言的语法格式,获取目标语法文件;
通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求;
通过Elasticsearch搜索服务器根据所述查询域特定语言结构的搜索请求进行搜索,获得搜索结果。


2.如权利要求1所述的日志处理方法,其特征在于,所述通过爪哇编译器根据预设的语法功能函数对所述目标语法文件进行语法转换,得到查询域特定语言结构的搜索请求的步骤包括:
通过所述爪哇编译器从所述预设的语法功能函数中确定与所述目标语法文件相对应的目标语法功能函数;
通过所述爪哇编译器根据所述目标语法功能函数对所述目标语法文件进行语法转换,得到所述查询域特定语言结构的搜索请求。


3.如权利要求2所述的日志处理方法,其特征在于,所述通过所述爪哇编译器根据所述目标语法功能函数对所述目标语法文件进行语法转换,得到所述查询域特定语言结构的搜索请求的步骤包括:
通过所述爪哇编译器对所述目标语法文件进行编译得到目标可执行爪哇代码,根据所述目标语法功能函数对所述目标可执行爪哇代码进行语法转换,得到所述查询域特定语言结构的搜索请求。


4.如权利要求2所述的日志处理方法,其特征在于,所述通过所述爪哇编译器对所述目标语法文件进行编译得到目标可执行爪哇代码,根据所述目标语法功能函数对所述目标可执行爪哇代码进行语法转换,得到所述查询域特定语言结构的搜索请求,包括:
在所述目标语法文件为网址访问统计语句的情况下,通过所述爪哇编译器从所述预设的语法功能函数中确定与所述网址访问统计语句相对应的网址访问统计语法功能函数;
通过所述爪哇编译器根据所述网址访问统计语法功能函数对所述网址访问统计进行语法转换,得到所述查询域特定语言结构的网址访问情况搜索请求。


5.如权利要求4所述的日志处理方法,其特征在于,所述通过Elasticsearch...

【专利技术属性】
技术研发人员:曹越
申请(专利权)人:深圳平安通信科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1