Kafka数据展示方法及装置、计算机可读存储介质和终端制造方法及图纸

技术编号:26385425 阅读:31 留言:0更新日期:2020-11-19 23:54
本发明专利技术公开了一种Kafka数据展示方法及装置、计算机可读存储介质和终端,方法包括访问待访问网络地址中的预设集群,并在预设集群中确定待访问主题分区;在待访问主题分区中确定展现数据类型,并设置数据筛选条件;根据待访问主题分区、确定的展现数据类型和数据筛选条件获取对应的待展现数据;将待展现数据通过网络端口号推送给访问用户的浏览器页面。本发明专利技术Kafka数据展示方法通过主题分区的设置将Kafka数据进行可视化,更加方便于供业务人员的操作,同时实现Kafka数据的实时展示,保证数据的实时性和时效性。

【技术实现步骤摘要】
Kafka数据展示方法及装置、计算机可读存储介质和终端
本专利技术涉及车联网
,尤其涉及一种Kafka数据展示方法及装置、计算机可读存储介质和终端。
技术介绍
Kafka是由Apache软件基金会开发的一个开源流处理平台,是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。目前kafka开源流处理平台生成的kafka数据都是在linux集群服务器上存储的,对于用户及业务人员来讲是不可见的。一般数据库中的数据都是有限的表结构,但Kafka开源流处理平台中的kafka数据是流式的数据结构,它的数据是无限的,而查看kafka数据对于一般的业务人员来说是困难的,需要学习相应的kafka操作说明并能够熟练运用linux系统。目前的kafka数据展示平台已经支持历史数据批量查询以及实时数据的展示,但因为kafka数据是流式数据,相当于一个无尽的表,按指定条件过滤指定数目的消息时,可能会出现等待较长的问题。因此亟需一种也轻松可操作的、查询时间较短的Kafka数据数据展示方法。
技术实现思路
本文档来自技高网
...

【技术保护点】
1.一种Kafka数据展示方法,包括:/n访问待访问网络地址中的预设集群,并在所述预设集群中确定待访问主题分区;/n在所述待访问主题分区中确定展现数据类型,并设置数据筛选条件;/n根据待访问主题分区、确定的所述展现数据类型和所述数据筛选条件获取对应的待展现数据;/n将所述待展现数据通过网络端口号推送给访问用户的浏览器页面。/n

【技术特征摘要】
1.一种Kafka数据展示方法,包括:
访问待访问网络地址中的预设集群,并在所述预设集群中确定待访问主题分区;
在所述待访问主题分区中确定展现数据类型,并设置数据筛选条件;
根据待访问主题分区、确定的所述展现数据类型和所述数据筛选条件获取对应的待展现数据;
将所述待展现数据通过网络端口号推送给访问用户的浏览器页面。


2.根据权利要求1所述的方法,其特征在于,所述展现数据类型包括最新数据和历史数据。


3.根据权利要求2所述的方法,其特征在于,根据待访问主题分区、确定的所述展现数据类型和所述数据筛选条件获取对应的待展现数据步骤包括:
当所述展现数据类型为最新数据时,对所述待访问主题分区进行实时监控;当所述待访问主题分区中出现符合所述数据筛选条件的数据时,获取符合所述数据筛选条件的数据作为待展现数据。


4.根据权利要求2所述的方法,其特征在于,根据待访问主题分区、确定的所述展现数据类型和所述数据筛选条件获取对应的待展现数据步骤包括:
当所述展现数据类型为历史数据时,根据所述数据筛选条件对所述待访问主题分区下的历史数据进行遍历,将符合所述数据筛选条件的数据作为待展现数据。


5.根据权利要求1所述的方法,其特征在于,将所述待展现数据通过网络端口号推送给访问用户的浏览器页面步骤包括:
根据访问用户的会话识别码将所述待展现数据通过网络端口号推送给访问用户的浏览器页面。


6.根据权利要求5所述的方法,其特征在于,所述网络端口号通过运行参数实现与所述访问用户的数据交互...

【专利技术属性】
技术研发人员:马子健
申请(专利权)人:上海博泰悦臻网络技术服务有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1