一种基于k8s的监控系统及监控方法技术方案

本公开提供了一种基于k8s的监控系统及监控方法，其中，监控系统包括管理容器创建数据抓取方案，并将数据抓取方案提供给抓取容器；抓取容器基于数据抓取方案进行数据抓取；管理容器还基于抓取到的数据的数据量大小，动态调整其他容器的大小；其中，其他容器至少包括存储容器和分析容器。本公开基于k8s建立了监控系统，并利用监控系统中的管理容器基于抓取到的数据的数据量大小，实时且动态的调整存储容器和分析容器等其他容器的大小，避免了遗漏抓取的数据导致无法全面且准确的确定IOC的问题，能够全面且准确的确定IOC也即待监控数据，同时避免了服务器资源浪费。

A monitoring system and method based on k8s

【技术实现步骤摘要】
一种基于k8s的监控系统及监控方法
本公开涉及数据安全
，具体而言，涉及一种基于k8s的监控系统及监控方法。
技术介绍
随着网络科技的不断发展，网络用户(包括个人和企业)将越来越多的资料保存在网络上，以便于方便的存取、进行保密等。但随之也产生了许多的网络威胁，也即网络用户的设备、云端或网站存在被恶意攻击，进而导致资料被窃取，甚至导致网络用户的设备直接报废等，这对网络用户的名誉及财产等均造成了影响。其中，针对不同的安全厂商有不同的攻击手段，因此不同的厂商对应的安全威胁情报(IndicatorsofCompromise，IOC)也不相同。通常，通过网络爬虫来抓取网络中的数据，并对抓取到的数据进行分析，进而确定抓取到的数据中是否存在IOC。但存储抓取到的数据的空间是在进行数据抓取之前预先设定好的，在抓取到的数据较多时，存在空间不足遗漏抓取的数据的情况，导致无法全面且准确的确定IOC的问题；在抓取到的数据较少时，存在空间闲置浪费服务器资源的问题。
技术实现思路
有鉴于此，本公开的目的在于提供一种基于k8s的监控系统及监本文档来自技高网...

【技术保护点】
1.一种基于k8s的监控系统，其特征在于，包括：/n管理容器创建数据抓取方案，并将所述数据抓取方案提供给抓取容器；/n所述抓取容器基于所述数据抓取方案进行数据抓取；/n所述管理容器还基于抓取到的数据的数据量大小，动态调整其他容器的大小；其中，所述其他容器至少包括存储容器和分析容器。/n

【技术特征摘要】
1.一种基于k8s的监控系统，其特征在于，包括：
管理容器创建数据抓取方案，并将所述数据抓取方案提供给抓取容器；
所述抓取容器基于所述数据抓取方案进行数据抓取；
所述管理容器还基于抓取到的数据的数据量大小，动态调整其他容器的大小；其中，所述其他容器至少包括存储容器和分析容器。


2.根据权利要求1所述的监控系统，其特征在于，还包括：
所述管理容器还确定所述抓取到的数据是否满足所述数据抓取方案的要求；其中，所述数据抓取方案至少包括关于数据类型、数据大小以及数据内容的要求；
在所述抓取到的数据未否满足所述数据抓取方案的要求的情况下，控制所述抓取容器基于所述数据抓取方案继续进行数据抓取。


3.根据权利要求1所述的监控系统，其特征在于，所述抓取容器基于所述数据抓取方案，利用网络爬虫进行数据抓取。


4.根据权利要求3所述的监控系统，其特征在于，所述管理容器根据在预设时间段内抓取到数据的情况，更新所述网络爬虫的爬虫代理IP，并将更新后的爬虫代理IP提供给所述抓取容器，以使所述抓取容器基于所述数据抓取方案利用所述更新后的爬虫代理IP进行数据抓取。


5.根据权利要求1所述的监控系统，其特征在于，还包括：
所述抓取容器将所述抓取到的数据存储至所述存储容器；
所述分析容器获取所述存储容器中的所述抓取到的数据，并从所述抓取到的数据中提取待监控数据；查找预先设定的关注数据群中是否存在与所述待监控数据相匹配的关注数据；若存在，通过报警容器以警报信息的形式进行报警。


6.根据权...

【专利技术属性】
技术研发人员：陈章，
申请(专利权)人：北京微步在线科技有限公司，
类型：发明
国别省市：北京;11