【技术实现步骤摘要】
一种海外服务器部署方法、装置、设备和介质
[0001]本专利技术涉及海外大数据
,尤其涉及一种海外服务器部署方法
、
装置
、
设备和介质
。
技术介绍
[0002]基于我们海外云游业务区域不确定性
、
时间随机性的场景,大数据服务是一种需要具备快速服务
、
快速释放的能力
。
比如客户常有2个月
、1
个月甚至更短的诉求,则需在有限成本的提前下,构建满足运营
、
产品等团队的决策依据,现有技术中,一方面基于海外大数据服务的部署极少,另一方面,在进行海外大数据服务的部署时,通常出现资源成本高
、
部署时效长,因此,亟需一种海外服务器部署方法,以解决大数据服务资源成本较高
、
部署时效较长的问题
。
技术实现思路
[0003]有鉴于此,本专利技术提供一种海外服务器部署方法
、
装置
、
设备和介质,能够解决大数据服务资源成本较高
、
部署时效较长的问题,以轻量级架构高效部署组件,确保有效资源利用率,节约使用成本
。
[0004]根据本专利技术的一方面,本专利技术实施例提供了一种海外服务器部署方法,应用于海外分发服务器,所述方法包括:
[0005]接收国内服务器所发送的海外服务器部署的依赖包和应用包;
[0006]根据业务需求配置所述依赖包中各个组件分别对应的参数 ...
【技术保护点】
【技术特征摘要】
1.
一种海外服务器部署方法,其特征在于,应用于海外分发服务器,所述方法,包括:接收国内服务器所发送的海外服务器部署的依赖包;根据业务需求配置所述依赖包中各个组件分别对应的参数信息;通过自定义脚本指令将各所述参数信息分发至对应的目标服务器中,以使各所述目标服务器根据所述参数信息进行组件安装形成安装部署的集群规模资源;其中,所述集群规模资源包括监控服务器
、
集群服务器和可视化服务器;通过所述监控服务器统一监控所述集群服务器的第一监控指标以及所述集群服务器中各个组件的第二监控指标
。2.
根据权利要求1所述的方法,其特征在于,所述通过自定义脚本指令将所述参数信息分发至对应的目标服务器中以进行组件安装形成安装部署的集群规模资源之后,还包括:接收国内服务器所发送的海外服务器部署的应用包,并将所述应用包集成在所述集群服务器中
Flink
集群的主节点,通过自定义脚本指令启动
Flink
任务以进行应用服务的部署;其中,所述应用服务的部署包括:收集海外用户云游所产生
sdk
日志信息;按照预设维度对所述
sdk
日志信息进行日志聚合得到聚合结果,并将所述聚合结果保存至
Doris
中;在所述聚合结果超过预先配置的告警阈值的情况下,进行告警并将告警信息发送至消息队列中并触达终端
。3.
根据权利要求1所述的方法,其特征在于,所述方法,还包括:根据所述业务需求动态调整所述集群规模资源中的监控服务器和集群服务器数量,以及所述监控服务器和所述集群服务器分别所需的参数信息
。4.
根据权利要求1‑3任一所述的方法,其特征在于,所述方法,还包括:在达到海外服务器部署的服务期结束时,通过数据备份导出工具将
Doris
存储引擎组件中所包含的云游行为有效数据导出成数据文件,并将所述数据文件统一上传至数据中心的备份机上;所述数据文件上传完毕后,释放服务器资源;其中,所述释放服务器资源的顺序为:先释放
Flink
集群服务器
、Kafka
集群服务器,再释放监控服务器,最后释放
Doris
集群服务器和
Superset
;其中,所述监控服务器中包括
Prometheus、Exporter、Grafana、
告警
Server。5.
根据权利要求1所述的方法,其特征在于,所述集群服务器的监控服务至少包括:各所述集群服务器分别对应的
exporter
;所述集群服务器中各个组件的监控服务至少包括:
Kafka
集群服务器中各个
Kafka
消息队列组件的
exporter、Doris
集群服务器中各个
Doris
组件的
exporter、zk
集群服务器中各个
zk
组件的
exporter、Flink
集群服务器中各个
flink
组件的
exporter、
大数据中心的
prometheus、
配置告警的
server
;所述第一监控指标和所述第二监控指标通过预先构建监控指标对应的标准化看板生成
Grafana
模版,并通过
Grafana
模版展示
。6.
根据权利要求1所述的方法,其特征在于,所述参数信息至少包括:各所述组件分别对应的安装角色
、
目标服务器列表
、
核心配置文件
、
执行文件;相应的,所述根据业务需求配置所述依赖包中各个组件分别对应的参数信息,包括:依据业务需求确定所述依赖包中
Kafka
消...
【专利技术属性】
技术研发人员:李海涛,
申请(专利权)人:北京蔚领时代科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。