【技术实现步骤摘要】
视频监控场景下分布式存储的资源部署方法及电子设备
[0001]本申请属于视频数据处理
,特别涉及一种视频监控场景下分布式存储的资源部署方法及电子设备
。
技术介绍
[0002]随着视频监控业务的快速发展,对象存储的重要性越来越凸显出来
。
随着监控设备的普及和分辨率的提高,监控视频数据量迅速增加
。
传统的存储系统往往无法处理如此庞大的数据量,而对象存储系统通过分布式架构和横向扩展的方式,能够高效地存储和管理大规模的监控视频数据
。
在视频监控领域,大量的监控视频数据需要进行长期保存和管理,而对象存储系统提供了高可扩展性
、
高可靠性和灵活性,能够满足视频监控业务的需求
。
[0003]然而,随着对象存储规模的增加,软硬件成本也相应增长
。
构建分布式存储集群,涉及到大量的存储节点和网络设备
。
同时,数据的冗余和备份也需要更多的存储空间和计算资源
。
这些硬件设备和资源的投入增加了整 ...
【技术保护点】
【技术特征摘要】
1.
一种视频监控场景下分布式存储的资源部署方法,其特征在于,所述方法包括:步骤一:测试磁盘的性能,通过磁盘性能测试工具对所述磁盘进行压力测试和验证;步骤二:利用下述公式测试存储集群的吞吐上限值,公式如下:
T=n*y*K
,其中,
T
表示吞吐上限值,
K
表示存储放大系数,
n
表示磁盘随机写入速度,
y
表示磁盘数量;步骤三:进行组件实例配比测试,分别设置不同的
RGW
与
OSD
组件实例数进行测试,其中在所述
RGW
的数量为1的情况下,分别设置所述
OSD
的数量为
3、4、5、6
,在所述
RGW
的数量为2的情况下,分别设置所述
OSD
的数量为
7、8、9
,在所述
RGW
的数量为3的情况下,分别设置所述
OSD
的数量为
10、11、12
,得到多组测试结果;步骤四:基于所述多组测试结果,确定资源部署的组件配比公式如下:
ynK = x
2 +4x
‑
a + b
,其中,
y
表示所述
OSD
的数量,
x
为表示所述
RGW
的数量,
K
表示存储放大系数,
n
表示磁盘随机写入速度,
a
和
b
为测试过程的环境变量数据的正整数
。2.
如权利要求1所述的视频监控场景下分布式存储的资源部署方法,其特征在于,在副本模式的情况下,所述存储放大系数
K=1/ m
,其中
m
表示副本数
。3.
如权利要求1或2所述的视频监控场景下分布式存储的资源部署方法,其特征在于,所述磁盘性能测试工具包括
FIO
和
fsync
,其中,所述
FIO
用于评估驱动器的低级写性能,所述
fsync
确保数据安全地持久化到媒体上
。4.
如权利要求3所述的视频监控场景下分布式存储的资源部署方法,其特征在于,所述
OSD
的数量均小于所述磁盘数量
。5.
如权利要求1所述的视频监控场景下分布式存储的资源部署方法,其特征在于,所述
a
等于4,所述
b
等于
24000...
【专利技术属性】
技术研发人员:吴忠友,沈婷婷,
申请(专利权)人:联通在线信息科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。