一种图像采集存储的架构优化方法技术

本发明专利技术涉及图像存储技术领域，具体为一种图像采集存储的架构优化方法，包括有数据层、接入层、汇聚层、应用层和用户层，本发明专利技术采用区域动态存储节点的策略，降低了大量图片信息涌入服务器，对服务器存储节点IO性能造成的影响，图像信息入库以后，减少查询时间，对用户所属区域进行图片查询时，提升图片查询效率，有助于实现数据分地市区域的需求实现，本发明专利技术将数据通过动态存储节点区分图片数据，方便了管理员的分区域管理，减少了数据分散造成的查询性能低下，本发明专利技术的图片数据采用base64加密方式进行存储，保证了数据的安全性，同时能够自动负载均衡，避免了一个节点存在问题导致的整个存储服务无法正常运转的情况。个存储服务无法正常运转的情况。

【技术实现步骤摘要】
一种图像采集存储的架构优化方法


[0001]本专利技术涉及图像存储
，具体为一种图像采集存储的架构优化方法。

技术介绍

[0002]目前安防行业发展迅速，需要处理更多的视频数据、图像数据，这些非结构化的数据具有更占空间、更难检索、更高安全要求的特点。市面上提升存储空间的主要途径基本主要有两种，一种是增加设备进行扩容，基于扩容的方式是简单直接的，但也是最耗费资源的；另一种是从数据源本身出发，压缩数据源，降低数据的空间占用率；这种方式主要是用数据库存储，很多关系数据库都支持二进制类型的列，可以把图片转换成二进制方式进行存放起来。
[0003]对于图像采集存储的现有常见架构来说，存在一些问题，包括现有结构过度依赖nfs,当图片服务器的nfs服务器有问题时，可能影响到前端web服务器。NFS的问题主要是锁的问题是很容易造成死锁,只有硬件重启才能解决。尤其当图片达到一定的量级后，nfs会有严重的性能问题，此外对外提供下载的图片服务器只有一台，容易出现单点故障；图片服务器之间的依赖过多，而且横向扩展余地不够。还有nfs方式对于拥有web服务器本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像采集存储的架构优化方法，其特征在于：包括有数据层、接入层、汇聚层、应用层和用户层，数据层作为图像采集存储的数据来源，主要包含采集设备、下级平台、采集系统，采集设备主要是智能摄像头，通过抓拍获取到图片信息，下级平台主要为下级视图库，采集系统主要是第三方图像采集平台，包含人脸、人体、机动车、非机动车图片数据，各类图片数据主要分为大图和小图数据；接入层主要部署了服务集群，主要包含符合GA/T1400
‑
2017协议的接入接口服务，接入服务是平台和图像数据的关键纽带，采集端的图像信息数据通过接入服务发布的标准接口接入，采集端的数据通过http协议讲数据传输到接入服务集群当中，之后文件元数据信息汇聚在消息生产者集群中，同时将图片base64数据文件化，其间将异常处理数据抛到消息集群中，降低大量数据涌入产生的接入服务压力；汇聚层主要部署在服务集群，包含基于MinIO的对象存储接口服务，对象存储接口服务中主要存储的是图像BASE64文件元数据，基于Kafka的消息集群接口服务，消息集群接口服务主要包含生产者集群和消费者集群，存储推送正常消息队列，异常消息队列数据，此环节通过消息订阅和推送的方式，进行数据的传输，定期同步实时数据给到分布式调度中心，分布式调度服务负责将图像信息通过订阅接口，推送给上级平台，基于ElaticSearch的图像文本信息存储接口服务，文本信息存储接口服务主要存储图像文本路径信息，应用层中主要部署了图像采集平台，图像采集平台通过...

【专利技术属性】
技术研发人员：李荣，赵武，聂海江，韦雪婷，朱小龙，胡文学，肖阳阳，
申请(专利权)人：中电万维信息技术有限责任公司，
类型：发明
国别省市：