一种用于灾害监测点的数据采集系统技术方案

本发明专利技术公开了一种用于灾害监测点的数据采集系统，包括存储模块、数据采集模块、容量检测模块、数据传输模块和控制模块，所述数据采集模块、容量检测模块、数据传输模块和控制模块均与存储模块电连接。能够根据实时网络优先选择云存储，便于采集数据的存储与使用，优先选择可移动存储单元，方便快捷，提高管理员的采集工作的效率。将采集数据存储至具有多个分区的内置存储单元，保证读写性能和存储空间利用率的平衡。对占用空间较大的视频文件压缩和删除，同时将小文件整合压缩，在保证数据完整性的同时降低空间占用，提高存储设备的利用率。

A Data Acquisition System for Disaster Monitoring Points

The invention discloses a data acquisition system for disaster monitoring points, which comprises a storage module, a data acquisition module, a capacity detection module, a data transmission module and a control module. The data acquisition module, a capacity detection module, a data transmission module and a control module are electrically connected with the storage module. It can select cloud storage according to the real-time network first, which is convenient for the storage and use of collected data, and mobile storage unit is preferred, which is convenient and fast, and improves the efficiency of administrator's collection work. The acquisition data is stored in a built-in storage unit with multiple partitions to ensure the balance of read-write performance and storage space utilization. Compression and deletion of video files with large occupancy space, and integration and compression of small files at the same time, while ensuring data integrity, reduce space occupancy and improve the utilization of storage devices.

【技术实现步骤摘要】
一种用于灾害监测点的数据采集系统
本专利技术涉及灾害数据采集领域，具体涉及一种用于灾害监测点的数据采集系统。
技术介绍
全省地质和地理环境复杂，滑坡、泥石流、地面塌陷、地面沉降是全省地质灾害的主要类型。其中，滑坡、泥石流灾害点多面广、活动强烈、突发性强，是造成人民生命财产损失、制约经济社会发展的主要灾种，也是地质灾害防治的主要对象，因此需要设置灾害监测点，以进行地质数据的采集，为预防和控制灾害提供数据支撑。现有的灾害监测点通常设置在室外，天气情况和设置的位置都比较复杂，在极端天气或是检测点不易到达时，管理员无法及时的到达灾害监测点获取数据，工作难度大，进而导致工作效率低下，本地存储在容量存满时会导致重要数据无法存储，进而导致数据丢失的情况，而无线传输由于受环境因素比较大，容易在传输的过程中导致文件损坏等问题，稳定性较差，影响传输效率。
技术实现思路
为了解决上述的技术问题，本专利技术的目的在于提供一种用于灾害监测点的数据采集系统。本专利技术所要解决的技术问题为：(1)如何使管理员方便的获得采集的数据；(2)如何选择存储的设备；(3)如何提高存储空间的利用率。本专利技术的目的可以通过以下技术方案实现：一种用于灾害监测点的数据采集系统，包括存储模块、数据采集模块、容量检测模块、数据传输模块和控制模块，所述数据采集模块、容量检测模块、数据传输模块和控制模块均与存储模块电连接，所述存储模块包括云存储单元，内置存储单元和可移动存储单元；所述数据采集模块包括GPS、传感器、摄像头，用于采集监测数据；所述数据传输模块包括4G网络传输单元、有线传输单元；所述容量检测模块用于检测存储模块的存储情况；所述控制模块将数据用于处理采集的数据，所述控制模块的处理步骤如下：S1、在数据采集模块完成数据采集前，控制模块检测4G网络传输单元的信号强度，获取实时通讯能力，若信号强度在－50dBm至0dBm之间，则将实时通讯能力标记为强，若信号强度在－90dBm至－60dBm之间，那么将实时通讯能力标记为中，若信号强度小于－115dBm，则将实时通讯能力标记为弱；S2、当实时通讯能力标记为强时，将采集的数据通过4G网络传输单元传输至云存储单元；当实时通讯能力标记为中时，所述控制模块检测4G网络传输单元的丢包率，若丢包率大于0，则将采集的数据存储至可移动存储单元，若丢包率等于0，则控制模块进一步检测4G网络传输单元与云存储单元的上传速度，并采集数据的大小，计算出预计上传时间，若预计上传时间小于T，则将采集的数据通过4G网络传输单元传输至云存储单元，若预计上传时间小于T，则将采集的数据存储至可移动存储单元；当实时通讯能力标记为弱时，将采集的数据存储至可移动存储单元；S3、所述控制模块通过容量检测模块对可移动存储单元的剩余容量进行监测，当可移动存储单元的剩余容量小于总容量的5％时，控制模块将采集数据转存至内置存储单元，同时通过4G网络传输单元向管理员发出可移动存储单元已满的提醒；S4、所述控制模块将内置存储单元分为高速分区、中速分区和低速分区，所述高速分区的簇大小大于中速分区的簇大小，中速分区的簇大小大于低速分区的簇大小，当可移动存储单元的剩余容量小于总容量的5％时，所述控制模块在储存文件前获取文件的大小，将文件大小小于m的文件标记为小文件，并存储在低速分区，将文件大小大于m且小于n的文件标记为中文件，并将中文件存储在中速分区，将文件大小大于n的文件标记为大文件，并将大文件存储至高速分区；S5、所述控制模块对内置存储单元的剩余容量进行监测，当其中一个分区的剩余容量小于5％时，则通过4G网络传输单元向管理员发出对应分区已满的提醒。进一步的，所述低速分区在剩余容量小于5％时，控制模块将多个小文件通过压缩算法进行压缩，形成一个不超过低速分区的簇大小对应的最大分区的压缩文件。进一步的，所述高速分区在剩余容量小于5％时，控制模块根据文件类型对高速分区内的文件进行筛选，筛选出所有的视频文件，控制模块对视频文件的头文件进行检测，并根据头文件信息将视频文件分为有音频视频和无音频视频，再通过控制模块将有音频视频分割成对应的视频流和音频流，将音频流转为音频文件，并将转化后音频文件采用较低的比特率进行转码，得到压缩后的音频文件，同时将视频流重新封装成无音频视频，并将所有再将所有的无音频视频进行转码，降低无音频视频的码率、分辨率和帧率，得到压缩后的视频文件。进一步的，所述高速分区在剩余容量小于5％时，控制模块控制摄像头降低采集的码率、分辨率和帧率。进一步的，所述高速分区在剩余容量小于2％时，删除高速分区内所有的压缩后的音频文件。进一步的，所述可移动存储单元中的存储设备被移除时，控制模块将采集的数据暂时存储至高速分区，当可移动存储单元的存储设备重新连接后，控制模块将暂时存储的数据转存至可移动存储单元。本专利技术的有益效果：(1)能够根据实时网络的信号强度、丢包率、网速等参数选择文件的存储位置，通过优先选择云存储，无需管理员到达现场采集数据，便于采集数据的存储与使用，能够保证本地存储资源用在突发情况。(2)在将采集数据存储至本地设备中时，优先选择可移动存储单元，无需进行数据转移，取下移动存储设备即可获得数据，方便快捷，提高管理员的采集工作的效率。(3)在可移动存储单元被移除或是存满时，将采集数据存储至具有多个分区的内置存储单元，并按文件的大小存储至最合适的分区。(4)在内置存储单元快存满时，对占用空间较大的视频文件进行分割-转码-封装，同时将小文件整合压缩，在保证数据完整性的同时降低空间占用，提高存储设备的利用率，在可用空间进一步减小时，删除重要性较低的音频文件，腾出可用空间。附图说明下面结合附图对本专利技术作进一步的说明。图1是本专利技术的系统框图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。请参阅图1所示，本实施例提供了一种用于灾害监测点的数据采集系统，包括存储模块、数据采集模块、容量检测模块、数据传输模块和控制模块，数据采集模块、容量检测模块、数据传输模块和控制模块均与存储模块电连接，存储模块包括云存储单元，云存储单元设置在非检测点的位置，通过数据网络传输数据，内置存储单元和可移动存储单元；数据采集模块包括GPS、传感器、摄像头，用于采集监测数据；数据传输模块包括4G网络传输单元、有线传输单元，4G网络传输单元用于联系管理员和与云存储单元进行数据交换；内置存储单元通过有线传输单元与外部存储设置进行数据交换。容量检测模块用于检测存储模块的存储情况，得到剩余存储空间与总存储空间的百分比；控制模块将数据用于处理采集的数据，控制模块的处理步骤如下：S1、在数据采集模块完成数据采集前，控制模块检测4G网络传输单元的信号强度，获取实时通讯能力，信号强度越强，说明网络情况越好，若信号强度在－50dBm至0dBm之间，则将实时通讯能力标记为强，若信号强度在－90dBm至－60dBm之间，那么将实时通讯能力标记为中，若信号强度小于－115dBm，则将实时通讯能力标记为弱；S2本文档来自技高网...

【技术保护点】
1.一种用于灾害监测点的数据采集系统，包括存储模块、数据采集模块、容量检测模块、数据传输模块和控制模块，其特征在于，所述数据采集模块、容量检测模块、数据传输模块和控制模块均与存储模块电连接，所述存储模块包括云存储单元，内置存储单元和可移动存储单元；所述数据采集模块包括GPS、传感器、摄像头，用于采集监测数据；所述数据传输模块包括4G网络传输单元、有线传输单元；所述容量检测模块用于检测存储模块的存储情况；所述控制模块将数据用于处理采集的数据，所述控制模块的处理步骤如下：S1、在数据采集模块完成数据采集前，控制模块检测4G网络传输单元的信号强度，获取实时通讯能力，若信号强度在－50dBm至0dBm之间，则将实时通讯能力标记为强，若信号强度在－90dBm至－60dBm之间，那么将实时通讯能力标记为中，若信号强度小于－115dBm，则将实时通讯能力标记为弱；S2、当实时通讯能力标记为强时，将采集的数据通过4G网络传输单元传输至云存储单元；当实时通讯能力标记为中时，所述控制模块检测4G网络传输单元的丢包率，若丢包率大于0，则将采集的数据存储至可移动存储单元，若丢包率等于0，则控制模块进一步检测4G网络传输单元与云存储单元的上传速度，并采集数据的大小，计算出预计上传时间，若预计上传时间小于T，则将采集的数据通过4G网络传输单元传输至云存储单元，若预计上传时间小于T，则将采集的数据存储至可移动存储单元；当实时通讯能力标记为弱时，将采集的数据存储至可移动存储单元；S3、所述控制模块通过容量检测模块对可移动存储单元的剩余容量进行监测，当可移动存储单元的剩余容量小于总容量的5％时，控制模块将采集数据转存至内置存储单元，同时通过4G网络传输单元向管理员发出可移动存储单元已满的提醒；S4、所述控制模块将内置存储单元分为高速分区、中速分区和低速分区，所述高速分区的簇大小大于中速分区的簇大小，中速分区的簇大小大于低速分区的簇大小，当可移动存储单元的剩余容量小于总容量的5％时，所述控制模块在储存文件前获取文件的大小，将文件大小小于m的文件标记为小文件，并存储在低速分区，将文件大小大于m且小于n的文件标记为中文件，并将中文件存储在中速分区，将文件大小大于n的文件标记为大文件，并将大文件存储至高速分区；S5、所述控制模块对内置存储单元的剩余容量进行监测，当其中一个分区的剩余容量小于5％时，则通过4G网络传输单元向管理员发出对应分区已满的提醒。...

【技术特征摘要】
1.一种用于灾害监测点的数据采集系统，包括存储模块、数据采集模块、容量检测模块、数据传输模块和控制模块，其特征在于，所述数据采集模块、容量检测模块、数据传输模块和控制模块均与存储模块电连接，所述存储模块包括云存储单元，内置存储单元和可移动存储单元；所述数据采集模块包括GPS、传感器、摄像头，用于采集监测数据；所述数据传输模块包括4G网络传输单元、有线传输单元；所述容量检测模块用于检测存储模块的存储情况；所述控制模块将数据用于处理采集的数据，所述控制模块的处理步骤如下：S1、在数据采集模块完成数据采集前，控制模块检测4G网络传输单元的信号强度，获取实时通讯能力，若信号强度在－50dBm至0dBm之间，则将实时通讯能力标记为强，若信号强度在－90dBm至－60dBm之间，那么将实时通讯能力标记为中，若信号强度小于－115dBm，则将实时通讯能力标记为弱；S2、当实时通讯能力标记为强时，将采集的数据通过4G网络传输单元传输至云存储单元；当实时通讯能力标记为中时，所述控制模块检测4G网络传输单元的丢包率，若丢包率大于0，则将采集的数据存储至可移动存储单元，若丢包率等于0，则控制模块进一步检测4G网络传输单元与云存储单元的上传速度，并采集数据的大小，计算出预计上传时间，若预计上传时间小于T，则将采集的数据通过4G网络传输单元传输至云存储单元，若预计上传时间小于T，则将采集的数据存储至可移动存储单元；当实时通讯能力标记为弱时，将采集的数据存储至可移动存储单元；S3、所述控制模块通过容量检测模块对可移动存储单元的剩余容量进行监测，当可移动存储单元的剩余容量小于总容量的5％时，控制模块将采集数据转存至内置存储单元，同时通过4G网络传输单元向管理员发出可移动存储单元已满的提醒；S4、所述控制模块将内置存储单元分为高速分区、中速分区和低速分区，所述高速分区的簇大小大于中速分区的簇大小，中速分区的簇大小大于低速分区的簇大小，当可移动存储单元的剩余容...

【专利技术属性】
技术研发人员：赵其峰，
申请(专利权)人：合肥英泽信息科技有限公司，
类型：发明
国别省市：安徽,34