【技术实现步骤摘要】
一种数据处理方法
本专利技术涉及通讯
,尤其一种数据处理方法。
技术介绍
目前,很多应用领域比如电梯运行异常,火箭发射和卫星姿态控制等都需要基于高频度的数据的采集,这些高频数据的产生设备往往分散在很广阔的物理空间内,甚至是人员所不能触及的地方,使得不能通过传统的由专人去采集数据然后保存到本地主机数据库的方式进行处理。由于产生高频数据的设备分布在不同的地方,处于不同的环境,往往会造成错误数据和丢失数据,从而导致最终的数据异常,需要比较高的算力,难以形成规模。此外,产生数据的设备(以下简称数据源)往往数量巨大,每个数据源产生的数据量也亦及其巨大,使得传统的服务器的方式无法胜任这样的需求,或者需要集群处理成本高昂。
技术实现思路
为实现上述目的,本专利技术所采用的技术方案为:一种数据处理方法,包括:S1:通过数据分离器将若干个明文数据包分裂成X个通道N数据M,其中,X、N、M为正整数;S2:将X个通道N数据M进行合并,再将所有数据按通道分类后存入一级云端数据库;S3:从所述一级云端数据库提取某通道某个时间段内的数据,进行数据有效性判定;S4:若S3步骤中的数据是有效的,则根据所述数据进行光幕有效性判定、故障判定、隐患判定;若S3步骤中的数据是无效的,则丢弃数据;S5:将所述光幕有效性判定结果、故障判定结果和隐患判定结果存入二级云端数据库。进一步的,在所述的数据处理方法中,还包括步骤:将一级云端数据库的数据存储于本地数据库。进一 ...
【技术保护点】
1.一种数据处理方法,其特征在于,包括:/nS1:通过数据分离器将若干个明文数据包分裂成X个通道N数据M,其中,X、N、M为正整数;/nS2:将X个通道N数据M进行合并,再将所有数据按通道分类后存入一级云端数据库;/nS3:从所述一级云端数据库提取某通道某个时间段内的数据,进行数据有效性判定;/nS4:若S3步骤中的数据是有效的,则根据所述数据进行光幕有效性判定、故障判定、隐患判定;若S3步骤中的数据是无效的,则丢弃数据;/nS5:将所述光幕有效性判定结果、故障判定结果和隐患判定结果存入二级云端数据库。/n
【技术特征摘要】 【专利技术属性】
1.一种数据处理方法,其特征在于,包括:
S1:通过数据分离器将若干个明文数据包分裂成X个通道N数据M,其中,X、N、M为正整数;
S2:将X个通道N数据M进行合并,再将所有数据按通道分类后存入一级云端数据库;
S3:从所述一级云端数据库提取某通道某个时间段内的数据,进行数据有效性判定;
S4:若S3步骤中的数据是有效的,则根据所述数据进行光幕有效性判定、故障判定、隐患判定;若S3步骤中的数据是无效的,则丢弃数据;
S5:将所述光幕有效性判定结果、故障判定结果和隐患判定结果存入二级云端数据库。
2.如权利要求1所述的数据处理方法,其特征在于,还包括步骤:将一级云端数据库的数据存储于本地数据库。
技术研发人员:邵启伟,何修文,李金鹏,
申请(专利权)人:猫岐智能科技上海有限公司,
类型:发明
国别省市:上海;31
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。