在通信网络中处理大数据的装置及方法制造方法及图纸

本发明专利技术涉及在通信网络中处理大数据的装置及方法，尤其适用于对来自工程机械、车辆的大数据的处理。该大数据处理装置包括通信接口、大数据存储库和处理器。通信接口用于从设置于例如工程机械、车辆等的多个物联网发射机接收数据流，从数据流中获取数据值，将获取到的数据值排列成接收数据向量，并存储于大数据存储库中。处理器用于：从大数据存储库中获取数据向量，得到一组被获取数据向量；用正交滤波器组对一组被获取数据向量中的每一个进行滤波以得到一组滤波后数据向量；确定每个滤波后数据向量的能量；丢弃与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的缩集。以得到被获取数据向量的缩集。以得到被获取数据向量的缩集。

【技术实现步骤摘要】
在通信网络中处理大数据的装置及方法


[0001]本专利技术涉及数据处理，更具体地，涉及一种用于处理和存储来自物联网源的大数据的装置和方法。

技术介绍

[0002]物联网(IoT)是指大量物理设备连接到一个或多个通信网络，以便彼此或与其他网络实体收集和交换数据。物联网设备大多是嵌入式的，包括传感器、通信接口和其他元件，以实现传感和网络连接。
[0003]越来越多的物联网设备是为消费者使用而产生的，例如车联网、家庭自动化系统、可穿戴技术、联网健康设施和具有远程监控功能的设备。
[0004]大量的物联网设备可以随时生成和传输大量数据，以下称为大数据。这些大数据可以源自制造工厂的机器上的传感器记录的机器参数，或是在室内、医院或其它场所监控的环境记录，还可以是通过用户设备(如智能手机或其他移动设备)传输的消息或文字。
[0005]以移动工程机械和车辆组成的物联网为例，这些机械和车辆可能遍布于全国各地的室内外建筑工地、矿山等场所，涵盖装载机、挖掘机、高空车辆等不同类型的机械。当同样的工程机械应用于不同的工作环境下，例如挖沙的挖掘机和本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于在通信网络(140)中处理大数据的装置(100)，所述通信网络(140)用于支持多个物联网发射机(110a
‑
c)的通信，其特征在于，所述装置(100)包括：通信接口(101)，用于经由所述通信网络(140)从所述多个物联网发射机(110a
‑
c)接收数据流，从数据流中获取数据值，以及将获取到的数据值排列成接收数据向量；大数据存储库(103)，用于存储所述接收数据向量；处理器(105)，用于：从所述大数据存储库(103)中获取接收数据向量，以得到一组被获取数据向量；用正交滤波器组对所述一组被获取数据向量中的每一个进行滤波以得到一组滤波后数据向量，其中，所述正交滤波器组包括多个第一正交滤波器，每个第一正交滤波器包括由数字滤波器值排列成的滤波器系数向量，所述多个第一正交滤波器的各个滤波器系数向量共同定义出正交向量空间，其中，每个滤波后数据向量代表对应的被获取数据向量在所述正交向量空间上的投影；确定每个滤波后数据向量的能量；以及丢弃与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的缩集。2.如权利要求1所述的装置(100)，其特征在于，所述处理器(105)还用于：用另一个正交滤波器组对所述被获取数据向量的缩集中的每一个被获取数据向量进行滤波，以获得进一步滤波后数据向量，所述另一个正交滤波器组包括多个第二正交滤波器，每个第二正交滤波器包括由数字滤波器值排列成的滤波器系数向量，所述多个第二正交滤波器的各个滤波器系数向量共同定义出另一个正交向量空间，其中，每个进一步滤波后数据向量代表对应的被获取数据向量在所述另一个正交向量空间上的投影；确定每个进一步滤波后数据向量的能量；以及从被获取数据向量的缩集中丢弃与具有低于另一预定能量阈值的能量的进一步滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的进一步缩集。3.如权利要求1或2所述的装置(100)，其特征在于，所述处理器(105)用于丢弃能量低于预定能量阈值的滤波后数据向量，以获得代表所述一组被获取数据向量的滤波后数据向量的缩集。4.如权利要求1或2所述的装置(100)，其特征在于，所述处理器(105)用于发出丢弃信号，所述大数据存储库(103)用于响应于所述丢弃信号来删除与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量。5.如权利要...

【专利技术属性】
技术研发人员：张善睿，张琳，S，
申请(专利权)人：北谷电子有限公司，
类型：发明
国别省市：