物联网大数据处理装置及方法与流程

技术特征：
1.一种在移动工程机械组成的物联网中处理大数据的装置，所述物联网中的每台移动工程机械包括物联网发射机，其特征在于，所述装置包括：通信接口，用于从物联网发射机接收与对应的移动工程机械相关联的数据流，从数据流中获取表示环境参数或工作参数的数据值，并将数据值排列成接收数据向量；大数据存储库，用于存储所述接收数据向量；处理器，用于：从所述大数据存储库中获取接收数据向量，以得到一组被获取数据向量；用正交滤波器组对所述一组被获取数据向量中的每一个进行滤波以得到一组滤波后数据向量，所述正交滤波器组包括多个第一正交滤波器，每个第一正交滤波器包括由数字滤波器值排列成的滤波器系数向量，所述多个第一正交滤波器的各滤波器系数向量共同定义出正交向量空间，每个滤波后数据向量代表对应的被获取数据向量在所述正交向量空间上的投影；确定每个滤波后数据向量的能量；以及丢弃与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的缩集，其中，所述物联网发射机由分组标识符标识，所述处理器用于选择与分组标识符相关联的正交滤波器组来进行滤波。2.如权利要求1所述的装置，其特征在于，所述处理器还用于：用另一个正交滤波器组对所述被获取数据向量的缩集中的每一个被获取数据向量进行滤波，以获得进一步滤波后数据向量，所述另一个正交滤波器组包括多个第二正交滤波器，每个第二正交滤波器包括由数字滤波器值排列成的滤波器系数向量，所述多个第二正交滤波器的各个滤波器系数向量共同定义出另一个正交向量空间，其中，每个进一步滤波后数据向量代表对应的被获取数据向量在所述另一个正交向量空间上的投影；确定每个进一步滤波后数据向量的能量；以及从被获取数据向量的缩集中丢弃与具有低于另一预定能量阈值的能量的进一步滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的进一步缩集。3.如权利要求2所述的装置，其特征在于，所述处理器用于根据一段时间内从所述物联网发射机接收的数据流的量以及所述大数据存储库的剩余容量来调整所述预定能量阈值和/或用所述另一个正交滤波器组对所述被获取数据向量的缩集中的每一个被获取数据向量进行滤波。4.如权利要求1或2所述的装置，其特征在于，所述处理器用于丢弃能量低于所述预定能量阈值的滤波后数据向量，以获得代表所述一组被获取数据向量的滤波后数据向量的缩集。5.如权利要求1或2所述的装置，其特征在于，所述处理器用于发出丢弃信号，所述大数据存储库用于响应于所述丢弃信号来删除与具有低于所述预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量。6.如权利要求1或2所述的装置，其特征在于，所述处理器用于发出覆盖信号，所述覆盖信号指示将被具有高于所述预定能量阈值的能量的滤波后数据向量代替的被获取数据向量，其中，所述大数据存储库用于响应于所述覆盖信号来用滤波后数据向量覆盖丢弃的被
获取数据向量。7.如权利要求1或2所述的装置，其特征在于，所述处理器用于将被获取数据向量的缩集排列成向量矩阵，对所述向量矩阵进行奇异值分解，以确定所述向量矩阵的特征值，并丢弃与低于特征值阈值的特征值相关联的被获取数据向量。8.如权利要求1或2所述的装置，其特征在于，所述分组标识符至少包括表示第一精度的第一标识符和表示第二精度的第二标识符，与所述第一标识符相关联的正交滤波器组包含的第一正交滤波器的数目大于与所述第二标识符相关联的正交滤波器组包含的第一正交滤波器的数目，其中所述第一精度高于所述第二精度。9.一种在移动工程机械组成的物联网中处理大数据的方法，所述物联网中的每台移动工程机械包括物联网发射机，其特征在于，所述方法包括：从所述物联网发射机接收与对应的移动工程机械相关联的数据流；从数据流中获取表示环境参数或工作参数的数据值；排列获取到的数据值以形成接收数据向量；将接收数据向量存储在大数据存储库中；从大数据存储库中获取接收数据向量以得到一组被获取数据向量；用正交滤波器组对所述一组被获取数据向量中的每一个进行滤波以得到一组滤波后数据向量，所述正交滤波器组包括多个正交滤波器，每个正交滤波器包括由数字滤波器值排列成的滤波器系数向量，所述多个正交滤波器的各滤波器系数向量共同定义出正交向量空间，每个滤波后数据向量代表对应的被获取数据向量在所述正交向量空间上的投影；确定每个滤波后数据向量的能量；以及丢弃与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的缩集，其中，所述物联网发射机由分组标识符标识，所述方法还包括选择与分组标识符相关联的正交滤波器组来进行滤波。10.如权利要求9所述的方法，其特征在于，所述分组标识符至少包括表示第一精度的第一标识符和表示第二精度的第二标识符，与所述第一标识符相关联的正交滤波器组包含的正交滤波器的数目大于与所述第二标识符相关联的正交滤波器组包含的正交滤波器的数目，其中所述第一精度高于所述第二精度。

技术总结
本发明涉及一种物联网大数据处理装置及方法。该大数据处理装置包括通信接口、大数据存储库和处理器。通信接口用于从设置于物联网中的移动工程机械的物联网发射机接收数据流，从数据流中获取表示环境或工作参数的数据值，将获取到的数据值排列成接收数据向量，并存储于大数据存储库中。处理器用于：从大数据存储库中获取数据向量，得到一组被获取数据向量；用与物联网发射机的分组标识符对应的正交滤波器组对一组被获取数据向量中的每一个进行滤波以得到一组滤波后数据向量；确定每个滤波数据向量的能量；丢弃与具有低于预定能量阈值的能量的滤波后数据向量相关联的被获取数据向量，以得到被获取数据向量的缩集。以得到被获取数据向量的缩集。以得到被获取数据向量的缩集。


技术研发人员：张善睿 张琳 S
受保护的技术使用者：北谷电子有限公司
技术研发日：2021.10.18
技术公布日：2021/11/14