基于神经网络的毫米波雷达人体动作实时检测方法与流程

技术特征：
1.一种基于神经网络的毫米波雷达人体动作实时检测方法，用于检测人体目标的实时动作，其特征在于，包括以下步骤：步骤s1：通过毫米波雷达信号获得目标的包括速度、角度和距离的数据信息，并且将获得的速度和距离的数据信息做傅里叶变换，以生成距离和速度频谱图，从而作为第一目标特征；步骤s2：根据距离和速度频谱，提取毫米波雷达信号获得的空间坐标点云信息，以作为第二目标特征；步骤s3：将第一目标特征和第二目标特征进行融合并且输入到残差卷积神经网络模型，以进行人体动作的识别分类判断。2.根据权利要求1所述的一种基于神经网络的毫米波雷达人体动作实时检测方法，其特征在于，步骤s1具体实施为以下步骤：步骤s1.1：通过毫米波雷达的频率调制连续波信号，并且距离与速度的关系通过以下公式体现：其中，c为电磁波在空气中的传播速度，r是物体与毫米波雷达之间的距离，v是相对速度，τ是传播时间，并且r和v为：步骤s1.2：通过以下公式将获得的速度和距离的数据信息做傅里叶变换：其中b[n,m,k]指第k根天线上接受到的第m个chirp的第n个采样点，t
fast
为在一个扫频周期内对信号采样的采样间隔，通过2发4收的毫米波雷达天线，每个扫频周期n取值为256，m取值为128，k为4，帧率是20fps；对一个扫频周期内的n个采样点做二维离散傅里叶变换得到对应的距离为：对经过二维傅里叶变换后的数据在天线维度做傅里叶变换，用以下公式：以获得速度和角度频谱图。3.根据权利要求2所述的一种基于神经网络的毫米波雷达人体动作实时检测方法，其特征在于，步骤s2具体实施为以下步骤：步骤s2.1：根据距离和速度频谱通过以下公式提取出值为非零的距离频率分量和速度频率分量，公式为：x＝rsinθ,y＝rcosθ；
从而获得毫米波雷达空间的点云信息，以获得点云图像，进而通过毫米波雷达信号提取的点云图像对应人体在距离毫米波雷达预设距离处的空间点云。4.根据权利要求3所述的一种基于神经网络的毫米波雷达人体动作实时检测方法，其特征在于，步骤s3具体实施为以下步骤：步骤s3.1：将第一目标特征作为残差卷积神经网络模型的初始输入图像x1并且将第二目标特征作为残差卷积神经网络模型的初始输入图像x2；步骤s3.2：初始输入图像x1依次经过五个基本模块，并且每一个基本模块包括两个卷积层、一个标准化层、一个池化层和一个激活层，将整个基本模块计算函数f，那么对应的输出为f(x)，下一层的输入y为上一个基本模块的结果f(x)加上之前对应的x输入等量映射，以获得第一输出，公式为：y＝f(x) x；步骤s3.3：初始输入图像x1依次经过一个卷积层和四个基本模块，并且每一个基本模块包括两个卷积层、一个标准化层、一个池化层和一个激活层，将整个基本模块计算函数f，那么对应的输出为f(x)，下一层的输入y为上一个基本模块的结果f(x)加上之前对应的x输入等量映射，以获得第二输出，公式为：y＝f(x) x；步骤s3.4：将第一输出和第二输出输入融合层进行融合，并且融合层的输出依次通过两个全连接层后输入分类层，以进行人体动作的识别分类判断。5.根据权利要求4所述的一种基于神经网络的毫米波雷达人体动作实时检测方法，其特征在于，在基本模块中：标准化层：x为输入层的图像数据，∈,γ,β为0和1之间的标准化参数；卷积层：激活层：relu(x)＝(x)

＝max(0,x)；池化层：out(n,c,h,w)＝max
m＝0,
…
,kh-1
max
n＝0,
…
,kw-1
input(n,c,stride[0]
×
h m,stride[1]
×
w n)。6.根据权利要求5所述的一种基于神经网络的毫米波雷达人体动作实时检测方法，其特征在于，分类层为：分类层的输出结果为0和1之间的概率值，用于对图像类别的判定。7.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至6任一项所述一种基于神经网络的毫米波雷达人体动作实时检测方法的步骤。8.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至6任一项所述一种基于神经网络的毫米波雷达人体动作实时检测方法的步骤。

技术总结
本发明公开了一种基于神经网络的毫米波雷达人体动作实时检测方法，用于检测人体目标的实时动作，包括步骤S1：通过毫米波雷达信号获得目标的包括速度、角度和距离的数据信息，并且将获得的速度和距离的数据信息做傅里叶变换，以生成距离和速度频谱图，从而作为第一目标特征；步骤S2：根据距离和速度频谱，提取毫米波雷达信号获得的空间坐标点云信息，以作为第二目标特征。本发明公开的一种基于神经网络的毫米波雷达人体动作实时检测方法，通过残差神经网络架构对雷达的距离速度和点云信息进行直接分类识别，能有效的解决相关问题。能有效的解决相关问题。能有效的解决相关问题。


技术研发人员：谢旭平 卢煜旻 朱欣恩
受保护的技术使用者：浙江芯力微电子股份有限公司
技术研发日：2021.12.28
技术公布日：2022/5/5