基于时空图卷积与相位分割的武术套路分析方法及系统

摘要: 本发明涉及运动数据处理,具体为基于时空图卷积与相位分割的武术套路分析方法及系统。背景技术:1、武术动作分析技术广泛应用于体育运动的辅助训练与量化评估中,武术运动...
基于时空图卷积与相位分割的武术套路分析方法及系统

本发明涉及运动数据处理,具体为基于时空图卷积与相位分割的武术套路分析方法及系统。

背景技术:

1、武术动作分析技术广泛应用于体育运动的辅助训练与量化评估中,武术运动包含大量快速翻转、连续发力与复杂的肢体交叉动作,现有的动作采集设备多采用单一视角进行视频录制,面对武术套路中频繁的肢体相互遮挡与大范围空间位移时,容易出现人体三维关节点空间坐标信息提取缺失的问题,无法提供完整的人体空间拓扑节点连接结构数据。

2、在动作特征提取阶段,现有技术通常将运动序列作为普通的时序数据输入循环神经网络进行处理,普通循环神经网络无法联合利用人体骨骼的物理空间连接结构与动作时序演化规律,难以有效提取包含人体关节点静态连接关系与多尺度运动节奏动态演化信息的动作时空特征,针对连续武术套路视频流的动作分割,现有方法主要依赖预设的固定时间窗口或设定单一的关节运动速度阈值进行简单切分,由于不同测试人员完成同一武术套路的运动节奏存在明显差异,固定时间窗口与单一速度阈值无法自适应识别动作相位的真实转换边界,容易导致切分获取的动作片段存在动作起始阶段与结束阶段的冗余,或者造成关键动作帧的丢失,并且目前的评分方式多依赖评委的视觉观察经验进行人工判定,无法客观反映武术动作在内在发力与重心控制过程中的偏差,并且缺少针对关键失误情况的量化判定机制,导致最终输出的动作评分结果缺乏科学性与全面性。因此,本发明提出基于时空图卷积与相位分割的武术套路分析方法及系统,来解决现有技术的不足。

技术实现思路

1、针对现有技术的不足,本发明提供了基于时空图卷积与相位分割的武术套路分析方法及系统,解决了现有武术动作的动作分析技术在处理武术运动数据时,由于肢体遮挡导致的关节点信息缺失与时空特征提取不完整、采用固定阈值切分造成的连续动作相位分割误差,以及单一空间几何比对方式无法多维度量化评估发力过程与重心控制能力,导致最终动作综合评分缺乏客观性与科学性的问题。

2、为实现以上目的,本发明通过以下技术方案予以实现:基于时空图卷积与相位分割的武术套路分析方法,包括:

3、通过多视角传感器同步采集武术运动数据,进行多视角融合与三维骨骼重建,并基于人体空间拓扑结构与时间演化规律构建时空骨骼图序列;

4、将时空骨骼图序列输入多层时空图卷积网络,联合空间结构图卷积与多尺度时间图卷积提取包含静态连接与动态演化信息的深层特征序列;

5、基于深层特征序列计算边界概率分布与量化动态指标,并结合预设的相位约束模板执行动态规划分割路径搜索,将连续套路视频流分割为多个独立的动作相位区间;

6、针对独立的动作相位区间提取对应的相位特征序列,从预设的多个量化评估维度分别计算特征数值偏差,聚合生成动作相位多维评分向量;

7、依据武术套路类别与动作复杂程度配置动态权重,对动作相位多维评分向量进行加权融合计算,并结合关键失误阈值判定机制生成综合评分报告。

8、优选的,基于人体空间拓扑结构与时间演化规律构建时空骨骼图序列具体包括:

9、建立硬件脉冲到达时刻与惯性测量单元内部晶振时间的差值补偿模型统一多视角传感器数据的基准时间线,通过多视角三角化算法重建人体三维关节点空间坐标序列;

10、利用多项式运动学方程式对人体三维关节点空间坐标序列进行预测填补处理动作遮挡,获取完成预处理的人体三维关节点空间坐标序列;

11、将完成预处理的人体三维关节点空间坐标序列映射为图节点数据与空间图连边构建人体空间拓扑节点连接结构,并在相邻时间帧之间构建时间演化序列连接结构,合并构建时空骨骼图序列。

12、优选的,联合空间结构图卷积与多尺度时间图卷积提取包含静态连接与动态演化信息的深层特征序列具体包括:

13、将时空骨骼图序列与关节运动速度向量拼接,并应用二进制掩码矩阵执行动态遮挡掩码抗噪机制获取经过动态遮挡掩码抗噪机制处理的扩展特征输入序列;

14、将经过动态遮挡掩码抗噪机制处理的扩展特征输入序列输入交替堆叠的空间图卷积层与时间图卷积层中,通过空间图卷积层提取人体关节点静态连接关系特征,并通过时间图卷积层利用多尺度一维卷积核提取运动节奏时序特征。

15、优选的,在联合空间结构图卷积与多尺度时间图卷积提取包含静态连接与动态演化信息的深层特征序列之后还包括:

16、构建动作分类交叉熵损失函数、相位分割边界损失函数以及评分回归均方误差损失函数;

17、融合计算动作分类交叉熵损失值、相位分割边界损失值与评分回归均方误差损失值生成多任务联合优化损失函数,并通过反向传播算法依据多任务联合优化损失函数更新多层时空图卷积网络的网络参数。

18、优选的,基于深层特征序列计算边界概率分布与量化动态指标具体包括:

19、将深层特征序列输入边界检测网络,输出每一时间帧的时间边界概率分布向量;

20、计算连续时间窗口内关节瞬时运动速度的关节速度极值与人体整体质心三维空间坐标的重心转移幅度,将关节速度极值与重心转移幅度作为判定动作相位转换边界的量化动态指标。

21、优选的,结合预设的相位约束模板执行动态规划分割路径搜索具体包括:

22、融合时间边界概率分布向量与量化动态指标确定候选边界区间;

23、基于候选边界区间的边界置信度总和与模板合理性规则惩罚项构建联合目标函数,推导动态规划最优分割路径搜索状态转移方程,依据动态规划最优分割路径搜索状态转移方程输出初始动作相位边界序列;

24、通过特征余弦相似度计算与合并操作消除初始动作相位边界序列中的异常短片段,并通过序列比对操作消除违背必经先后顺序的冗余边界与补齐缺失边界,输出独立的动作相位区间。

25、优选的,从预设的多个量化评估维度分别计算特征数值偏差,聚合生成动作相位多维评分向量具体包括:

26、采用动态时间规整算法将当前动作相位的时空特征序列与标准动作模板特征序列进行时间轴对齐,计算平均空间偏差量映射生成独立量化评分数值作为动作完成度评分数值;

27、计算独立的动作相位区间中静态关键帧中提取的静态姿态特征向量与标准姿态协方差矩阵之间的马氏距离获取结构规范性评分数值;

28、提取主要发力关节的速度曲线并计算二阶导数幅值波动方差,获取发力流畅性评分数值。

29、优选的,从预设的多个量化评估维度分别计算特征数值偏差,聚合生成动作相位多维评分向量还包括:

30、基于独立的动作相位区间的重心运动速度向量梯度变化率确定转换连贯性评分数值;

31、基于独立的动作相位区间的重心运动速度向量梯度变化率以及躯干朝向角度差值确定转换连贯性评分数值;

32、计算实际持续时间帧数与标准持续时间帧数之间的相对误差比率获取节奏一致性评分数值;

33、利用预设的独立评分维度权重向量对动作完成度评分数值、结构规范性评分数值、发力流畅性评分数值、转换连贯性评分数值、节奏一致性评分数值与稳定控制性评分数值进行加权求和,获取当前动作相位的综合评分数值。

34、优选的,结合关键失误阈值判定机制生成综合评分报告具体包括:

35、获取动作难度系数数值生成动态调整权重系数,使用动态调整权重系数对各个动作相位多维度量化评分数值进行加权求和得出各项动作相位的综合评分数值,提取关键动作相位的核心评估维度评分数值,当核心评估维度评分数值低于严重失误判定阈值时,触发重大失误额外扣分机制获取额外扣分数值;

36、汇总各项综合评分数值与各项额外扣分数值并进行标准化数值映射处理生成最终武术套路综合得分数值,并结合预存的武术动作纠错规则映射表输出综合评分报告。

37、本发明第二方面提供基于时空图卷积与相位分割的武术套路分析系统,包括:

38、数据采集与构图模块,用于通过多视角传感器同步采集武术运动数据,进行多视角融合与三维骨骼重建,并基于人体空间拓扑结构与时间演化规律构建时空骨骼图序列;

39、特征提取模块,用于将时空骨骼图序列输入多层时空图卷积网络,联合空间结构图卷积与多尺度时间图卷积提取包含静态连接与动态演化信息的深层特征序列;

40、动作相位分割模块,用于基于深层特征序列计算边界概率分布与量化动态指标,并结合预设的相位约束模板执行动态规划分割路径搜索,将连续套路视频流分割为多个独立的动作相位区间;

41、量化评分模块,用于针对独立的动作相位区间提取对应的相位特征序列,从预设的多个量化评估维度分别计算特征数值偏差,聚合生成动作相位多维评分向量;

42、综合评分生成模块,用于依据武术套路类别与动作复杂程度配置动态权重,对动作相位多维评分向量进行加权融合计算,并结合关键失误阈值判定机制生成综合评分报告。

43、本发明提供了基于时空图卷积与相位分割的武术套路分析方法及系统。具备以下有益效果:

44、1、本发明通过利用多项式运动学方程式对人体三维关节点空间坐标序列进行预测填补处理动作遮挡,并结合动态遮挡掩码抗噪机制获取扩展特征输入序列,随后输入多层时空图卷积网络中提取包含静态连接与动态演化信息的深层特征序列,能够解决武术运动中常见的肢体交叉重叠导致的节点缺失问题,提高多视角特征提取过程的抗噪能力,保障时空节点结构特征信息的完整性与动作分析计算的准确度。

45、2、本发明将关节瞬时运动速度的关节速度极值与人体整体质心三维空间坐标的重心转移幅度作为量化动态指标,结合时间边界概率分布向量确定候选边界区间,并基于联合目标函数推导动态规划最优分割路径搜索状态转移方程输出初始动作相位边界序列,通过应用动态规划路径搜索与量化动态指标,避免了单一依赖人工经验制定边界阈值造成的分割误差,实现了连续武术套路视频流的自动相位区间划分,为独立动作片段的量化评估提供可靠的数据输入区间。

46、3、本发明针对独立的动作相位区间,从动作完成度、结构规范性、发力流畅性、转换连贯性、稳定控制性以及节奏一致性多个量化评估维度分别计算特征数值偏差,依据武术套路类别与动作复杂程度配置动态权重进行加权融合计算,并结合核心评估维度评分数值判定触发的重大失误额外扣分机制,利用多维特征数值偏差计算与关键失误扣分机制,消除了传统武术动作评分过程中的主观人为干扰,构建了符合武术运动特性的量化评价体系,提高最终综合评分报告的客观性与科学性。