一种乐音数据的采集和特征识别方法与流程

技术特征：
1.一种乐音数据的采集和特征识别方法，其特征在于，包括以下步骤：步骤一：基于已有的高品质数字音乐文件库，提取时频域信号特征，评估并确定已知乐音识别的关键采集信息元，自动分割乐音数据并分解时频域乐音信息，构建声学
‑
统计学
‑
效应的分层映射模型，对电子乐音数据的旋律特征进行统计构建已知特征矢量矩阵，建立特征矢量空间；步骤二：构建评价指标体系，确立乐音识别的关键信息元；步骤三：对目标乐音进行预处理和时频域分解，提取目标乐音的关键信息并与步骤二中的关键信息元组成关键信息集；步骤四：通过确立乐音识别的关键信息集构建乐音的目标特征矢量矩阵；步骤五：将构建乐音的目标特征矢量矩阵，置于已知数字音乐库的特征矢量空间中进行距离计算和匹配得出特征矢量空间距离和匹配结果。2.根据权利要求1所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤一中，电子乐音数据的所述旋律特征的波形函数为：令y(jω)为离散时间信号y(n)的dft变换，则有：y(jω)＝s
i
(jω)
·
f
i
(jω)其中，ω
i
为指定音的基频或倍频，a
i
为基频点或倍频点的振幅，α
i
用来调节基频或者倍频附近波形宽度，f
i
为关于正弦和余弦的函数；对此建立矩阵，记录乐音各倍频点的相对振幅比例关系，把振动总能量按相对振幅的比例分配到各倍频点上，频率的记录矩阵就作为一种特征矢量，成为组成特征矢量空间的一个维度。3.根据权利要求1所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤二中针对基音、泛音、响度、速度等乐音的关键信息进行系统分析，构建评价指标体系，建立乐音识别的关键信息元。4.根据权利要求1所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤三中，对目标乐音进行预处理和时频域分解，采用分析时间轴的乐音信号，包括波形归一处理、端点检测、单音符分隔，其中将乐音进行分割离散化得到音符，在cqt频谱上构造有效的检测函数，利用检测函数的峰值来确定音符起始点的位置，检测函数的构造应用了幅度与相位联合判别的思想，在复数域进行构建：cqt频谱在时间t和谱线k处的谱值x[t,k]可以写作复数：其中，ψ(t,k)在(
‑
π,π)区间，是x[t,k]的相位；构造检测函数df(t)满足：其中，n
b
为频率谱线分量数。此检测函数联合能量与相位属性来考察候选起始点，配合自适应函数阈值δ[t]，利用一定范围内的加权中值来筛选出真正的峰值作为音符起始点。δ[t]＝δ0 λ
·
median(df(t
‑
t1),...,df(t t2))，其中t1,t2,δ0,λ为可变常数，median()
为取中值；在进行复数域构建后，乐音信号的频域特征的处理方式采用滤波去噪、频带限制、频率检测，利用快速傅里叶变换fft消除高频噪声，利用高通滤波器h(ω)构造多辨分析mra，将时变信号分解为j个尺度的分量的正交和，以daubechies
‑
4阶小波进行采样分解。5.根据权利要求3或4所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤四中，通过步骤二得到乐音的诸个关键信息元结合步骤三中对目标乐音进行预处理和时频域分解后提取目标乐音的关键信息，运用模糊综合评价技术和ahp分析法，对乐音信息的关键性进行定权排序，基于定权排序的结论，构建关键信息元的遴选和关键信息集。6.根据权利要求1或2所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤四中，利用目标乐音的旋律特征的波形函数建立目标矢量矩阵。7.根据权利要求1或4所述的一种乐音数据的采集和特征识别方法，其特征在于：在步骤五中，在进行距离计算和匹配时，是基于听觉显著度特征开展旋律流的检测、提取和识别，对于t时刻的各个子带，经过cqt变换、各子带数据建模、时序贝叶斯推断、子带as特征分量计算后利用tann网络识别出听觉显著度明显的多个子带作为候选半音，形成一个显著的半音复合结构；半音复合结构随着时间的变化组成了时间序列，形成了候选旋律流，在得到初步的旋律流后，衍生广义和弦结构的先验知识可规范候选旋律流中每一时刻的类和弦结构，所以先验知识与tann网络输出的候选旋律流作融合，提取得到最终旋律流。

技术总结
本发明提出了一种乐音数据的采集和特征识别方法，通过对电子乐音数据建立特征矢量空间；构建评价指标体系，确立乐音识别的关键信息元；对目标乐音进行预处理和时频域分解，提取目标乐音的关键信息并与关键信息元组成关键信息集；构建乐音的目标特征矢量矩阵；将构建乐音的目标特征矢量矩阵，置于已知数字音乐库的特征矢量空间中进行距离计算和匹配得出特征矢量空间距离和匹配结果。其有益效果是：本发明采用时频域信号特征提取的最新技术，评估并确定乐音识别的关键采集信息元，自动分割乐音数据并分解时频域乐音信息，构建声学


技术研发人员：孙梦青
受保护的技术使用者：华北水利水电大学
技术研发日：2021.09.23
技术公布日：2022/1/4