一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

录音方法、录音装置、录音设备和可读存储介质与流程

2021-11-29 13:57:00 来源:中国专利 TAG:


1.本技术属于录音技术领域,具体涉及一种录音方法、录音装置、录音设备和可读存储介质。


背景技术:

2.目前,市场上的三维立体录音设备,大部分都是基于位置固定的模拟人头,在录音过程中无法晃动或移动头部,一方面,无法实时跟踪录音对象的声场轨迹,导致录音效果不理想;另一方面,一旦晃动或移动就会破坏三维立体录音声场环境,也会导致录音效果不理想。


技术实现要素:

3.本技术实施例的目的是提供一种录音方法、录音装置、录音设备和可读存储介质,能够解决相关技术中无法晃动或移动模拟人头而导致的录音效果不理想的问题。
4.第一方面,本技术实施例提供了一种录音方法,该录音方法包括:
5.获取声源对象的第一目标声音信号;
6.检测人体耳部的运动轨迹,以及检测第一目标声音信号进入人体耳部所产生的耳道声场信号;
7.根据运动轨迹,确定人体耳部的移动信息;
8.根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号;
9.对第二目标声音信号进行录制。
10.第二方面,本技术实施例提供了一种录音装置,该录音装置包括:
11.获取模块,用于获取声源对象的第一目标声音信号;
12.第一检测模块,用于检测人体耳部的运动轨迹;
13.第二检测模块,用于检测第一目标声音信号进入人体耳部所产生的耳道声场信号;
14.确定模块,用于根据运动轨迹,确定人体耳部的移动信息;
15.渲染模块,用于根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号;
16.录制模块,用于对第二目标声音信号进行录制。
17.第三方面,本技术实施例提供了一种录音设备,该录音设备包括:
18.声音采集装置,用于录制声源对象的第一目标声音信号;
19.位置检测装置,用于检测人体耳部的运动轨迹;
20.声纹检测装置,用于检测第一目标声音信号进入人体耳部所产生的耳道声场信号;
21.处理装置,用于根据运动轨迹,确定人体耳部的移动信息,以及根据移动信息和耳
道声场信号对第一目标声音信号进行渲染,生成第二目标声音信号。
22.第四方面,本技术实施例提供了一种录音设备,该录音设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面的方法的步骤。
23.第五方面,本技术实施例提供了一种可读存储介质,可读存储介质上存储程序或指令,程序或指令被处理器执行时实现如第一方面的方法的步骤。
24.第六方面,本技术实施例提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现如第一方面的方法。
25.在本技术实施例中,录音设备实时采集声源对象的第一目标声音信号,并在某一时刻,利用第一目标声音信号进入人体耳部所产生的耳道声场信号以及与前一时刻的相对移动信息,对第一目标声音信号进行渲染,生成第二目标声音信号,并对该第二目标声音信号进行录制。通过上述方式,能够实时跟踪人体的头部运动轨迹,以及捕捉声波绕人体耳廓的振动效应,通过对声音信号进行渲染,提升录音音频的立体空间感和方位感。
附图说明
26.图1是本技术实施例的录音方法的流程示意图;
27.图2是本技术实施例的声音信号处理过程的示意图;
28.图3是本技术实施例的录音装置的示意框图;
29.图4是本技术实施例的录音设备的结构示意图;
30.图5是本技术实施例的录音设备的示意框图之一;
31.图6是本技术实施例的录音设备的示意框图之二。
具体实施方式
32.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本技术保护的范围。
33.本技术的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
34.下面结合附图,通过具体的实施例及其应用场景对本技术实施例提供的录音方法、录音装置、录音设备和可读存储介质进行详细地说明。
35.本技术实施例提供一种录音方法,如图1所示,该录音方法包括:
36.步骤102,获取声源对象的第一目标声音信号;
37.步骤104,检测人体耳部的运动轨迹,以及检测第一目标声音信号进入人体耳部所产生的耳道声场信号;
38.步骤106,根据运动轨迹,确定人体耳部的移动信息;
39.步骤108,根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第
二目标声音信号;
40.步骤110,对第二目标声音信号进行录制。
41.在该实施例中,该录音方法应用于录音设备,录音设备为便携式设备,人体可进行携带,例如为耳机设备。录音设备实时采集声源对象的第一目标声音信号,并在某一时刻,利用第一目标声音信号进入人体耳部所产生的耳道声场信号以及与前一时刻的相对移动信息,对第一目标声音信号进行渲染,生成第二目标声音信号,移动信息是通过检测到的人体耳部的运动轨迹所确定的。
42.示例性地,录音设备实时检测声源对象的第一目标声音信号,以及检测人体耳部的运动轨迹和第一目标声音信号进入人体耳部所产生的耳道声场信号,该耳道声场信号可以模拟出人体的耳廓振动效应。进一步地,根据运动轨迹,确定人体耳部的移动信息,例如移动距离、移动角度。从而根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号,并对该第二目标声音信号进行录制。
43.通过上述方式,能够实时跟踪人体的头部运动轨迹,以及捕捉声波绕人体耳廓的振动效应,通过对声音信号进行渲染,提升录音音频的立体空间感和方位感。
44.需要说明的是,本技术实施例中不限于人体是固定还是移动,可以根据实际场景需求实现音频录制。例如,应用于交响乐、演唱会等现场感强的场合时,尽量保持录制的声场环境;而应用于现场直播、互动交流等场合时,需要保持不断交变的声场环境。
45.本技术实施例的录音设备可以为耳机,被佩戴在人体的头部,能够自适应人体的耳廓参数。
46.进一步地,在本技术的一个实施例中,移动信息包括人体耳部的第一耳部的第一移动信息和人体耳部的第二耳部的第二移动信息,耳道声场信号包括第一耳部的第一耳道声场信号和第二耳部的第二耳道声场信号,第一目标声音信号包括第一耳部对应的第一声音信号和第二耳部对应的第二声音信号;根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号,包括:根据第一移动信息和第一耳道声场信号,对第一声音信号进行渲染,生成第三声音信号;根据第二移动信息和第二耳道声场信号,对第二声音信号进行渲染,生成第四声音信号;其中,第二目标声音信号包括第三声音信号和第四声音信号。
47.在该实施例中,移动信息包括人体的左耳(即第一耳部)的移动信息以及右耳(即第二耳部)的移动信息,耳道声场信号包括左耳的第一耳道声场信号和右耳的第二耳道声场信号,第一目标声音信号包括左耳的第一声音信号和右耳的第二声音信号。从而能够利用左耳的移动信息、耳道声场信号对左耳的声音信号进行渲染,以及利用右耳的移动信息、耳道声场信号对右耳的声音信号进行渲染。
48.通过上述方式,实现左耳声音信号和右耳声音信号的立体空间渲染,从而保证在播放录制的音频时,左耳和右耳均能听到具有立体感的声音。
49.进一步地,在本技术的一个实施例中,第一移动信息包括第一移动距离信息和第一移动角度信息;第二移动信息包括第二移动距离信息和第二移动角度信息。
50.在该实施例中,移动信息包括距离信息和角度信息,通过拾取左右耳的相对变化位置和相对变化角度,确定人体左右耳的运动轨迹和转动角度。从而结合运动轨迹和转动角度,对声音信号进行渲染,使得即便人体在录音过程中晃动头部或随意走动,也能够确保
录音音频的录制效果。
51.进一步地,在本技术的一个实施例中,第一耳道声场信号包括第一内耳道声场信号和第一外耳道声场信号;第二耳道声场信号包括第二内耳道声场信号和第二外耳道声场信号。
52.在该实施例中,左耳的耳道声场信号包括左耳内耳道声场信号(即第一内耳道声场信号)和左耳外耳道声场信号(即第一外耳道声场信号),右耳的耳道声场信号包括右耳内耳道声场信号(即第二内耳道声场信号)和右耳外耳道声场信号(即第二外耳道声场信号)。外耳道声场信号可以为中高频段的信号,例如1000hz以上的信号,而内耳道声场信号可以为中低频段的信号,例如1000hz以下的信号。
53.本技术实施例,能够结合左右耳的内外耳道声场信号,对声音信号进行渲染,使得即便人体在录音过程中晃动头部或随意走动,也能够确保录音音频的录制效果。
54.进一步地,在本技术的一个实施例中,在对第二目标声音信号进行录制之前,还包括:将第二目标声音信号与预设声音信号进行比较,其中预设声音信号为第i时刻的渲染的声音信号,第二目标声音信号为第i 1时刻的渲染的声音信号;在第二目标声音信号与预设声音信号之间的差异值大于或等于预设阈值的情况下,将第二目标声音信号更新为预设声音信号。
55.在该实施例中,在当前时刻(即第i 1时刻),对第一目标声音信号进行渲染生成第二目标声音信号后,将第二目标声音信与前一时刻(即第i时刻)渲染后的预设声音信号进行比较,得到二者的差异值(例如,振幅差异值、带宽差异值等)。如果当前时刻渲染后的第二目标声音信号与前一时刻渲染后的预设声音信号之间的差异较大,表明当前时刻渲染后的第二目标声音信号相对于前一时刻渲染后的预设声音信号的变化较大,可能为不准确的信号,则舍弃该不准确的声音信号,而将前一时刻渲染后的预设声音信号作为当前时刻渲染后的声音信号。
56.通过上述方式,避免录制音频过程中出现不准确的声音信号而影响音频的录制效果。
57.进一步地,在本技术的一个实施例中,检测人体耳部的运动轨迹,包括:检测人体耳部的至少两个位置信息;根据至少两个位置信息,确定人体耳部的运动轨迹。
58.在该实施例中,运动轨迹是通过检测到的人体耳部的至少两个位置信息所确定的,且每个位置信息为在不同时刻检测的。例如,该录音设备在第一时刻检测人体耳部的第一位置信息,在一段时间内(例如几秒钟或几分钟),人体耳部进行了移动,也即从第一位置移动至第二位置。在经过该段时间后,录音设备在第二时刻检测人体耳部的第二位置信息。
59.需要说明的是,检测的位置信息是为了得到头部的运动轨迹,并不一定是通过两个位置确定的,也可以是三个或者多个。
60.本技术实施例,通过检测的人体耳部的位置信息确定出准确的人体耳部的运动轨迹,从而为根据运动轨迹对声音信号进行渲染提供了基础。
61.在本技术的一个实施例中,录音设备被佩戴至用户的耳部,对声源对象的声音信号进行声音录制。如图2所示,假定声源对象的声音信号在某一位置a和某一时间点t时,声音信号经过不同路径分别传输到用户的左耳和右耳,即录音设备的录音麦克风分别采集到左耳声音信号x和右耳声音信号y。
62.录音设备的惯性传感器采集用户头部运动的位置信息,并换算成对应时间点t的相对距离值,即分别对应于左右耳道的位置滤波函数f(m,t)。录音设备的惯性传感器采集头部摇摆的角速度信息,并换算成对应时间点t的空间角度值,即分别对应于左右耳道的角度滤波函数f(n,t)。
63.录音设备的声纹传感器分别采集左右耳的外耳廓的声场信号以及内耳廓的声场信号,从而计算出相对时间点t的声信号频谱,即对应于左右耳外声场滤波函数f(s,t)以及对应于左右耳内声场滤波函数f(i,t);
64.然后,通过上述信息,分别对左右耳拾取到的声音信号做卷积处理:
65.f

(m,n,i,s,t)=x
×
f(m,t) x
×
f(n,t) x
×
f(i,t) x
×
f(s,t);
66.f

(m,n,i,s,t)=y
×
f(m,t) y
×
f(n,t) y
×
f(i,t) y
×
f(s,t)。
67.其中,m表示矢量距离值,n表示空间角度值,i表示内耳道声采集到的声压强度值,s表示外耳道采集到的声压强度值,t表示当前时间值,x表示左耳声音信号,y表示右耳声音信号,f

(m,n,i,s,t)表示声源经处理后左耳接收到的信号,f

(m,n,i,s,t)表示声源经处理后右耳接收到的信号。
68.具体地,将融合后的各个卷积信号输入至人工智能(artificial intelligence,ai)算法识别处理器进行深度定制,即先判断存储器中是否有与m、n、i、s对应的计算f

(m,n,i,s,t)或f

(m,n,i,s,t)的卷积模型,如果有的话,就调用存储器中已有的卷积模型;如果没有的话,就按照现有的卷积模型处理。
69.以及结合滤波函数反馈补偿系统q,实时补偿和校正当前位置和原始位置之间的差异,具体地,如果
[0070][0071]
则f

(m,n,i,s,t)=f

(m,n,i,s,t);如果
[0072][0073]
则f

(m,n,i,s,t)=f

(m,n,i,s,t

1);如果
[0074][0075]
则f

(m,n,i,s,t)=f

(m,n,i,s,t);如果
[0076][0077]
则f

(m,n,i,s,t)=f

(m,n,i,s,t

1)。
[0078]
经过ai算法处理后的信号,能够实时检索和预测头部的运动轨迹和声场轨迹,并将头部运动轨迹和声场轨迹,利用头部相关传递函数(head related transfer function,hrtf)算法叠加到原始位置的虚拟音频信号中,得到左耳渲染音频和右耳渲染音频,实现左右耳音源的三围立体空间渲染。
[0079]
需要说明的是,本技术实施例提供的录音方法,执行主体可以为录音装置,或者,
该录音装置中的用于执行录音方法的控制模块。本技术实施例中以录音装置执行录音方法为例,说明本技术实施例提供的录音装置。
[0080]
本技术实施例提供一种录音装置,如图3所示,该录音装置300包括:获取模块302,用于获取声源对象的第一目标声音信号;第一检测模块304,用于检测人体耳部的运动轨迹;第二检测模块306,用于检测第一目标声音信号进入人体耳部所产生的耳道声场信号;确定模块308,用于根据运动轨迹,确定人体耳部的移动信息;渲染模块310,用于根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号;录制模块312,用于对第二目标声音信号进行录制。
[0081]
在该实施例中,录音设备实时采集声源对象的第一目标声音信号,并在某一时刻,利用第一目标声音信号进入人体耳部所产生的耳道声场信号以及与前一时刻的相对移动信息,对第一目标声音信号进行渲染,生成第二目标声音信号,并对该第二目标声音信号进行录制。
[0082]
通过上述方式,能够实时跟踪人体的头部运动轨迹,以及捕捉声波绕人体耳廓的振动效应,通过对声音信号进行渲染,提升录音音频的立体空间感和方位感。
[0083]
进一步地,在本技术的一个实施例中,移动信息包括人体耳部的第一耳部的第一移动信息和人体耳部的第二耳部的第二移动信息,耳道声场信号包括第一耳部的第一耳道声场信号和第二耳部的第二耳道声场信号,第一目标声音信号包括第一耳部对应的第一声音信号和第二耳部对应的第二声音信号;渲染模块310,具体用于根据第一移动信息和第一耳道声场信号,对第一声音信号进行渲染,生成第三声音信号;根据第二移动信息和第二耳道声场信号,对第二声音信号进行渲染,生成第四声音信号;其中,第二目标声音信号包括第三声音信号和第四声音信号。
[0084]
进一步地,在本技术的一个实施例中,第一移动信息包括第一移动距离信息和第一移动角度信息;第二移动信息包括第二移动距离信息和第二移动角度信息。
[0085]
进一步地,在本技术的一个实施例中,第一耳道声场信号包括第一内耳道声场信号和第一外耳道声场信号;第二耳道声场信号包括第二内耳道声场信号和第二外耳道声场信号。
[0086]
进一步地,在本技术的一个实施例中,该录音装置300还包括:比较模块,用于将第二目标声音信号与预设声音信号进行比较,其中预设声音信号为第i时刻的渲染的声音信号,第二目标声音信号为第i 1时刻的渲染的声音信号;更新模块,用于在第二目标声音信号与预设声音信号之间的差异值大于或等于预设阈值的情况下,将第二目标声音信号更新为预设声音信号。
[0087]
进一步地,在本技术的一个实施例中,第一检测模块304,具体用于:检测人体耳部的至少两个位置信息;根据至少两个位置信息,确定人体耳部的运动轨迹。
[0088]
本技术实施例中的录音装置300可以是移动录音设备,示例性的,移动录音设备可以为可穿戴设备,例如耳机,本技术实施例不作具体限定。
[0089]
本技术实施例中的录音装置300可以为具有操作系统的装置。该操作系统可以为安卓(android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本技术实施例不作具体限定。
[0090]
本技术实施例提供的录音装置300能够实现图1的录音方法实施例中实现的各个
过程,为避免重复,这里不再赘述。
[0091]
本技术实施例提供一种录音设备,该录音设备包括:
[0092]
声音采集装置,用于录制声源对象的第一目标声音信号;
[0093]
位置检测装置,用于检测人体耳部的运动轨迹;
[0094]
声纹检测装置,用于检测第一目标声音信号进入人体耳部所产生的耳道声场信号;
[0095]
处理装置,用于根据运动轨迹,确定人体耳部的移动信息,以及根据移动信息和耳道声场信号对第一目标声音信号进行渲染,生成第二目标声音信号。
[0096]
在该实施例中,录音设备实时采集声源对象的第一目标声音信号,并在某一时刻,利用第一目标声音信号进入人体耳部所产生的耳道声场信号以及与前一时刻的相对移动信息,对第一目标声音信号进行渲染,生成第二目标声音信号,并对该第二目标声音信号进行录制。
[0097]
本技术实施例,在现有有线或无线等录音设备的基础上,增加声纹检测装置和位置检测装置,能够实时跟踪人体的头部运动轨迹,以及捕捉声波绕人体耳廓的振动效应,通过对声音信号进行渲染,提升录音音频的立体空间感和方位感。
[0098]
示例性地,如图4所示,录音设备402为便携式设备,例如为耳机设备,用户头部404可进行携带,录音设备402具有两个子录音耳塞,分别对应于用户的左耳和右耳。录音设备402能够不受限于用户头部的外形和尺寸,不受限于用户位置移动和头部晃动等影响,更加适合便携式录音。
[0099]
进一步地,在本技术的一个实施例中,如图4所示,声音采集装置包括:第一声音采集装置4202,用于录制人体耳部的第一耳部对应的第一声音信号;和第二声音采集装置4402,用于录制人体耳部的第二耳部对应的第二声音信号,其中第一目标声音信号包括第一声音信号和第二声音信号;位置检测装置包括:第一位置检测装置4204,用于检测第一耳部的至少两个位置信息;和第二位置检测装置4404,用于检测第二耳部的至少两个位置信息;声纹检测装置包括:第一声纹检测装置4206,用于检测第一耳部的第一耳道声场信号;和第二声纹检测装置4406,用于检测第二耳部的第二耳道声场信号,其中耳道声场信号包括第一耳道声场信号和第二耳道声场信号。
[0100]
在该实施例中,第一目标声音信号包括左耳(即第一耳部)的第一声音信号和右耳(即第二耳部)的第二声音信号。其中,左耳的第一声音信号由第一声音采集装置4202采集,右耳的第二声音信号由第二声音采集装置4402采集。
[0101]
需要说明的是,第一声音采集装置4202和第二声音采集装置4402均为录音麦克风,且采用全指向型,出音孔背对耳道口,能够最大范围的拾取左右耳的声源信息。
[0102]
左耳的至少两个位置信息均由第一位置检测装置4204检测,通过左耳的至少两个位置信息确定左耳的运动轨迹。右耳的至少两个位置信息均由第二位置检测装置4404检测,通过右耳的至少两个位置信息确定右耳的运动轨迹。
[0103]
需要说明的是,第一位置检测装置4204和第二位置检测装置4404均为惯性传感器,第一位置检测装置4204和第二位置检测装置4404分别位于左右耳道的中心轴位置,有利于快速建立耳道的空间坐标系,拾取左右耳变化的相对位置和角度信息。惯性传感器主要包括加速度计、陀螺仪等传感器件,加速度计采集人体头部运动的位置信息,通过加速度
计内部的微机电系统的矢量对应关系,可以换算成对应时间点的相对距离值,即对应于左右耳道的位置滤波函数f(m,t);陀螺仪采集头部摇摆的角速度信息,由陀螺仪内部的矢量对应关系,可以换算成对应时间点的空间角度值,即对应于左右耳道的角度滤函数f(n,t)。
[0104]
耳道声场信号包括左耳的第一耳道声场信号和右耳的第二耳道声场信号。其中,左耳的第一耳道声场信号由第一声纹检测装置4206检测,右耳的第二耳道声场信号由第二声纹检测装置4406检测。需要说明的是,第一声纹检测装置4206和第二声纹检测装置4406均为声纹传感器,能够采集左右耳的耳道声场信号。另外,声纹传感器还具备识别和提取声音特性的功能,通过对音调、响度、音色等基本特征进行分析和处理,使特定的声音特征进行保存,下次使用时会直接调用相似人声的耳廓模型,提高处理装置的效率。
[0105]
如图4所示,处理装置包括左耳对应的第一处理装置4208和右耳对应的第二处理装置4408,第一处理装置4208能够利用左耳的至少两个位置信息确定左耳的第一移动信息,进而利用左耳的第一移动信息、第一耳道声场信号对左耳的第一声音信号进行渲染,第二处理装置4408能够利用右耳的至少两个位置信息确定右耳的第二移动信息,进而利用右耳的第二移动信息、第二耳道声场信号对右耳的第二声音信号进行渲染。
[0106]
通过上述方式,实现左耳声音信号和右耳声音信号的立体空间渲染,从而保证在播放录制的音频时,左耳和右耳均能听到具有立体感的声音。
[0107]
进一步地,在本技术的一个实施例中,如图4所示,第一声纹检测装置4206包括:第一子声纹检测装置42062,用于检测第一耳部的第一内耳道声场信号;和第二子声纹检测装置42064,用于检测第一耳部的第一外耳道声场信号,其中第一耳道声场信号包括第一内耳道声场信号和第一外耳道声场信号;第二声纹检测装置4406包括:第三子声纹检测装置44062,用于检测第二耳部的第二内耳道声场信号;和第四子声纹检测装置44064,用于检测第二耳部的第二外耳道声场信号,其中第二耳道声场信号包括第二内耳道声场信号和第二外耳道声场信号。
[0108]
在该实施例中,第二子声纹检测装置42064和第四子声纹检测装置44064贴合外耳廓边缘放置,分别识取左右耳的外耳道声场信号;第一子声纹检测装置42062和第三子声纹检测装置44062贴合内耳道放置,分别识取左右耳的内耳道声场信号。
[0109]
第二子声纹检测装置42064和第四子声纹检测装置44064均为声纹传感器,主要获取中高频段的声场(例如1000hz以上的信号,也可根据用户需要自定义设置频段),从而计算出相对时间点的声信号频谱,即对应于左右耳外声场滤波函数f(s,t);第一子声纹检测装置42062和第三子声纹检测装置44062均为声纹传感器,主要获取中低频段的声场(例如1000hz以下的信号,也可根据用户需要自定义设置频段),从而计算出相对时间点的声信号频谱,即对应于左右耳内声场滤波函数f(i,t)。
[0110]
本技术实施例,能够结合左右耳的内外耳道声场信号,对声音信号进行渲染,使得即便人体在录音过程中晃动头部或随意走动,也能够确保录音音频的录制效果。
[0111]
需要说明的是,处理装置可以为微控制单元(microcontroller unit,mcu)和数字信号处理器(digital signal processing,dsp),是录音设备402的主控单元,用户控制和处理各器件有序工作。
[0112]
录音设备402还包括第一耳机功率放大器4210和第二耳机功率放大器4410,声波信号进行滤波和编解码等处理,最后通过第一耳机功率放大器4210和第二耳机功率放大器
4410将渲染处理后的音频信号播放出来。
[0113]
录音设备402还包括ai算法存储器,左右耳对应的ai算法存储器分别针对头部轨迹和耳朵内外声场的行为进行记忆和预测等操作。
[0114]
可选的,如图5所示,本技术实施例还提供一种录音设备500,包括处理器502,存储器504,存储在存储器504上并可在处理器502上运行的程序或指令,该程序或指令被处理器502执行时实现上述录音方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
[0115]
需要注意的是,本技术实施例中的录音设备包括上述的移动录音设备。
[0116]
图6为实现本技术实施例的一种录音设备的硬件结构示意图。
[0117]
该录音设备600包括但不限于:射频单元602、网络模块604、音频输出单元606、输入单元608、传感器610、显示单元612、用户输入单元614、接口单元616、存储器618、以及处理器620等部件。
[0118]
本领域技术人员可以理解,录音设备600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器620逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的录音设备结构并不构成对录音设备的限定,录音设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
[0119]
其中,输入单元608的麦克风6084,用于获取声源对象的第一目标声音信号;传感器610,用于检测人体耳部的运动轨迹,以及检测第一目标声音信号进入人体耳部所产生的耳道声场信号;处理器620,用于根据运动轨迹,确定人体耳部的移动信息,以及根据移动信息和耳道声场信号,对第一目标声音信号进行渲染,生成第二目标声音信号,以及对第二目标声音信号进行录制。
[0120]
在该实施例中,录音设备实时采集声源对象的第一目标声音信号,并在某一时刻,利用第一目标声音信号进入人体耳部所产生的耳道声场信号以及与前一时刻的相对移动信息,对第一目标声音信号进行渲染,生成第二目标声音信号,并对该第二目标声音信号进行录制。
[0121]
通过上述方式,能够实时跟踪人体的头部运动轨迹,以及捕捉声波绕人体耳廓的振动效应,通过对声音信号进行渲染,提升录音音频的立体空间感和方位感。
[0122]
进一步地,在本技术的一个实施例中,移动信息包括人体耳部的第一耳部的第一移动信息和人体耳部的第二耳部的第二移动信息,耳道声场信号包括第一耳部的第一耳道声场信号和第二耳部的第二耳道声场信号,第一目标声音信号包括第一耳部对应的第一声音信号和第二耳部对应的第二声音信号;处理器620,具体用于根据第一移动信息和第一耳道声场信号,对第一声音信号进行渲染,生成第三声音信号;根据第二移动信息和第二耳道声场信号,对第二声音信号进行渲染,生成第四声音信号;其中,第二目标声音信号包括第三声音信号和第四声音信号。
[0123]
进一步地,在本技术的一个实施例中,第一移动信息包括第一移动距离信息和第一移动角度信息;第二移动信息包括第二移动距离信息和第二移动角度信息。
[0124]
进一步地,在本技术的一个实施例中,第一耳道声场信号包括第一内耳道声场信号和第一外耳道声场信号;第二耳道声场信号包括第二内耳道声场信号和第二外耳道声场
信号。
[0125]
进一步地,在本技术的一个实施例中,处理器620,还用于将第二目标声音信号与预设声音信号进行比较,其中预设声音信号为第i时刻的渲染的声音信号,第二目标声音信号为第i 1时刻的渲染的声音信号;以及在第二目标声音信号与预设声音信号之间的差异值大于或等于预设阈值的情况下,将第二目标声音信号更新为预设声音信号。
[0126]
进一步地,在本技术的一个实施例中,传感器610,具体用于:检测人体耳部的至少两个位置信息;处理器620,具体用于根据至少两个位置信息,确定人体耳部的运动轨迹。
[0127]
应理解的是,本技术实施例中,射频单元602可用于收发信息或收发通话过程中的信号,具体的,接收基站的下行数据或向基站发送上行数据。射频单元602包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。
[0128]
网络模块604为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
[0129]
音频输出单元606可以将射频单元602或网络模块604接收的或者在存储器618中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元606还可以提供与录音设备600执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元606包括扬声器、蜂鸣器以及受话器等。
[0130]
输入单元608用于接收音频或视频信号。输入单元608可以包括图形处理器(graphics processing unit,gpu)6082和麦克风6084,图形处理器6082对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元612上,或者存储在存储器618(或其它存储介质)中,或者经由射频单元602或网络模块604发送。麦克风6084可以接收声音,并且能够将声音处理为音频数据,处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元602发送到移动通信基站的格式输出。
[0131]
录音设备600还包括至少一种传感器610,比如指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器以及其他传感器。
[0132]
显示单元612用于显示由用户输入的信息或提供给用户的信息。显示单元612可包括显示面板6122,可以采用液晶显示器、有机发光二极管等形式来配置显示面板6122。
[0133]
用户输入单元614可用于接收输入的数字或字符信息,以及产生与录音设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元614包括触控面板6142以及其他输入设备6144。触控面板6142也称为触摸屏,可收集用户在其上或附近的触摸操作。触控面板6142可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器620,接收处理器620发来的命令并加以执行。其他输入设备6144可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
[0134]
进一步的,触控面板6142可覆盖在显示面板6122上,当触控面板6142检测到在其上或附近的触摸操作后,传送给处理器620以确定触摸事件的类型,随后处理器620根据触摸事件的类型在显示面板6122上提供相应的视觉输出。触控面板6142与显示面板6122可作
为两个独立的部件,也可以集成为一个部件。
[0135]
接口单元616为外部装置与录音设备600连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(i/o)端口、视频i/o端口、耳机端口等等。接口单元616可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到录音设备600内的一个或多个元件或者可以用于在录音设备600和外部装置之间传输数据。
[0136]
存储器618可用于存储软件程序以及各种数据。存储器618可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据移动终端的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器618可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0137]
处理器620通过运行或执行存储在存储器618内的软件程序和/或模块,以及调用存储在存储器618内的数据,执行录音设备600的各种功能和处理数据,从而对录音设备600进行整体监控。处理器620可包括一个或多个处理单元;优选的,处理器620可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。
[0138]
本技术实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述录音方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
[0139]
其中,处理器为上述实施例中的录音设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器(read

only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等。
[0140]
本技术实施例另提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现上述录音方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
[0141]
应理解,本技术实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
[0142]
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本技术实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
[0143]
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下
前者是更佳的实施方式。基于这样的理解,本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本技术各个实施例所述的方法。
[0144]
上面结合附图对本技术的实施例进行了描述,但是本技术并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本技术的启示下,在不脱离本技术宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本技术的保护之内。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献