音频数据处理方法、装置、终端和存储介质与流程

1.本公开涉及电子技术领域，尤其涉及一种音频数据处理方法、装置、终端和存储介质。


背景技术：

2.终端以手机为例。目前主流的手机领域中，音量键一般以物理按键的形式存在。通过按压音量键，用户能够根据自身需求的变化，或根据当前所处环境的变化等人为调整到人耳适合的一个音量。这种手动调节音频数据的方式，智能化不够，便利性也不够。在一些场景中用户无法手动调节音频数据时，只能以当前音频数据播放，常导致播放的音频不够清晰等问题，用户使用体验较差。


技术实现要素：

3.本公开提供一种音频数据处理方法、装置、终端和存储介质。
4.根据本公开实施例的第一方面，提供一种音频数据处理方法，包括：
5.基于预设听力曲线，确定待播放音频对应的初始音频数据；
6.结合当前环境噪音，将所述初始音频数据调整为第一音频数据；
7.获取与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一对应的补偿曲线；
8.基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据。
9.在一些实施例中，所述基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据，包括：
10.根据所述用户状况信息和/或所述播放状态，确定所述补偿曲线中对应的补偿值；
11.根据所述补偿值，调整所述第一音频数据的音量和/或频率。
12.在一些实施例中，所述基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据，包括：
13.若所述终端处于第一播放状态，则根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据，所述第一播放状态包括通过所述终端包含的音频模组输出所述待播放音频的状态；
14.若所述终端处于第二播放状态，则根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据，所述第二播放状态包括通过与所述终端连接播放设备输出所述待播放音频的状态。
15.在一些实施例中，所述若所述终端处于第一播放状态，根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据，包括：
16.根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，确定所述第二音频数据的音量；其中，所述第二音频数据的音量与所述距离呈正相关关系。
17.在一些实施例中，所述若所述终端处于第二播放状态，根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据得到第二音频数据，包括：
18.在所述播放设备为第一类型时，确定所述第二音频数据的音量为第一音量；
19.在所述播放设备为第二类型时，确定所述第二音频数据的音量为第二音量；其中，所述第一类型的播放设备为内放设备，所述第二类型的播放设备为外放设备，所述第二音量大于所述第一音量。
20.在一些实施例中，所述与用户个人听力状况关联的用户状况信息包括以下至少之一：
21.用户年龄、听力能力信息、睡眠状况信息，或，在不同光照强度下所述用户的听力偏好。
22.在一些实施例中，所述方法还包括：
23.获取所述用户状况信息的更新状态；
24.响应于所述用户状况信息有更新，根据更新后的所述用户状况信息，更新所述补偿曲线。
25.根据本公开实施例的第二方面，提供一种音频数据处理装置，包括：
26.确定模块，用于基于预设听力曲线，确定待播放音频对应的初始音频数据；
27.第一调整模块，用于结合当前环境噪音，将所述初始音频数据调整为第一音频数据；
28.获取模块，用于获取与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一对应的补偿曲线；
29.第二调整模块，用于基于所述补偿曲线对所述第一音频数据进行调整，输出得到的第二音频数据。
30.在一些实施例中，所述第二调整模块，用于：
31.根据所述用户状况信息和/或所述播放状态，确定所述补偿曲线中对应的补偿值；
32.根据所述补偿值，调整所述第一音频数据的音量和/或频率。
33.在一些实施例中，所述第二调整模块，用于：
34.若所述终端处于第一播放状态，则根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据，所述第一播放状态包括通过所述终端包含的音频模组输出所述待播放音频的状态；
35.若所述终端处于第二播放状态，则根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据，所述第二播放状态包括通过与所述终端连接播放设备输出所述待播放音频的状态。
36.根据本公开实施例的第三方面，提供一种终端，包括处理器、存储器及存储在存储器上并能够由所述处理器运行的可执行程序，所述处理器运行所述可执行程序时执行第一方面所述音频数据处理方法的步骤。
37.根据本公开实施例的第四方面，提供一种存储介质，其上存储有可执行程序，所述可执行程序被处理器执行时实现第一方面所述音频数据处理方法的步骤。
38.本公开实施例公开了的音频数据处理方法中，通过环境噪音和预设听力曲线确定的第一音频数据，去除了环境噪音对输出的待播放音频的影响，起到了初步调整音频数据
的作用，初步保证了输出的待播放音频的清晰度。在第一音频数据的基础上，通过与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一对应的补偿曲线，再次对音频数据进行调整，使调节后的第二音频数据不仅去除环境噪音的影响，还适应了用户状况信息和/或终端的播放状态，满足了用户在不同使用场景下的个性化需求。本公开实施例的这种调节音频数据的方式，可以依靠软件自动调整音量等音频数据，无需手动调整物理按键形式的音量键，在理想状况下，可以取消物理按键的音量键，有利于节省终端的堆叠空间，提升用户使用体验。
39.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
40.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
41.图1是根据一示例性实施例示出的一种音频数据处理方法的流程示意图之一；
42.图2是根据一示例性实施例示出的音频数据处理方法流程示意图之二；
43.图3是根据一示例性实施例示出的一种音频数据处理装置的结构示意图；
44.图4是根据一示例性实施例示出的一种音频数据处理装置的组成结构框图。
具体实施方式
45.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开实施例相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开实施例的一些方面相一致的装置和方法的例子。
46.在本公开实施例使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本公开实施例。在本公开实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
47.应当理解，尽管在本公开实施例可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本公开实施例范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
48.本公开实施例涉及的执行主体包括但不限于：手机、笔记本电脑、平板电脑、电视、可穿戴设备等移动终端。
49.图1是根据一示例性实施例示出的一种音频数据处理方法的流程图，如图1所示，该方法包括：
50.步骤s110、基于预设听力曲线，确定待播放音频对应的初始音频数据；
51.步骤s120、结合当前环境噪音，将所述初始音频数据调整为第一音频数据；
52.步骤s130、获取与用户个人听力状况关联的用户状况信息和终端的播放状态中至
少之一对应的补偿曲线；
53.步骤s140、基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据。
54.步骤s110中，非限制地，预设听力曲线可以是根据现有听力数据制作的标准听力曲线。例如：由大量的正常用户的听力数据汇整归纳后得到的频率-响度曲线。预设听力曲线还可以是在特定环境(环境噪音很小或无环境噪音的环境))中，根据目标用户制定的听力曲线，亦称标准听力曲线。
55.预设听力曲线用于确定待播放音频的初始音频数据。初始音频数据指未经过调整的音频数据。
56.步骤s120中，第一音频数据已经去除了环境噪音对输出的待播放音频的影响，起到了初步调整音频数据的作用，初步保证了输出的待播放音频的清晰度。
57.一般地，噪音越大，对初始音频数据的调整程度越大，第一音频数据与初始音频数据的差别越大；反之，噪音越小，对初始音频数据的调整程度越小，第一音频数据与初始音频数据的差别越小。甚至，无需对初始音频数据进行去燥补偿，第一音频数据即初始音频数据。例如：终端所处当前环境的环境噪音为50分贝时，表明环境噪音较大，为了保证待播放音频能够被清晰听到，可以适当增加初始音频数据的音量，得到第一音频数据。
58.步骤s130中，与用户个人听力状况关联的用户状况信息体现了用户的个性特征，不同用户会有不同的听力偏好或不同的听力能力。同一个调整方案，可能对部分用户具有不错的效果，但对于另一部分用户可能效果不够好，甚至无法听清输出的带播放音频。因此，根据用户状况信息调整第一音频数据，有利于制定个性化的调整方案，满足不同用户的个性化需求，使同一终端面对不同用户，均能够得到较好的使用体验。
59.终端的播放状态包括但不限于手持播放状态、免提播放状态或耳机播放状态，其中，手持播放状态指用户终端贴近耳朵的一种状态。不同播放状态时，需要的音量和/或音频不同。根据终端播放状态调整第一音频数据，丰富了不同使用场景的调整方案，进一步提高了对第一音频数据调整的智能性。
60.补偿曲线是基于与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一制定的曲线。通过补偿曲线，可以确定不同用户状态信息对应的音量值和/或频率值，也可以确定终端在不同播放状态下的音量值和/或频率值。
61.可以在手持播放状态、免提播放状态或耳机播放状态等任一播放状态下基于第二音频数据输出待播放音频。
62.步骤s140中，在第一音频数据的基础上，通过与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一对应的补偿曲线，再次对音频数据进行调整，使调节后的第二音频数据不仅去除环境噪音的影响，还适应了用户状况信息和/或终端的播放状态，满足了用户在不同使用场景下的个性化需求。
63.本公开实施例由初始音频数据形成第一音频数据，及由第一音频数据调整形成第二音频数据的方式，均可以依靠软件自动调整，无需手动调整物理按键形式的音量键，在理想状况下，可以取消物理按键的音量键，有利于节省终端的堆叠空间，提升用户使用体验。
64.在其他一些可选实施例中，所述基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据，包括：
65.根据所述用户状况信息和/或所述播放状态，确定所述补偿曲线中对应的补偿值；
66.根据所述补偿值，调整所述第一音频数据的音量和/或频率。
67.第一音频数据包括音量和/或频率。补偿值包括但不限于补偿音量值和/或补偿频率值。通过调整音量，可以获得不同的声音响度；通过调整频率，可以获得具有不同高频或低频音质的声音。用户状况信息改变时，可以同时调整响度和音频，既保证了输出的待播放音频的清晰度，也有利于提高音质。
68.补偿曲线包括：用户状况信息补偿曲线及播放状态补偿曲线。非限制地，用户状况信息补偿曲线可以通过采集用户使用终端音频模组的数据，制作的用户状况信息-频率-响度曲线。例如：统计一段时间中，用户的听力数据汇整归纳后得到的用户状况信息-频率-响度曲线。同样地，补偿曲线也可以是通过采集用户使用终端音频模组的数据，制作的播放状态-频率-响度曲线。
69.在其他一些可选实施例中，所述基于所述补偿曲线对所述第一音频数据进行调整，输出调整后得到的第二音频数据，包括：
70.若所述终端处于第一播放状态，则根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据，所述第一播放状态包括通过所述终端包含的音频模组输出所述待播放音频的状态；
71.若所述终端处于第二播放状态，则根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据，所述第二播放状态包括通过与所述终端连接播放设备输出所述待播放音频的状态。
72.第一播放状态时，终端通过自身的音频模组输出音频。以音量的调节为例：若用户与终端距离较近，终端的音频传播到用户耳朵的距离也较小，音频衰减较少，即使音量较小也能够获得清晰的播放效果。若用户与终端距离较远，终端的音频需要较远的距离才能传输至用户耳朵，音频衰减较多，需要更大的音量才能获得清晰的播放效果，此时，可以增大音量。
73.可以理解的是，第一播放状态时，根据终端与用户之间的距离，还可以进行频率的调整。例如：终端与用户之间的距离较近时，可以降低第一音频数据的频率，在较低频率下输出待播放音频，获得更具节奏感的音质。终端与用户之间的距离较远时，可以提高第一音频数据的频率，在较高频率下输出待播放音频，获得更具震撼力的音质。
74.第一播放状态可以是手持播放状态或免提播放状态。手持状态时，用户与终端距离较近，需要较低的音量；免提状态时，用户与终端距离较远，需要较高的音量。
75.播放设备包括但不限于耳机、音箱或电视等具有音频模组的外接设备。终端与播放设备连接时，可通过播放设备输出音频。不同播放设备对音量的需求不同，因此根据播放设备的类型调整第一音频数据，有利于提高播放效果。
76.在其他一些可选实施例中，所述若所述终端处于第一播放状态，根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据得到第二音频数据，包括：
77.根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，确定所述第二音频数据的音量；其中，所述第二音频数据的音量与所述距离呈正相关关系。
78.终端和用户之间的距离越大，音量越大；反之，终端和用户之间的距离越小，音量
越小。
79.在其他一些可选实施例中，所述若所述终端处于第二播放状态，根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据，包括：
80.在所述播放设备为第一类型时，确定所述第二音频数据的音量为第一音量；
81.在所述播放设备为第二类型时，确定所述第二音频数据的音量为第二音量；其中，所述第一类型的播放设备为内放设备，所述第二类型的播放设备为外放设备，所述第二音量大于所述第一音量。
82.内放设备一般为贴近用户耳朵的设备。与内放设备连接时，终端往往会以耳机模式输出音频。内放设备包括但不限于：耳机或助听器。
83.外放设备一般为远离用户耳朵的设备。与外放设备连接时，终端往往会以非耳机模式或免提模式输出音频。外放设备包括但不限于：音箱、电视或电脑等。
84.在其他一些可选实施例中，所述与用户个人听力状况关联的用户状况信息包括以下至少之一：用户年龄、听力能力信息、睡眠状况信息，或，在不同光照强度下所述用户的听力偏好。
85.用户年龄不同，对不同频率的声音，或对不同音量的声音感受不同。例如：年龄较大的用户需要增加较多的第一音频数据的音量，相对而言，年龄较小的用户可以不增加或少量增加第一音频数据的音量。
86.听力能力信息包括但不限于：用户的可听频率范围和/或可听音量范围，其中，“可听”指能够听清音频内容。相同年龄的用户也可能对同一频率的声音感受也不同，造成听力能力不同。
87.睡眠状况信息包括开始睡眠的时间和/或睡眠时长等。在睡眠时间内，用户对环境的音量感知较差，为了达到提醒用户的效果，可以增加第一音频数据的音量。在睡眠时段外，用户保持清醒可能对声音的敏感度更高一些。
88.在一些实施例中，睡眠状况信息还可以是睡眠质量信息，若用户具有高质量的睡眠时间，则听力敏锐；若用户的睡眠质量差，则可能对音频输出的音量和音色相对于具有高质量睡眠的要求是不同的。
89.不同环境光线强度下，用户对频率和/或音量大小的需求不同。例如：早晨，环境光线强度较弱，可能低沉音质更受用户喜欢，此时需要降低第一音频数据的音频。中午光线强度较强时，可能较高音量更受用户喜欢，此时需要提高第一音频数据的音量。
90.在其他一些可选实施例中，所述方法还包括：
91.获取所述用户状况信息的更新状态；
92.响应于所述用户状况信息有更新，根据更新后的所述用户状况信息，更新所述补偿曲线。
93.更新状态包括以下至少之一：用户年龄的变化、用户睡眠状态信息的变化，或，在不同光照强度下所述用户的听力偏好变化。
94.更新补偿曲线进一步提升了对第一音频数据调整的准确性和智能性。
95.在补偿曲线的初始建立阶段，可以采集一端时间的用户状况信息和对终端的音频输出的播放参数之间的对应关系数据，基于该对应关系数据建立的初始的补偿曲线。在建立好初始的补偿曲线之后，可以定期或不定期采集终端用户状况信息，确定出用户状态变
化，这种变化可以由更新状态指示，后续可以根据更新状态，更新补偿曲线，使得终端当前应用内的曲线，是与用户的当前状况相适配的。
96.如图2所示，在一具体示例中，终端为手机，音频数据处理方法包括：
97.步骤s210、制定人耳的标准听力曲线。
98.步骤s220、拟合出不同环境噪声中满足清晰度要求的噪音补偿曲线。根据噪音补偿曲线和标准听力曲线得到第一音频数据。
99.步骤s230、根据不同年龄定义出年龄补偿曲线；拟合出真实场景中，生活中常见环境光线强度下，用户听力偏好曲线；在实际应用中，还可以结合年龄补偿曲线、用户听力偏好曲线及用户的听力能力信息、睡眠状况信息等，拟合形成用户状况信息补偿曲线。
100.步骤s240、拟合出手机不同播放状态(例如：手持播放状态、免提播放状态、或耳机播放状态)下的听力状况，得到播放状态补偿曲线。
101.步骤s250、综合用户状况信息补偿曲线和播放状态补偿曲线，调整第一音频数据得到第二音频数据。使待播放音频具有更舒适、更清晰度的下行音色(即输出音色)。
102.步骤s260、若用户状况信息有更新，根据更新后的所述用户状况信息，更新用户个人情况补偿曲线和/或播放状态补偿曲线。这种更新补偿曲线的方式，使本方法具备自主学习的功能。能够根据用户的使用习惯，如睡眠时间、年龄的变化或听力的变化，自动进行调整。
103.如图3所示，本公开实施例还提供了一种音频数据处理装置500，包括：
104.确定模块510，用于基于预设听力曲线，确定待播放音频对应的初始音频数据；
105.第一调整模块520，用于结合当前环境噪音，将所述初始音频数据调整为第一音频数据；
106.获取模块530，用于获取与用户个人听力状况关联的用户状况信息和终端的播放状态中至少之一对应的补偿曲线；
107.第二调整模块540，用于基于所述补偿曲线对调整所述第一音频数据进行调整，输出调整后得到的第二音频数据。
108.在其他一些可选实施例中，所述第二调整模块，用于：
109.根据所述用户状况信息和/或所述播放状态，确定所述补偿曲线中对应的补偿值；
110.根据所述补偿值，调整所述第一音频数据的音量和/或频率。
111.在其他一些可选实施例中，所述第二调整模块，用于：
112.若所述终端处于第一播放状态，则根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，调整所述第一音频数据，所述第一播放状态包括通过所述终端包含的音频模组输出所述待播放音频的状态；
113.若所述终端处于第二播放状态，则根据所述播放设备的类型在所述补偿曲线中对应的第二补偿值，调整所述第一音频数据，所述第二播放状态包括通过与所述终端连接播放设备输出所述待播放音频的状态。
114.在其他一些可选实施例中，所述第二调整模块，用于：
115.根据所述终端与所述用户之间的距离在所述补偿曲线中对应的第一补偿值，确定所述第二音频数据的音量；其中，所述第二音频数据的音量与所述距离呈正相关关系。
116.在其他一些可选实施例中，所述第二调整模块，用于：
117.在所述播放设备为第一类型时，确定所述第二音频数据的音量为第一音量；
118.在所述播放设备为第二类型时，确定所述第二音频数据的音量为第二音量；其中，所述第一类型的播放设备为内放设备，所述第二类型的播放设备为外放设备，所述第二音量大于所述第一音量。
119.在其他一些可选实施例中，所述与用户个人听力状况关联的用户状况信息包括以下至少之一：
120.用户年龄、听力能力信息、睡眠状况信息，或，在不同光照强度下所述用户的听力偏好。
121.在其他一些可选实施例中，所述装置还包括：
122.更新模块，用于获取所述用户状况信息的更新状态；
123.响应于所述用户状况信息有更新，根据更新后的所述用户状况信息，更新所述补偿曲线。
124.本公开实施例还提供了一种终端，包括处理器、存储器及存储在存储器上并能够由所述处理器运行的可执行程序，其特征在于，所述处理器运行所述可执行程序时执行如上述任一实施例所述音频数据处理方法的步骤。
125.本公开实施例还提供了一种存储介质，其上存储有可执行程序，其特征在于，所述可执行程序被处理器执行时实现如上述任一实施例所述音频数据处理方法的步骤。
126.关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
127.在示例性实施例中，确定模块、第一调整模块、获取模块、第二调整模块和更新模块等可以被一个或多个中央处理器(cpu，central processing unit)、图形处理器(gpu，graphics processing unit)、基带处理器(bp，baseband processor)、应用专用集成电路(asic，application specific integrated circuit)、dsp、可编程逻辑器件(pld，programmable logic device)、复杂可编程逻辑器件(cpld，complex programmable logic device)、现场可编程门阵列(fpga，field-programmable gate array)、通用处理器、控制器、微控制器(mcu，micro controller unit)、微处理器(microprocessor)、或其他电子元件实现，用于执行前述方法。
128.图4是根据一示例性实施例示出的一种用音频数据处理装置800的框图。例如，装置800可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
129.参照图4，装置800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(i/o)的接口812，传感器组件814，以及通信组件816。
130.处理组件802通常控制装置800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。
131.存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示
例包括用于在装置800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。
132.电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统，一个或多个电源，及其他与为装置800生成、管理和分配电力相关联的组件。
133.多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(lcd)和触摸面板(tp)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
134.音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(mic)，当装置800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。
135.i/o接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
136.传感器组件814包括一个或多个传感器，用于为装置800提供各个方面的状态评估。例如，传感器组件814可以检测到装置800的打开/关闭状态，组件的相对定位，例如所述组件为装置800的显示器和小键盘，传感器组件814还可以检测装置800或装置800一个组件的位置改变，用户与装置800接触的存在或不存在，装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如cmos或ccd图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
137.通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络，如wifi，4g或5g，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(nfc)模块，以促进短程通信。例如，在nfc模块可基于射频识别(rfid)技术，红外数据协会(irda)技术，超宽带(uwb)技术，蓝牙(bt)技术和其他技术来实现。
138.在示例性实施例中，装置800可以被一个或多个应用专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
139.在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由装置800的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。
140.本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本技术旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
141.应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。