基于深度学习的隧道裂缝变化趋势预测方法、装置及应用与流程

1.本技术涉及深度学习领域，特别是涉及一种基于深度学习的隧道裂缝变化趋势预测方法、装置及应用。


背景技术：

2.近年来，随着科技不断发展和经济水平的不断提高，越来越多的隧道被建造，隧道的规模也不断地扩大。隧道的建设打通了原先无法通行的道路，极大程度地提高了人们的生活质量，但是隧道的安全问题也不容小觑。在实际生活中，由于车辆的震动、天气原因以及自然灾害等问题，隧道墙壁可能出现大大小小的裂缝，绝大部分裂缝是在安全阈值内的，可以不加处理，但有极少部分裂缝可能会引起不必要的危害，因此隧道裂缝的检测极其重要。
3.传统的隧道裂缝检测是由人工去检测的，而隧道一般长度较长且隧道内车辆的行驶速度较大，隧道内驾驶员的视线不佳，进而导致人工检测容易耗费巨大的人力和时间，并且人工对裂缝的判断也有主观性，例如经验少的人和经验丰富的人判断裂缝的损害程度是不一样的，并且人工检测还会偶然性。现有技术也存在利用深度学习技术对隧道裂缝进行检测的检测模型和算法，但是其无法很好地区分相邻区域的隧道裂缝，也无法对隧道裂缝的变化区域进行预测。


技术实现要素：

4.本技术实施例提供了一种基于深度学习的隧道裂缝变化趋势预测方法、装置及应用，旨在利用深度学习、机器视觉、图像处理等技术对隧道裂缝进行高效率检测，并可通过多次检测的裂缝数据对隧道裂缝未来趋势进行预测，减轻检测任务的负担，提高检测的准确性。
5.第一方面，本技术实施例提供了一种基于深度学习的隧道裂缝变化趋势预测方法，所述方法包括：获取同一隧道内的对应第一时段的至少一第一裂缝区域，所述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区域，其中所述第二裂缝区域内含有第二裂缝；若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值，则所述第一裂缝和所述第二裂缝组成对应该位置的裂缝组；比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值，若变化值处于安全变化阈值内，则获取所述裂缝组内每一裂缝的裂缝特征信息及对应的获取时间点并组成测试特征向量集合，将所述测试特征向量集合输入经训练后的裂缝变化趋势模型中得到预测值，若预测值大于设定的安全趋势阈值，则所述裂缝组对应的裂缝未来趋势不安全，其中所述经训练后的裂缝变化趋势模型通过调整裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量反复迭代至误差最小获得。
6.第二方面，本技术实施例提供了一种基于深度学习的隧道裂缝变化趋势预测装置，包括：裂缝获取单元，用于获取同一隧道内的对应第一时段的至少一第一裂缝区域，所
述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区域，其中所述第二裂缝区域内含有第二裂缝；相似度比对单元，用于比对所述第一裂缝和所述第二裂缝，若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值，则所述第一裂缝和所述第二裂缝组成对应该位置的裂缝组；变化比对单元，用于比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值，若变化值处于安全变化阈值内，则获取所述裂缝组内每一裂缝的裂缝特征信息及对应的获取时间点并组成测试特征向量集合，将所述测试特征向量集合输入经训练后的裂缝变化趋势模型中得到预测值，若预测值大于设定的安全趋势阈值，则所述裂缝组对应的裂缝未来趋势不安全，其中所述经训练后的裂缝变化趋势模型通过调整裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量反复迭代至误差最小获得。
7.第三方面， 本技术实施例提供了一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述的基于深度学习的隧道裂缝变化趋势预测方法。
8.第四方面，本技术实施例提供了一种计算机程序产品，包括软件代码部分，当所述计算机程序产品在计算机上被运行时，所述软件代码部分用于执行所述的基于深度学习的隧道裂缝变化趋势预测方法。
9.第五方面，本技术实施例提供了一种可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序包括用于控制过程以执行过程的程序代码，所述过程包括所述的基于深度学习的隧道裂缝变化趋势预测方法。
10.本发明的主要贡献和创新点如下：通过裂缝检测模型对隧道裂缝进行检测，且通过裂缝区域的重复筛查来去除重复区域，以提高裂缝识别的准确度；且本方案通过对同一位置的多个裂缝进行分析来预测裂缝变化趋势，本方案通过提前预筛裂缝的方式也可减少后续预测变化趋势的计算量以及提高预测准确度，本方案可适用于不同隧道的裂缝检测以及裂缝变化趋势预测。
11.本技术的一个或多个实施例的细节在以下附图和描述中提出，以使本技术的其他特征、目的和优点更加简明易懂。
附图说明
12.此处所说明的附图用来提供对本技术的进一步理解，构成本技术的一部分，本技术的示意性实施例及其说明用于解释本技术，并不构成对本技术的不当限定。在附图中：图1是根据本技术实施例的基于深度学习的隧道裂缝变化趋势预测方法的流程图；图2是根据本技术一实施例的基于深度学习的隧道裂缝变化趋势预测方法的逻辑流程图；图3是根据本技术一实施例的隧道裂缝检测卷积神经网络的结构图图4是根据本技术一实施例的隧道裂缝变化趋势预测神经网络的lstm模型结构图。
13.图5是根据本技术实施例的一种基于深度学习的隧道裂缝变化趋势预测装置的结构框图；
图6是根据本技术实施例的电子装置的硬件结构示意图。
具体实施方式
14.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书一个或多个实施例相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书一个或多个实施例的一些方面相一致的装置和方法的例子。
15.需要说明的是：在其他实施例中并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中，其方法所包括的步骤可以比本说明书所描述的更多或更少。此外，本说明书中所描述的单个步骤，在其他实施例中可能被分解为多个步骤进行描述；而本说明书中所描述的多个步骤，在其他实施例中也可能被合并为单个步骤进行描述。
16.实施例一本技术旨在提出一种基于深度学习的隧道裂缝变化趋势预测方法、装置及应用，该基于深度学习的隧道裂缝变化趋势预测方法利用深度学习方法对隧道的裂缝进行精准的预测，同时利用多个裂缝预测裂缝变化趋势，可协助管理人员提前预警存在较大风险的隧道裂缝，通过提早预防的手段提高隧道的行驶安全性。
17.本技术实施例提供了一种基于深度学习的隧道裂缝变化趋势预测方法，具体地，参考图1，所述方法包括：获取同一隧道内的对应第一时段的至少一第一裂缝区域，所述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区域，其中所述第二裂缝区域内含有第二裂缝；若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值，则所述第一裂缝和所述第二裂缝组成对应该位置的裂缝组；比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值，若变化值处于安全变化阈值内，则获取所述裂缝组内每一裂缝的裂缝特征信息及对应的获取时间点，组成测试特征向量集合，将所述测试特征向量集合输入经训练后的裂缝变化趋势模型中得到预测值，若预测值大于设定的安全趋势阈值，则所述裂缝组对应的裂缝未来趋势不安全，其中所述经训练后的裂缝变化趋势模型通过调整裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量反复迭代至误差最小获得。
18.在一些实施例中，所述裂缝变化趋势模型的结构如图4所示。所述裂缝变化趋势模型可采用lstm模型。lstm模型的结构与rnn模型类型，不同之处在于lstm模型中重复单元具有不同的结构，可以凭借神经元对长时间跨度的时间序列保持良好的记忆，lstm模型网络中增加了遗忘门、输入门、输出门。lstm模型向前传播时遗忘门用来确定需要丢弃哪些信息，输入门确定更新哪些信息到单元中，最后输出门决定输出哪些信息。每个门都是一个单层神经网络，其参数通过模型训练学习确定，这些参数表示了遗忘、输入或输出的执行程度。
19.所述裂缝变化趋势模型的训练方法如下：
训练样本的选取；选择同一隧道的同一位置的不同时间点的多个裂缝图像，提取每个裂缝图像中裂缝特征信息，将多个裂缝图像的所述裂缝特征信息和对应的时间点构成训练特征向量集合，作为训练样本；所述训练样本输入裂缝变化趋势模型中，训练裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量，反复迭代至误差最小。
20.也就是说，所述裂缝变化趋势模型通过多个标记的裂缝图像的训练特征向量集合训练得到，每个训练特征向量集合为裂缝图像的裂缝特征信息和对应的时间点组成。
21.在本方案的实施例中，安全趋势阈值根据实际需求被设定。
22.所述裂缝的裂缝特征信息包括；裂缝的像素面积、最小宽度、最大宽度、最小外接矩形的长宽比、最小外界矩形面积与像素面积的比值。值得一提的是，训练裂缝变化趋势模型时获取的裂缝特征信息同于测试时获取的裂缝特征信息。
23.在“比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值”步骤中，获取所述第一裂缝并进行边缘检测得到仅含有第一裂缝像素点的第一二值化图，获取所述第二裂缝并进行边缘检测得到仅含有第二裂缝像素点的第二二值化图，比对所述第一二值化图和所述第二二值化图的像素点面积。
24.值得一提的是，当所述第一裂缝和所述第二裂缝的变化值大于设定的安全变化阈值，则直接提示维修人员进行人工维护。仅当所述变化值在所述安全变化阈值之内时，将所述裂缝组输入裂缝变化趋势模型中进行趋势判断。这样做的好处在于：当所述裂缝组内的裂缝的变化值已经大于安全变化阈值时，则代表此时该阈值是亟待维修的，而变化值小于安全变化阈值时还需要进行进一步判断是否未来会有安全，可在减少模型计算量的基础上保证不漏检。
25.另外，在“比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值”步骤中，至少比对前后两获取时间的所述第二裂缝和/或所述第一裂缝，优选地，比对所述裂缝组内最后获取时间点及相邻时间点的裂缝的变化值。即，在一些情况下可不需要检测所有的裂缝组也可判断裂缝的变化值。
26.在“若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值”步骤中，获取所述第一裂缝的第一裂缝特征向量，以及所述第二裂缝的第二裂缝特征向量，比对所述第一裂缝特征向量以及所述第二裂缝特征向量的夹角余弦值作为相似度。本方案通过相似度的比对可将裂缝检测模型误检的裂缝进行去除，以减少后续裂缝变化趋势的计算量且提高预测精准度。
27.在“获取同一隧道内的对应第一时段的至少一第一裂缝区域，所述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区域，其中所述第二裂缝区域内含有第二裂缝”步骤中，本方案通过裂缝检测模型进行裂缝的检测。具体的，将含有所述隧道的裂缝的视频图像输入裂缝检测模型中进行检测，得到所述第一裂缝区域或第二裂缝区域。
28.在一些实施例中，受限于隧道测试的环境限制，本方案通过在测试车辆的顶部安设摄像头来实时记录隧道天花板墙壁画面，所述隧道天花板墙壁画面作为视频画面属于裂缝检测模型中进行检测。本方案优选隧道天花板墙壁画面作为视频画面是考虑到隧道的裂缝多发于天花板所在位置，且天花板位置的裂缝也是最致命的。
29.所述裂缝检测模型的结构图如图3所示，所述裂缝检测模型的网路结构包括依次连接的输入层、卷积层、池化层以及输出层，卷积层和池化层重复堆叠构成深度卷积神经网络，全连接层的每个神经元和前一层的所有神经元连接以整合卷积层提取的局部特征。
30.具体的，本方案提供的裂缝检测模型包括24个卷积层、4个池化层以及2个全连接层，其中池化层采用最大池化法则，四个池化层的池化窗口大小均为2
×
2，步长为2。
31.所述裂缝检测模型的训练方法如下：获取拍摄有隧道裂缝的视频图像，标注视频图像中裂缝的位置信息，对视频图像进行数量增强，得到训练样本。
32.在一些实施例中，可对视频图像利用缩放、平移、翻转、旋转等操作来增加数据量。同时还可截图视频图像中裂缝图像，将裂缝图像黏贴在隧道墙壁上来增加数据量。
33.将训练样本输入上面所述的裂缝检测模型网络架构中进行训练，在训练过程中首先将训练样本缩放到固定尺寸的图像作为输入图像，将所述输入图像划分7*7个栅格，每个栅格负责检测中心落在栅格区域内的物体，每个栅格预测边界框，获取预测边界框的预测值并通过非极大值抑制算法从输出结果中提取最有可能的对象和其对应的边界框。
34.对网络参数赋初始化数值，设置网络的最大迭代次数m；将准备好的数据集输入网络，进行训练。如果loss值一直下降，则继续训练，直到迭代m次后，得到最终的模型；如果loss值在中途趋于稳定，则停止迭代，得到最终的模型。
35.具体的，在“将含有裂缝的视频图像输入裂缝检测模型中进行检测，得到所述第一裂缝区域或第二裂缝区域”步骤中，将含有所述隧道的裂缝的视频图像输入裂缝检测模型中进行检测，输出边框及边框内裂缝的置信度，若置信度大于设定值则确定为第一裂缝区域或第二裂缝区域。
36.而同一隧道内往往有多处裂缝，为了更好地区分不同位置的第一裂缝，本方案可对不同裂缝区域进行编号，将检测到的不同位置的所述第一裂缝归类于不同裂缝区域。同一裂缝区域内设有一个裂缝或者多个裂缝。另外，在一些实施例中由于行驶速度及摄像机照射区域大小的原因，可能会出现将同一块裂缝区域进行多次标注，因此需要重复区域进行去重。
37.在“获取同一隧道内的对应第一时段的至少一第一裂缝区域”步骤中，将对应第一时段的视频图像输入裂缝检测模型中获取所述第一裂缝区域，将距离小于设定距离阈值的两所述第一裂缝区域对应的区域图像二值化并获取每一所述区域图像的裂缝信息，获取两所述第一裂缝区域的时间间隔，以及两所述第一裂缝区域对应的所述裂缝信息的区域相似度，基于所述区域相似度以及所述时间间隔判断重复区域，若为重复区域则剔除其中一个所述第一裂缝区域。
38.在“获取同一隧道内的对应第二时段的至少一第二裂缝区域”步骤中，将对应第二时段的视频图像输入裂缝检测模型中获取所述第二裂缝区域，将距离小于设定距离阈值的两所述第二裂缝区域对应的区域图像二值化并获取每一所述区域图像的裂缝信息，获取两所述第二裂缝区域的时间间隔，以及两所述第二裂缝区域对应的所述裂缝信息的区域相似度，基于所述区域相似度以及所述时间间隔判断重复区域，若为重复区域则剔除其中一个所述第二裂缝区域。
39.具体的，距离小于设定距离阈值的两所述第一裂缝区域或第二裂缝区域根据获取
时间的前后分为前裂缝区域和后裂缝区域，若所述裂缝区域为重复区域，则剔除所述后裂缝区域。其中距离阈值为人为设定的值。
40.在“基于所述区域相似度以及所述时间间隔判断重复区域”步骤中，若同时满足所述区域相似度大于裂缝相似度阈值，且所述时间间隔小于时间阈值，则判断为重复区域。
41.具体的公式如下：p(s》u)
·
p(t《δt)=1其中s为区域相似度，u是裂缝相似度阈值，t为时间间隔，δt是时间阈值，p函数内的表达式为真，则输出值为1，反之为0。若上述等式成立，则后一次检测的裂缝区域为重复区域，不需要对后一次检测区域进行相关记录操作。
42.另外，在“获取每一所述区域图像的裂缝信息”步骤中，获取每一区域图像的连通区域的像素面积、占空比以及长宽比，其中占空比为像素面积与最小外接矩形的比值，剔除像素面积小于设定面积值的连通区域，占空比小于设定占空值的连通区域，以及长宽比均一的连通区域，得到裂缝信息。
43.也就是说，本方案可以通过连通区域像素面积的大小来将面积小的连通区域给去除掉，并且由于裂缝大部分都不是直线型，因此占空比不会很大，从而可以将占空比和长宽比来去掉非裂缝像素并且不会去除直线裂缝。
44.值得说明的是，本方案的第一时段不同于第二时段，且在实施过程中可检测多个时刻的隧道裂缝。
45.在一些实施例中，可对多个隧道进行检测。具体的，在一些实施例中，在首次测量时由检测人员乘载检测车辆在进入待测隧道ci的入口时记录gps中的定位数据并存入隧道数据库dc中，并开启检测装置驾驶车辆行驶在待测隧道ci中；行驶中通过车位上方的监控摄像头实时记录下隧道上方墙壁画面，并通过裂缝检测算法实时对视频图像进行分析，并对裂缝区域进行id编号，例如，其中表示的是t时间检测时隧道ci中的编号为xn的裂缝数据。随后将裂缝数据存入隧道裂缝数据库中。在检测车辆从待测隧道ci出口驶出时，再一次读取gps中的定位数据，并将和裂缝数据库存入隧道数据库中的中ci隧道下，后续不同时间t来检测隧道ci时，当gps识别到定位数据或便自动开启检测车辆中的检测设备对隧道再一次检测,并将检测到的裂缝数据添加到隧道裂缝数据库中。
46.通过本方案的基于深度学习的隧道裂缝变化趋势预测方法，可实现对隧道裂缝的检测，基于获取的多张裂缝来预测裂缝的变化情况，以预测未来变化趋势；且可通过对裂缝区域进行筛查来提高裂缝检测的准确度。
47.实施例二基于相同的构思，参考图5，本技术还提出了一种隧道裂缝变化趋势预测装置，包括：裂缝获取单元301，用于获取同一隧道内的对应第一时段的至少一第一裂缝区域，所述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区
域，其中所述第二裂缝区域内含有第二裂缝；相似度比对单元302，用于比对所述第一裂缝和所述第二裂缝，若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值，则所述第一裂缝和所述第二裂缝组成对应该位置的裂缝组；变化比对单元303，用于比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值，若变化值处于安全变化阈值内，则获取所述裂缝组内每一裂缝的裂缝特征信息及对应的获取时间点，组成测试特征向量集合，将所述测试特征向量集合输入经训练后的裂缝变化趋势模型中得到预测值，若预测值大于设定的安全趋势阈值，则所述裂缝组对应的裂缝未来趋势不安全，其中所述经训练后的裂缝变化趋势模型通过调整裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量反复迭代至误差最小获得。
48.关于该实施例中提到的技术特征内容同于实施例一提及的技术内容，重复内容在此不进行累赘说明。
49.实施例三本实施例还提供了一种电子装置，参考图6，包括存储器404和处理器402，该存储器404中存储有计算机程序，该处理器402被设置为运行计算机程序以执行上述任一项基于深度学习的隧道裂缝变化趋势预测方法实施例中的步骤。
50.具体地，上述处理器402可以包括中央处理器（cpu），或者特定集成电路（applicationspecificintegratedcircuit，简称为asic），或者可以被配置成实施本技术实施例的一个或多个集成电路。
51.其中，存储器404可以包括用于数据或指令的大容量存储器404。举例来说而非限制，存储器404可包括硬盘驱动器（harddiskdrive，简称为hdd）、软盘驱动器、固态驱动器（solidstatedrive，简称为ssd）、闪存、光盘、磁光盘、磁带或通用串行总线（universalserialbus，简称为usb）驱动器或者两个或更多个以上这些的组合。在合适的情况下，存储器404可包括可移除或不可移除（或固定）的介质。在合适的情况下，存储器404可在数据处理装置的内部或外部。在特定实施例中，存储器404是非易失性（non-volatile）存储器。在特定实施例中，存储器404包括只读存储器（read-onlymemory，简称为rom）和随机存取存储器（randomaccessmemory，简称为ram）。在合适的情况下，该rom可以是掩模编程的rom、可编程rom（programmableread-onlymemory，简称为prom）、可擦除prom（erasableprogrammableread-onlymemory，简称为eprom）、电可擦除prom（electricallyerasableprogrammableread-onlymemory，简称为eeprom）、电可改写rom（electricallyalterableread-onlymemory，简称为earom）或闪存（flash）或者两个或更多个以上这些的组合。在合适的情况下，该ram可以是静态随机存取存储器（staticrandom-accessmemory，简称为sram）或动态随机存取存储器（dynamicrandomaccessmemory，简称为dram），其中，dram可以是快速页模式动态随机存取存储器404（fastpagemodedynamicrandomaccessmemory，简称为fpmdram）、扩展数据输出动态随机存取存储器（extendeddateoutdynamicrandomaccessmemory，简称为edodram）、同步动态随机存取内存（synchronousdynamicrandom-accessmemory，简称sdram）等。
52.存储器404可以用来存储或者缓存需要处理和/或通信使用的各种数据文件，以及处理器402所执行的可能的计算机程序指令。
53.处理器402通过读取并执行存储器404中存储的计算机程序指令，以实现上述实施例中的任意一种基于深度学习的隧道裂缝变化趋势预测方法。
54.可选地，上述电子装置还可以包括传输设备406以及输入输出设备408，其中，该传输设备406和上述处理器402连接，该输入输出设备408和上述处理器402连接。
55.传输设备406可以用来经由一个网络接收或者发送数据。上述的网络具体实例可包括电子装置的通信供应商提供的有线或无线网络。在一个实例中，传输设备包括一个网络适配器（network interface controller，简称为nic），其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输设备406可以为射频（radio frequency，简称为rf）模块，其用于通过无线方式与互联网进行通讯。
56.输入输出设备408用于输入或输出信息。在本实施例中，输入的信息可以是隧道的视频图像等，输出的信息可以是裂缝位置、裂缝变化趋势预测值等。
57.可选地，在本实施例中，上述处理器402可以被设置为通过计算机程序执行以下步骤：s101、获取同一隧道内的对应第一时段的至少一第一裂缝区域，所述第一裂缝区域内含有第一裂缝；获取同一隧道内的对应第二时段的至少一第二裂缝区域，其中所述第二裂缝区域内含有第二裂缝；s102、若位于相同位置的所述第一裂缝和所述第二裂缝的相似度大于设定阈值，则所述第一裂缝和所述第二裂缝组成对应该位置的裂缝组；s103、比对所述裂缝组内所述第一裂缝和所述第二裂缝的变化值，若变化值处于安全变化阈值内，则获取所述裂缝组内每一裂缝的裂缝特征信息及对应的获取时间点，组成测试特征向量集合，将所述测试特征向量集合输入经训练后的裂缝变化趋势模型中得到预测值，若预测值大于设定的安全趋势阈值，则所述裂缝组对应的裂缝未来趋势不安全，其中所述经训练后的裂缝变化趋势模型通过调整裂缝变化趋势模型中的σ层、tanh层的参数以及神经模块的数量反复迭代至误差最小获得。
58.需要说明的是，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
59.通常，各种实施例可以以硬件或专用电路、软件、逻辑或其任何组合来实现。本发明的一些方面可以以硬件来实现，而其他方面可以以可以由控制器、微处理器或其他计算设备执行的固件或软件来实现，但是本发明不限于此。尽管本发明的各个方面可以被示出和描述为框图、流程图或使用一些其他图形表示，但是应当理解，作为非限制性示例，本文中描述的这些框、装置、系统、技术或方法可以以硬件、软件、固件、专用电路或逻辑、通用硬件或控制器或其他计算设备或其某种组合来实现。
60.本发明的实施例可以由计算机软件来实现，该计算机软件由移动设备的数据处理器诸如在处理器实体中可执行，或者由硬件来实现，或者由软件和硬件的组合来实现。包括软件例程、小程序和/或宏的计算机软件或程序(也称为程序产品)可以存储在任何装置可读数据存储介质中，并且它们包括用于执行特定任务的程序指令。计算机程序产品可以包括当程序运行时被配置为执行实施例的一个或多个计算机可执行组件。一个或多个计算机可执行组件可以是至少一个软件代码或其一部分。另外，在这一点上，应当注意，如图中的逻辑流程的任何框可以表示程序步骤、或者互连的逻辑电路、框和功能、或者程序步骤和逻
辑电路、框和功能的组合。软件可以存储在诸如存储器芯片或在处理器内实现的存储块等物理介质、诸如硬盘或软盘等磁性介质、以及诸如例如dvd及其数据变体、cd等光学介质上。物理介质是非瞬态介质。
61.本领域的技术人员应该明白，以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
62.以上实施例仅表达了本技术的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本技术范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本技术构思的前提下，还可以做出若干变形和改进，这些都属于本技术的保护范围。因此，本技术的保护范围应以所附权利要求为准。