一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种视频卡顿预测方法、装置、设备和介质与流程

2022-04-27 07:45:23 来源:中国专利 TAG:


1.本公开实施例涉及互联网技术,尤其涉及一种视频卡顿预测方法、装置、设备和介质。


背景技术:

2.随着互联网技术的快速发展,越来越多的用户喜欢在客户端上观看直播视频或者点播视频。在视频播放过程中,往往由于视频下载速度较慢而导致出现视频卡顿的情况,严重影响了用户观看体验。目前,可以在视频播放后,可以基于观看视频过程中是否出现卡顿的结果对视频进行相应处理,提高视频的传输速度和稳定性。可见,这种方式只能在视频实际播放后才能获知视频卡顿结果,无法提前获知视频卡顿结果,从而无法有效保证视频播放流畅度,降低用户观看体验。


技术实现要素:

3.本公开实施例提供了一种视频卡顿预测方法、装置、设备和介质,以对当前待下载视频进行视频卡顿预测,从而可以提前获知视频卡顿结果,进而有效保证视频播放流畅度,提升用户观看体验。
4.第一方面,本公开实施例提供了一种视频卡顿预测方法,包括:
5.获取在播放当前已下载视频时的当前播放信息;
6.获取服务器的当前服务信息;
7.根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
8.第二方面,本公开实施例还提供了一种视频卡顿预测装置,包括:
9.当前播放信息获取模块,用于获取在播放当前已下载视频时的当前播放信息;
10.当前服务信息获取模块,用于获取服务器的当前服务信息;
11.卡顿预测模块,用于根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
12.第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:
13.一个或多个处理器;
14.存储器,用于存储一个或多个程序;
15.当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开任意实施例所提供的视频卡顿预测方法。
16.第四方面,本公开实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本公开任意实施例所提供的视频卡顿预测方法。
17.本公开实施例中通过获取在播放当前已下载视频时的当前播放信息以及服务器自身的当前服务信息,并根据预设卡顿预测模型、当前播放信息和当前服务信息,确定出在播放当前待下载视频时的卡顿预测结果,从而可以提前获知视频卡顿结果,进而有效保证
视频播放流畅度,提升用户观看体验。
附图说明
18.结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
19.图1是本公开实施例一提供的一种视频卡顿预测方法的流程图;
20.图2是本公开实施例一所涉及的一种视频卡顿预测过程的示例;
21.图3是本公开实施例一所涉及的一种预设卡顿预测网络模型的结构示例;
22.图4是本公开实施例二提供的一种视频卡顿预测方法的流程图;
23.图5是本公开实施例二所涉及的一种视频卡顿预测过程的示例;
24.图6是本公开实施例三提供的一种视频卡顿预测装置的结构示意图;
25.图7是本公开实施例四提供的一种电子设备的结构示意图。
具体实施方式
26.下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
27.应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
28.本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
29.需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
30.需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
31.本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
32.实施例一
33.图1为本公开实施例一提供的一种视频卡顿预测方法的流程图,本实施例可适用于对在播放当前待下载视频时是否出现播放卡顿进行提前预测的情况,尤其是可以用于对直播视频或者点播视频进行卡顿预测的应用场景中。该方法可以由视频卡顿预测装置来执行,该装置可以由软件和/或硬件的方式来实现,集成于客户端或者服务器中。如图1所示,该方法具体包括以下步骤:
34.s110、获取在播放当前已下载视频时的当前播放信息。
35.其中,当前已下载视频可以是指客户端当前正在播放的已下载视频。在直播场景或者点播场景中,可以将直播视频或者点播视频按时间进行分片处理,获得直播视频或者点播视频中的各个视频片段,使得客户端可以通过依次下载并播放各个视频片段的方式进行直播视频或点播视频的播放。例如,当前已下载视频可以是指客户端当前正在播放的已下载直播视频片段或者已下载点播视频片段。
36.其中,当前播放信息可以包括但不限于:当前网络信息、当前已缓存的视频长度和当前正在下载的视频信息。示例性地,当前网络信息可以包括但不限于:丢包率、当前带宽、最大带宽、最大网络延迟、最小网络延迟、当前往返时延、最小往返时延和最大往返时延;当前正在下载的视频信息可以包括但不限于:视频帧率、视频码率和视频数据大小。
37.具体地,客户端在播放当前已下载视频时,可以实时获取当前已下载视频对应的当前播放信息,以便进行视频卡顿的实时预测;也可以基于当前已缓存的视频长度设置相应的时间间隔,并基于该时间间隔定时获取当前已下载视频对应的当前播放信息,以便在保证视频播放流畅度的基础上降低卡顿预测次数,从而节省设备资源。若该方法应用于客户端,则客户端可以直接获得当前播放信息。若该方法应用于服务器,则客户端可以将获得的当前播放信息发送至服务器,以使服务器可以接收到客户端发送的当前播放信息。通过在服务器上基于客户端发送的当前播放信息进行视频卡顿预测操作,可以充分利用服务器资源,快速准确地对当前待下载视频进行视频卡顿预测,提高了预测准确性和预测效率。
38.s120、获取服务器的当前服务信息。
39.其中,当前服务信息可以是指当前服务器自身的可以影响视频下载速度的信息。例如,当前服务信息可以包括但不限于:服务器的当前负载量、cdn(content delivery network)内容分发网络厂商信息和cdn缓存的可下载视频量信息。其中,若cdn厂商信息与用户网络服务提供商信息相匹配,则会提高视频下载速度,否则会降低视频下载速度。cdn缓存的可下载视频量信息可以是指服务器的cdn节点中当前缓存的可下载直播视频片段长度或者可下载点播视频片段长度。
40.具体地,若该方法应用于客户端,则服务器可以将当前采集的当前服务信息发送至客户端,以使客户端可以接收到服务器发送的当前服务信息。若该方法应用于服务器,则服务器可以直接获取当前服务信息,以便基于当前服务信息进行卡顿预测。
41.s130、根据预设卡顿预测模型、当前播放信息和当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
42.其中,当前待下载视频可以是指客户端当前等待下载的视频。例如,当前待下载视频可以是指客户端当前等待下载的直播视频片段或者点播视频片段。卡顿预测结果可以包括:当前时刻后的预设时间段内是否出现卡顿或者出现卡顿的概率。预设时间段可以是预先基于业务需求设置的一个时间段,该预设时间段可以包括从当前时刻到待下载视频对应的播放时刻之间的时间段。卡顿预测结果还可以包括:卡顿预测时长,也就是在预设时间段内预测会出现卡顿的时间长度,以便满足不同的业务需求和场景。预设卡顿预测模型可以是预先设置的,用于预测后续播放当前待下载视频时是否出现视频卡顿的神经网络模型。本实施例中的预设卡顿预测模型可以是预先基于样本数据训练获得的。
43.具体地,可以将当前播放信息和当前服务信息输入至预先训练好的预设卡顿预测模型中进行视频卡顿的预测,并基于预设卡顿预测模型的输出,获得客户端在播放当前待
下载视频时的卡顿预测结果。预设卡顿预测模型可以同时基于当前播放信息和当前服务信息进行卡顿预测,从而可以进一步提高卡顿预测的准确性。
44.示例性地,s130可以包括:对当前播放信息进行预处理,获得目标播放信息,并对当前服务信息进行预处理,获得目标服务信息;将目标播放信息和目标服务信息输入至预设卡顿预测模型中进行卡顿预测,获得在播放当前待下载视频时的卡顿预测结果。
45.具体地,通过对当前播放信息和当前服务信息进行预处理,比如对当前播放信息和当前服务信息进行归一化、过滤无效信息等,从而可以获得统一的目标播放信息和目标服务信息,进而保证输入预设卡顿预测模型的信息统一性,进一步提高模型预测的准确性。
46.示例性地,对当前播放信息进行预处理,获得目标播放信息,可以包括:基于预设标准化模型,对当前播放信息进行数据标准化处理,获得目标播放信息。对当前服务信息进行预处理,获得目标服务信息,可以包括:基于预设标准化模型,对当前播放信息进行数据标准化处理,获得目标播放信息。
47.具体地,图2给出了一种视频卡顿预测过程的示例。如图2所示,可以利用预设标准化模型快速地对当前播放信息以及当前服务信息进行数据标准化处理,以便提高处理效率,并且保证输入信息的统一性。
48.其中,预设标准化模型定时基于最新预设时长内获取到的播放信息和服务信息进行参数更新。如图2所示,该方法应用于服务器中,服务器可以将客户端每次上报的当前播放信息和每次采集的当前服务信息存储至数据库中,从而可以利用当前最新存储的播放信息和服务信息,对预设标准化模型进行参数更新。例如,可以利用最新一日存储的播放信息和服务信息,对预设标准化模型中用于标准化处理每种信息的平均值和方差进行更新,从而可以进一步提高卡顿预测的准确性。
49.示例性地,本实施例可以定期收集一部分用户(即未进行卡顿预测的用户)的客户端上报的当前播放信息和采集服务器的当前服务信息,并存储至数据库中。这部分用户可以将实际播放待下载视频时是否出现卡顿的情况,即实际卡顿结果上报至服务器,服务器将实际卡顿结果存储至数据库中。如图2所示,本实施例可以基于最新预设时长内存储的播放信息和服务信息以及相应的实际卡顿结果,对预设卡顿预测网络模型进行权重更新,例如,可以利用最新一日或多日的播放信息和服务信息以及相应的实际卡顿结果对预设卡顿预测网络模型进行新一轮训练,以便进一步提高卡顿预测的准确性。
50.本公开实施例的技术方案,通过获取在播放当前已下载视频时的当前播放信息以及服务器自身的当前服务信息,并根据预设卡顿预测模型、当前播放信息和当前服务信息,确定出在播放当前待下载视频时的卡顿预测结果,从而可以提前获知视频卡顿结果,进而有效保证视频播放流畅度,提升用户观看体验。
51.在上述技术方案的基础上,预设卡顿预测网络模型可以包括:输出层和至少一个resnet残差网络;每个resnet残差网络包括:第一全连接层、第一激活层、第二全连接层和第二激活层;其中,第一全连接层的输出作为第一激活层的输入;第一激活层的输出作为第二全连接层的输入,第二全连接层的输出与第一全连接层的输入进行跳跃连接,跳跃连接后的相加结果作为第二激活层的输入。
52.其中,第一激活层和第二激活层所使用的激活函数可以为但不限于relu(rectified linear unit,修正线性单元)激活函数。输出层所使用的激活函数可以为但不
限于sigmoid函数。输出层输出的信息可以是出现卡顿的概率,当概率小于0.5时表示预测不会出现卡顿,当概率大于0.5时表示预测会出现卡顿。
53.具体地,图3给出了一种预设卡顿预测网络模型的结构示例。如图3所示,在预设卡顿预测网络模型包括两个resnet残差网络时的卡顿预测的精确率最高,从而可以优选由两个resnet残差网络组成的预设卡顿预测网络模型。示例性地,图3中的预设卡顿预测网络模型的预测过程为:将目标播放信息和目标服务信息输入至第一个resnet残差网络中的第一全连接层,获得第一全连接信息,将第一全连接信息输入至第一激活层,获得第一激活信息,将第一激活信息输入至第二全连接层,获得第二全连接信息,并将第二全连接信息与输入的目标播放信息和目标服务信息进行相加,将获得的相加结果输入至第二激活层中,获得第二激活信息。同理,将第一个resnet残差网络输出的第二激活信息输入至第二个resnet残差网络中进行类似处理,获得第二个resnet残差网络输出的信息,并将该信息输入至输出层中进行映射处理,获得最终输出的卡顿预测结果。
54.实施例二
55.图4为本公开实施例二提供的一种视频卡顿预测方法的流程图,本实施例在上述实施例一的基础上,对预测出现卡顿的待下载视频进行视频处理的过程进行详细描述。其中与上述各实施例相同或相应的术语的解释在此不再赘述。
56.参见图4,本实施例提供的视频卡顿预测方法具体包括以下步骤:
57.s410、获取在播放当前已下载视频时的当前播放信息。
58.s420、获取服务器的当前服务信息。
59.s430、根据预设卡顿预测模型、当前播放信息和当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
60.s440、若卡顿预测结果是:当前时刻后的预设时间段内出现卡顿,则基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理,以降低待下载视频对应的视频码率或者视频帧率。
61.其中,预设卡顿处理方式可以是预先设置的,用于降低服务器到客户端之间传输的视频数据量大小的方式,以避免不必要的视频卡顿,保证视频播放流畅度。预设卡顿处理方式可以包括多种方式。例如,预设卡顿处理方式可以是指降低视频码率的方式或者降低视频帧率的方式。
62.具体地,图5给出了一种视频卡顿预测过程的示例。如图5所示,服务器中的卡顿避免策略模型可以基于预设卡顿预测模型输出的卡顿预测结果进行相应的决策。例如,在卡顿预测结果是当前时刻后的预设时间段内出现卡顿时,可以确定出降低传输视频码率或者降低传输视频帧率的卡顿处理方式,使得直播/点播服务器基于该卡顿处理方式,对在预设时间段内需要下载的待下载视频进行视频处理,从而降低服务器到客户端之间传输的视频数据量大小,避免了不必要的视频卡顿,保证了视频播放流畅度,提升了用户体验。
63.示例性地,对预测出现卡顿的待下载视频的卡顿处理过程可以通过如下三种方式实现:
64.作为第一种实现方式,s440中的“基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理”可以包括:基于当前正在下载视频对应的第一视频码率,确定小于第一视频码率的第二视频码率;基于预先存储的每个视频码率下预设时间段对应的待下载
视频,确定出第二视频码率下预设时间段对应的目标待下载视频。
65.具体地,在点播场景中,可以针对点播视频中的每个点播视频片段,预先生成并存储有具有不同视频码率的各个待下载视频。在对待下载视频进行卡顿处理时,可以从现有的视频码率中选择一个小于当前下载的第一视频码率的视频码率作为第二视频码率,并从预先存储的各个待下载视频中,可以快速地获得第二视频码率下预设时间段对应的目标待下载视频,以使客户端下载目标待下载视频,从而提高卡顿处理效率,并且通过降低视频码率的方式降低了下载视频数据量,使得目标待下载视频可以更加快速地进行下载,避免了后续播放出现视频卡顿的情况。
66.作为第二种实现方式,s440中的“基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理”可以包括:对预设时间段对应的待下载视频进行视频帧抽取,获得抽取后的目标待下载视频。
67.具体地,在直播场景或点播场景中,可以对预设时间段对应的每个待下载视频进行视频帧抽取的方式,降低目标待下载视频的视频帧率,从而降低下载视频数据量,避免了后续出现视频卡顿的情况。
68.作为第三种实现方式,s440中的“基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理”可以包括:基于目标视频编码方式,对预设时间段对应的待下载视频进行转码处理,获得处理后的目标待下载视频;其中,目标视频编码方式的视频码率小于当前视频编码方式的视频码率;或者,目标视频编码方式的视频帧率小于当前视频编码方式的视频帧率。
69.具体地,在直播场景中,需要对实时获得的视频片段进行实时转码处理,以保证视频流畅度。本实施例可以利用视频码率较低的和/或视频帧率较低的目标视频编码方式对待下载视频进行转码处理,从而降低处理后的目标待下载视频的视频码率和/或视频帧率,进而降低传输视频数据量,避免了后续出现视频卡顿的情况。
70.本实施例的技术方案,通过在卡顿预测结果是当前时刻后的预设时间段内出现卡顿时,可以基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理,通过降低待下载视频对应的视频码率或者视频帧率的方式降低服务器到客户端之间传输的视频数据量大小,避免了不必要的视频卡顿,保证视频播放流畅度,提升了用户观看体验。
71.在上述技术方案的基础上,卡顿预测结果还包括:当前时刻后的预设时间段内出现卡顿时的卡顿预测时长。相应地,步骤s440中的“基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理”可以包括:基于预设卡顿处理方式,对卡顿预测时长对应的待下载视频进行视频处理。
72.其中,对卡顿预测时长对应的待下载视频的卡顿处理过程可以参见上述三种实现方式,此处不再赘述。
73.具体地,卡顿预测结果在预测会出现卡顿时还可以进一步预测出相应的卡顿预测时长,从而只需对在卡顿预测时长内需要下载的待下载视频进行视频处理即可,即降低卡顿预测时长对应的待下载视频的视频码率或者视频帧率,无需对其他的待下载视频进行处理,从而可以进一步保证视频观看质量,提升用户体验。
74.以下是本公开实施例提供的视频卡顿预测装置的实施例,该装置与上述实施例的视频卡顿预测方法属于同一个发明构思,在视频卡顿预测装置的实施例中未详尽描述的细
节内容,可以参考上述实施例。
75.实施例三
76.图6为本公开实施例三提供的一种视频卡顿预测装置的结构示意图,本实施例可适用于对在播放当前待下载视频时是否出现播放卡顿进行提前预测的情况,尤其是可以用于对直播视频或者点播视频进行卡顿预测的应用场景中。如图6所示,该装置具体包括:当前播放信息获取模块610、当前服务信息获取模块620和卡顿预测模块630。
77.其中,当前播放信息获取模块610,用于获取在播放当前已下载视频时的当前播放信息;当前服务信息获取模块620,用于获取服务器的当前服务信息;卡顿预测模块730,用于根据预设卡顿预测模型、当前播放信息和当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
78.本公开实施例的技术方案,通过获取在播放当前已下载视频时的当前播放信息以及服务器自身的当前服务信息,并根据预设卡顿预测模型、当前播放信息和当前服务信息,确定出在播放当前待下载视频时的卡顿预测结果,从而可以提前获知视频卡顿结果,进而有效保证视频播放流畅度,提升用户观看体验。
79.在上述技术方案的基础上,当前服务信息包括:服务器的当前负载量、cdn内容分发网络厂商信息和cdn缓存的可下载视频量信息。
80.在上述各技术方案的基础上,预设卡顿预测网络模型包括:输出层和至少一个resnet残差网络;每个resnet残差网络包括:第一全连接层、第一激活层、第二全连接层和第二激活层;
81.其中,第一全连接层的输出作为第一激活层的输入;第一激活层的输出作为第二全连接层的输入,第二全连接层的输出与第一全连接层的输入进行跳跃连接,跳跃连接后的相加结果作为第二激活层的输入。
82.在上述各技术方案的基础上,卡顿预测模块630可以包括:
83.预处理单元,用于对当前播放信息进行预处理,获得目标播放信息,并对当前服务信息进行预处理,获得目标服务信息;
84.卡顿预测单元,用于将目标播放信息和目标服务信息输入至预设卡顿预测模型中进行卡顿预测,获得在播放当前待下载视频时的卡顿预测结果。
85.在上述各技术方案的基础上,预处理单元,具体用于:基于预设标准化模型,对当前播放信息进行数据标准化处理,获得目标播放信息;其中,预设标准化模型定时基于最新预设时长内获取到的播放信息进行参数更新。
86.在上述各技术方案的基础上,该装置还包括:
87.卡顿处理模块,用于若卡顿预测结果是:当前时刻后的预设时间段内出现卡顿,则基于预设卡顿处理方式,对预设时间段对应的待下载视频进行视频处理,以降低待下载视频对应的视频码率或者视频帧率。
88.在上述各技术方案的基础上,卡顿处理模块,具体用于:
89.基于当前正在下载视频对应的第一视频码率,确定小于第一视频码率的第二视频码率;基于预先存储的每个视频码率下预设时间段对应的待下载视频,确定出第二视频码率下预设时间段对应的目标待下载视频。
90.在上述各技术方案的基础上,卡顿处理模块,还具体用于:
91.对预设时间段对应的待下载视频进行视频帧抽取,获得抽取后的目标待下载视频。
92.在上述各技术方案的基础上,卡顿处理模块,还具体用于:
93.基于目标视频编码方式,对预设时间段对应的待下载视频进行转码处理,获得处理后的目标待下载视频;其中,目标视频编码方式的视频码率小于当前视频编码方式的视频码率;或者,目标视频编码方式的视频帧率小于当前视频编码方式的视频帧率。
94.在上述各技术方案的基础上,卡顿预测结果还包括:当前时刻后的预设时间段内出现卡顿时的卡顿预测时长;
95.卡顿处理模块,具体用于:基于预设卡顿处理方式,对卡顿预测时长对应的待下载视频进行视频处理。
96.在上述各技术方案的基础上,所述当前播放信息包括:客户端的当前网络信息、当前已缓存的视频长度和当前正在下载的视频信息。
97.在上述各技术方案的基础上,所述当前网络信息包括:丢包率、当前带宽、最大带宽、最大网络延迟、最小网络延迟、当前往返时延、最小往返时延和最大往返时延;
98.所述当前正在下载的视频信息包括:视频帧率、视频码率和视频数据大小。
99.本公开实施例所提供的视频卡顿预测装置可执行本公开任意实施例所提供的视频卡顿预测方法,具备执行视频卡顿预测方法相应的功能模块和有益效果。
100.值得注意的是,上述视频卡顿预测装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
101.实施例四
102.下面参考图7,其示出了适于用来实现本公开实施例的电子设备900的结构示意图。图7示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
103.如图7所示,电子设备900可以包括处理装置(例如中央处理器、图形处理器等)901,其可以根据存储在只读存储器(rom)902中的程序或者从存储装置908加载到随机访问存储器(ram)903中的程序而执行各种适当的动作和处理。在ram 903中,还存储有电子设备900操作所需的各种程序和数据。处理装置901、rom 902以及ram 903通过总线904彼此相连。输入/输出(i/o)接口905也连接至总线904。
104.通常,以下装置可以连接至i/o接口905:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置906;包括例如液晶显示器(lcd)、扬声器、振动器等的输出装置907;包括例如磁带、硬盘等的存储装置908;以及通信装置909。通信装置909可以允许电子设备900与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备900,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
105.特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置909从网络上被下载和安装,或者从存储装
置908被安装,或者从rom 902被安装。在该计算机程序被处理装置901执行时,执行本公开实施例的方法中限定的上述功能。
106.本公开实施例提供的电子设备与上述实施例提供的视频卡顿预测方法属于同一发明构思,未在本公开实施例中详尽描述的技术细节可参见上述实施例,并且本公开实施例与上述实施例具有相同的有益效果。
107.实施例五
108.本公开实施例提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述实施例所提供的视频卡顿预测方法。
109.需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、rf(射频)等等,或者上述的任意合适的组合。
110.在一些实施方式中,客户端、服务器可以利用诸如http(hypertext transfer protocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“lan”),广域网(“wan”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
111.上述计算机可读介质可以是上述服务器中所包含的;也可以是单独存在,而未装配入该服务器中。
112.上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该服务器执行时,使得该服务器:获取在播放当前已下载视频时的当前播放信息;获取服务器的当前服务信息;根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
113.可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如java、smalltalk、c ,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或
服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
114.附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
115.描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,可编辑内容显示单元还可以被描述为“编辑单元”。
116.本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、片上系统(soc)、复杂可编程逻辑设备(cpld)等等。
117.在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
118.根据本公开的一个或多个实施例,【示例一】提供了一种视频卡顿预测方法,包括:
119.获取在播放当前已下载视频时的当前播放信息;
120.获取服务器的当前服务信息;
121.根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
122.根据本公开的一个或多个实施例,【示例二】提供了一种视频卡顿预测方法,应用于服务器,还包括:
123.可选的,所述当前服务信息包括:所述服务器的当前负载量、cdn内容分发网络厂商信息和cdn缓存的可下载视频量信息。
124.根据本公开的一个或多个实施例,【示例三】提供了一种视频卡顿预测方法,应用于服务器,还包括:
125.可选的,所述预设卡顿预测网络模型包括:输出层和至少一个resnet残差网络;
126.每个所述resnet残差网络包括:第一全连接层、第一激活层、第二全连接层和第二激活层;
127.其中,所述第一全连接层的输出作为第一激活层的输入;所述第一激活层的输出作为所述第二全连接层的输入,所述第二全连接层的输出与所述第一全连接层的输入进行跳跃连接,所述跳跃连接后的相加结果作为所述第二激活层的输入。
128.根据本公开的一个或多个实施例,【示例四】提供了一种视频卡顿预测方法,应用于服务器,还包括:
129.可选的,所述根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频的卡顿预测结果,包括:
130.对所述当前播放信息进行预处理,获得目标播放信息,并对所述当前服务信息进行预处理,获得目标服务信息;
131.将所述目标播放信息和所述目标服务信息输入至预设卡顿预测模型中进行卡顿预测,获得在播放当前待下载视频时的卡顿预测结果。
132.根据本公开的一个或多个实施例,【示例五】提供了一种视频卡顿预测方法,应用于服务器,还包括:
133.可选的,所述对所述当前播放信息进行预处理,获得目标播放信息,包括:
134.基于预设标准化模型,对所述当前播放信息进行数据标准化处理,获得目标播放信息;
135.其中,所述预设标准化模型定时基于最新预设时长内获取到的播放信息进行参数更新。
136.根据本公开的一个或多个实施例,【示例六】提供了一种视频卡顿预测方法,应用于服务器,还包括:
137.可选的,所述方法还包括:
138.若所述卡顿预测结果是:当前时刻后的预设时间段内出现卡顿,则基于预设卡顿处理方式,对所述预设时间段对应的待下载视频进行视频处理,以降低所述待下载视频对应的视频码率或者视频帧率。
139.根据本公开的一个或多个实施例,【示例七】提供了一种视频卡顿预测方法,应用于服务器,还包括:
140.可选的,所述基于预设卡顿处理方式,对所述预设时间段对应的待下载视频进行视频处理,包括:
141.基于当前正在下载视频对应的第一视频码率,确定小于所述第一视频码率的第二视频码率;
142.基于预先存储的每个视频码率下所述预设时间段对应的待下载视频,确定出所述第二视频码率下所述预设时间段对应的目标待下载视频。
143.根据本公开的一个或多个实施例,【示例八】提供了一种视频卡顿预测方法,应用于服务器,还包括:
144.可选的,所述基于预设卡顿处理方式,对所述预设时间段对应的待下载视频进行视频处理,还包括:
145.对所述预设时间段对应的待下载视频进行视频帧抽取,获得抽取后的目标待下载
视频。
146.根据本公开的一个或多个实施例,【示例九】提供了一种视频卡顿预测方法,应用于服务器,还包括:
147.可选的,所述基于预设卡顿处理方式,对所述预设时间段对应的待下载视频进行视频处理,还包括:
148.基于目标视频编码方式,对所述预设时间段对应的待下载视频进行转码处理,获得处理后的目标待下载视频;
149.其中,所述目标视频编码方式的视频码率小于当前视频编码方式的视频码率;或者,所述目标视频编码方式的视频帧率小于当前视频编码方式的视频帧率。
150.根据本公开的一个或多个实施例,【示例十】提供了一种视频卡顿预测方法,应用于服务器,还包括:
151.可选的,所述卡顿预测结果还包括:当前时刻后的预设时间段内出现卡顿时的卡顿预测时长;
152.所述基于预设卡顿处理方式,对所述预设时间段对应的待下载视频进行视频处理,包括:
153.基于预设卡顿处理方式,对所述卡顿预测时长对应的待下载视频进行视频处理。
154.根据本公开的一个或多个实施例,【示例十一】提供了一种视频卡顿预测方法,还包括:
155.可选的,所述当前播放信息包括:当前网络信息、当前已缓存的视频长度和当前正在下载的视频信息。
156.根据本公开的一个或多个实施例,【示例十二】提供了一种视频卡顿预测方法,还包括:
157.可选的,所述当前网络信息包括:丢包率、当前带宽、最大带宽、最大网络延迟、最小网络延迟、当前往返时延、最小往返时延和最大往返时延;
158.所述当前正在下载的视频信息包括:视频帧率、视频码率和视频数据大小。
159.根据本公开的一个或多个实施例,【示例十三】提供了一种视频卡顿预测装置,包括:
160.当前播放信息获取模块,用于获取在播放当前已下载视频时的当前播放信息;
161.当前服务信息获取模块,用于获取服务器的当前服务信息;
162.卡顿预测模块,用于根据预设卡顿预测模型、所述当前播放信息和所述当前服务信息,确定在播放当前待下载视频时的卡顿预测结果。
163.以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
164.此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公
开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
165.尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献