一种基于实时视频流的交通标注方法、系统及存储介质与流程

1.本发明涉及视频标注技术领域，具体涉及一种基于实时视频流的交通标注方法、系统及存储介质。


背景技术：

2.城市道路是城市的基本骨架，从某种意义上讲，城市道路监控网络就是城市治安监控系统的骨架。作为道路交通管理的主力军，交警承担了城市道路交通电视监控、机动车交通违法监测抓拍、智能卡口等系统建设，这三个系统的监控范围都是机动车道，监控对象都是机动车辆，是城市道路监控网络系统的重要组成部分，对构建城市治安防控网络系统都有着十分重要的作用。现目前，智能视频监控技术被交通监控广泛应用。
3.在大量的视频资源中，以人工的方式去查找某一特定的视频对象犹如大海捞针，费时费力。因此有必要在各种视频监控资源集成整合的基础上，研发车辆运行轨迹排查系统，通过对道路电视监控、智能卡口、路口电子警察等各种典型交通监控视频流分析，根据车辆种类、颜色、大小等特征信息，在城市各种交通监控视频信息中搜索指定车辆，提取包含特定目标的视频片断，从而掌握或查清特定车辆的出没时间、运行轨迹，为查处交通肇事逃逸和治安刑事案件提供技术支持。
4.随着视频相关技术的不断发展，实时视频等技术的成熟，当需要分析、监控、收集这些海量的视频数据并对界面中的视频区域进行分析时，在分析量过多的情况下，用户不能够及时分辨出监控重点，容易丢失重要信息，且现有技术中存在视频难以标注，算法识别不精准等问题。


技术实现要素：

5.针对现有技术中的缺陷，本发明提供一种基于实时视频流的交通标注方法、系统及存储介质。
6.第一方面，一种基于实时视频流的交通标注方法，包括：
7.获取交通监控范围内的实时视频流；
8.标注所述视频流中的参照物；
9.标注所述视频流中的信号灯，并添加信号灯属性；
10.标注所述视频流中的车道，并添加车道属性；
11.将所述参照物、信号灯属性以及车道属性作为标注数据发送至后台服务器保存；
12.将所述标注数据与违法类型进行关联绑定。
13.进一步地，所述标注所述视频流中的参照物，具体为：
14.运用多边形绘制工具，选取所述视频流中的一个或多个物体进行绘制，从而将所述一个或多个物体标注为参照物；
15.所述一个或多个物体包括所述视频流中除信号灯以外的任意物体。
16.进一步地，所述标注所述视频流中的信号灯，并添加信号灯属性，具体为：
17.运用矩形绘制工具，选取所述视频流中信号灯区域内的所有信号灯进行标注，并对每个所述信号灯添加对应的信号灯属性；
18.所述信号灯属性包括信号灯编号、信号灯形状以及信号灯摆放方向。
19.进一步地，所述标注所述视频流中的车道，并添加车道属性，具体为：
20.运用多边形绘制工具，选取所述视频流中的车道进行标注，采用箭头工具绘制车道导向箭头，并对车道添加车道属性；
21.所述车道属性包括车道编号、车道方向以及所述车道对应信号灯的信号灯属性。
22.第二方面，一种基于实时视频流的交通标注系统，包括：
23.视频流获取模块：用于获取交通监控范围内的实时视频流；
24.参照物标注模块：用于标注所述视频流中的参照物；
25.信号灯标注模块：用于标注所述视频流中的信号灯，并添加信号灯属性；
26.车道标注模块：用于标注所述视频流中的车道，并添加车道属性；
27.标注保存模块：用于将所述参照物、信号灯属性以及车道属性作为标注数据发送至后台服务器保存；
28.关联绑定模块：用于将所述标注数据与违法类型进行关联绑定。
29.进一步地，所述参照物标注模块具体用于：
30.运用多边形绘制工具，选取所述视频流中的一个或多个物体进行绘制，从而将所述一个或多个物体标注为参照物；
31.所述一个或多个物体包括所述视频流中除信号灯以外的任意物体。
32.进一步地，所述信号灯标注模块具体用于：
33.运用矩形绘制工具，选取所述视频流中信号灯区域内的所有信号灯进行标注，并对每个所述信号灯添加对应的信号灯属性；
34.所述信号灯属性包括信号灯编号、信号灯形状以及信号灯摆放方向。
35.进一步地，所述车道标注模块具体用于：
36.运用多边形绘制工具，选取所述视频流中的车道进行标注，采用箭头工具绘制车道导向箭头，并对车道添加车道属性；
37.所述车道属性包括车道编号、车道方向以及所述车道对应信号灯的信号灯属性。
38.第三方面，一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行上述第一方面的方法。
39.本发明的有益效果体现在：实现了用户可以直接在客户端对视频区域中重要信息进行标注，后期也能及时、快速地查看相关信息，优化了用户与系统之间的契合度，提高了交通违法信息查询效率。同时通过将标注与违法类型进行关联绑定，提高了交通违法的算法识别率，协助算法进行更加精准的识别。
附图说明
40.为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。
41.图1为本发明实施例提供的一种基于实时视频流的交通标注方法的流程图；
42.图2为本发明实施例提供的一种基于实时视频流的交通标注系统的模块框图。
具体实施方式
43.下面将结合附图对本发明技术方案的实施例进行详细的描述。以下实施例仅用于更加清楚地说明本发明的技术方案，因此只作为示例，而不能以此来限制本发明的保护范围。
44.需要注意的是，除非另有说明，本技术使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
45.如图1所示，一种基于实时视频流的交通标注方法，包括：
46.s1：获取交通监控范围内的实时视频流；
47.需要说明的是，本发明实施例提供的标注方法采用d3技术，可以由用户在客户端自定义标注数据进行操作，用户在标注之前，可以选择某个路段作为标注对象，调取该路段监控视频流进行标注。
48.s2：标注所述视频流中的参照物；
49.具体地，获取所需标注的视频流后，运用多边形绘制工具，选取视频流中的一个或多个物体进行绘制，绘制的图形可以为矩形，该矩形标注框的尺寸应至少大于或等于标注对象的尺寸，也可以为根据物体本身形状而绘制的多边形。其物体可以是视频流中除了信号灯以外的任意物体，如：路牌、行道树、写字楼以及道路护栏等。绘制完成即生成了该路段的参照物，为后续的算法识别提供参照对比，以方便识别该路段所属地理位置。
50.s3：标注所述视频流中的信号灯，并添加信号灯属性；
51.具体地，标注好参照物后，运用矩形绘制工具，选取视频流中的信号灯进行标注，为了使后续的违法判断更加精准，在标注信号灯时将视频流中信号灯区域内的所有信号灯都进行标注，并对每个信号灯分别添加对应的信号灯属性，包括信号灯编号、信号灯形状以及信号灯摆放方向。
52.其中，信号灯编号根据视频流中信号灯总数量进行逐个排序标注，例如：某路段视频流中信号灯区域内共有3个信号灯，可以将信号灯从左到右依次标注为l1、l2以及l3。其具体排序方式可自定义设定。信号灯形状根据信号灯实际形状标注，常用的信号灯大多数为圆形。信号灯摆放方向则根据信号灯的实际安装方向进行标注，包括但不限于纵向摆放和横向摆放。例如，最左边信号灯对应的信号灯属性为：l1、圆形、纵向。
53.s4：标注所述视频流中的车道，并添加车道属性；
54.具体地，标注好信号灯后，运用多边形绘制工具，选取视频流中的车道进行标注，并采用箭头绘制工具在视频流中描绘出该车道对应的导向箭头，例如：左转车道绘制左转箭头，直行车道绘制直行箭头，右转车道则绘制右转箭头等等。同时，对车道添加车道属性，并将车道与对应的信号灯进行关联。车道属性包括车道编号、车道方向以及车道对应信号灯的信号灯属性。
55.其中，车道编号根据所属车道队列中车道总数量进行逐个排序标注，例如：该车道队列中共有4个车道，其中最左侧车道为左转车道，中间两车道为直行车道，最右侧车道为右转车道，则可以将两个直行车道标注为r1和r2，将右转车道标注为r3，将左转车道标注为
r4。对应的，车道方向包括：左转la、直行sl以及右转ra。其具体排序方式可自定义设定。信号灯属性则根据该车道对应的信号灯进行标注。例如，某路段标注车道中，从左至右的第二个车道为直行车道，该直行车道对应的信号灯为编号l1的直行信号灯，因此该直行车道的车道属性包括：车道(r1)、车道方向(直行sl)、信号灯(l1，圆形，纵向)。
56.s5：将所述参照物、信号灯属性以及车道属性作为标注数据发送至后台服务器保存；
57.具体地，在对视频流标注完成后，将参照物、信号灯属性以及车道属性作为标注数据发送至后台服务器保存。同时，后台服务器保存成功后会向客户端发送保存成功消息，此时，用户在客户端重新打开视频流将显示标注后的视频流。
58.s6：将所述标注数据与违法类型进行关联绑定；
59.具体地，为了方便后续进行算法识别，在标注完成后选取参照物、信号灯属性以及车道属性与违法类型进行关联绑定，违法类型包括但不限于客货分道、闯红绿灯、压实线变道、车辆剐蹭等等。在后续算法识别的过程中，系统算法会根据绑定的标注数据进行违法匹配，判断视频流中的车辆是否违法，得到违法类型的识别结果。
60.实施上述方法，实现了用户可以直接在客户端对视频区域中重要信息进行标注，后期也能及时、快速地查看相关信息，优化了用户与系统之间的契合度，提高了交通违法信息查询效率。同时通过将标注与违法类型进行关联绑定，提高了交通违法的算法识别率，协助算法进行更加精准的识别。
61.基于相同的发明构思，本发明实施例提供了一种基于实时视频流的交通标注系统，如图2所示，包括：
62.视频流获取模块：用于获取交通监控范围内的实时视频流；
63.参照物标注模块：用于标注视频流中的参照物；
64.信号灯标注模块：用于标注视频流中的信号灯，并添加信号灯属性；
65.车道标注模块：用于标注视频流中的车道，并添加车道属性；
66.标注保存模块：用于将参照物、信号灯属性以及车道属性作为标注数据发送至后台服务器保存；
67.关联绑定模块：用于将标注数据与违法类型进行关联绑定。
68.进一步地，视频流获取模块具体用于：
69.在标注之前，选择某个路段作为标注对象，调取该路段监控视频流进行标注。
70.进一步地，参照物标注模块具体用于：
71.运用多边形绘制工具，选取视频流中的一个或多个物体进行绘制，从而将所述一个或多个物体标注为参照物。其中，一个或多个物体包括视频流中除信号灯以外的任意物体。
72.进一步地，信号灯标注模块具体用于：
73.运用矩形绘制工具，选取视频流中信号灯区域内的所有信号灯进行标注，并对每个信号灯添加对应的信号灯属性。其中，信号灯属性包括信号灯编号、信号灯形状以及信号灯摆放方向。
74.进一步地，车道标注模块具体用于：
75.运用多边形绘制工具，选取视频流中的车道进行标注，采用箭头工具绘制车道导
向箭头，并对车道添加车道属性。其中，车道属性包括车道编号、车道方向以及所述车道对应信号灯的信号灯属性。
76.进一步地，对应于前述方法及系统，本发明实施例还提供了一种可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令被处理器执行时实现：上述基于实时视频流的交通标注方法。
77.所述计算机可读存储介质可以是前述任一实施例所述的系统的内部存储单元，例如系统的硬盘或内存。所述计算机可读存储介质也可以是所述系统的外部存储设备，例如所述系统上配备的插接式硬盘，智能存储卡(smart media card,smc)，安全数字(secure digital,sd)卡，闪存卡(flash card)等。进一步地，所述计算机可读存储介质还可以既包括所述系统的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述系统所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
78.本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
79.在本技术所提供的几个实施例中，应该理解到，所揭露的系统和方法，可以通过其它的方式实现。例如，以上所描述的系统实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
80.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
81.另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
82.所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
83.以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。