确保加油前场的安全性的制作方法

确保加油前场的安全性
1.相关申请的交叉引用本技术要求2020年5月28日提交的题为“确保加油前场的安全性”的美国专利申请第16/885,946的优先权权益，其全部内容通过引用并入于此。
技术领域
2.当前主题涉及确保关于加油前场的安全性的方法。


背景技术：

3.当前的加油前场环境对于加油站的顾客具有许多潜在的危险情况，诸如由顾客吸烟引起的火灾或由逆火或金属在路面上拖动而引起的火花、由车辆(例如，汽车、公共汽车、卡车、摩托车)加油过量而引起的或由于燃料分配器故障而引起的燃料泄漏、和/或不安全的车辆操作(例如，加速、驶向分配器)。通常，这些危险是由商店内的其他顾客或服务员监视的，并且因此，减轻这些危险的行动仅会在已经确定了危险、已经确定了适当的响应、以及已经传达了如何采取行动之后才采取。这种延迟的反应可能会导致顾客/服务员的身体伤害或死亡和/或加油站的财产损失。


技术实现要素：

4.总体上，提供了用于确保关于加油前场的安全性的系统和方法。
5.在一个方面，可以接收表征由朝向加油站的前场定向并包括该前场的视场的摄像机获取的视频馈送的数据。可以针对危险来监视视频馈送，并且对视频馈送的监视可以包括使用至少一个预测模型来对视频馈送执行自动危险检测，所述至少一个预测模型预测加油站的前场内的危险的存在。可以响应于检测到加油站的前场内的危险的存在而发送命令。
6.以下特征中的一个或多个可以包括在任何可行的组合中。例如，可以将存在于加油站的前场内的对象与关联于危险的至少一个模型对象进行比较，可以确定指示对象与模型对象匹配的程度的相似性度量，并且可以响应于相似性度量超过预定阈值而发送指示。例如，可以基于所提供的命令生成指示危险存在的通知，并且可将该通知提供给终端用户设备。例如，终端用户设备可以包括配置成管理加油站的操作的前场控制器的交互式显示器，并且通知可以包括配置成在显示器上呈现的提示。例如，终端用户设备可以包括移动设备，该移动设备可以包括交互式显示器，所述移动设备可以与被配置成管理加油站的操作的前场控制器可操作地通信，并且通知可以包括被配置成在显示器上呈现的提示。例如，命令可被提供给可被设置在前场中的灭火系统，所述命令可使灭火系统激活至少一个喷洒器以分配灭火剂。例如，命令可被提供给具有朝向前场定向的至少一个扬声器的警报系统，并且可使得指示危险存在的音频消息经由至少一个扬声器而提供。例如，警报系统可以包括朝向前场定向的至少一个频闪灯，并且命令可以使频闪灯发光，从而指示危险存在。例如，响应于接收到该命令，可以解激活加油站的至少一部分。例如，接收、确定和生成可以由形
成至少一个计算系统的一部分的至少一个数据处理器执行。
7.在另一方面，提供了一种系统，并且该系统可以包括至少一个数据处理器和存储指令的存储器，所述指令被配置成使所述至少一个数据处理器执行本文描述的操作。所述操作可以包括：接收表征由摄像机获取的视频馈送的数据，所述摄像机朝向加油站的前场定向并且包括所述前场的视场；针对危险而监视所述视频馈送，所述监视包括使用至少一个预测模型来对所述视频馈送执行自动危险检测，所述至少一个预测模型预测所述加油站的前场内的危险的存在；以及响应于检测到所述加油站前场内的危险的存在而发送命令。
8.以下特征中的一个或多个可以包括在任何可行的组合中。例如，所述操作可以进一步包括将存在于加油站的前场内的对象与至少一个模型对象进行比较，所述模型对象与危险相关联，确定所述对象的相似性度量，所述相似性度量指示所述对象与所述模型对象匹配的程度，以及响应于所述相似性度量超过预定阈值而发送指示。例如，操作可进一步包括基于所提供的命令而生成指示危险存在的通知，并且将通知提供给终端用户设备。例如，终端用户设备可以包括配置成管理加油站的操作的前场控制器的交互式显示器，并且通知可以包括配置成在显示器上呈现的提示。例如，终端用户设备可以包括移动设备，该移动设备可以包括交互式显示器，其可以与被配置成管理加油站的操作的前场控制器可操作地通信，并且通知可以包括被配置成在显示器上呈现的提示。例如，命令可被提供给可被设置在前场中的灭火系统，所述命令可使灭火系统激活至少一个喷洒器以分配灭火剂。例如，命令可被提供给具有朝向前场定向的至少一个扬声器的警报系统，并且可使得指示危险存在的音频消息经由至少一个扬声器而提供。例如，警报系统可以包括朝向前场定向的至少一个频闪灯，并且命令可以使频闪灯发光，从而指示危险存在。例如，操作还可以包括响应于接收到命令而解激活加油站的至少一部分。
9.还描述了存储指令的非暂时性计算机程序产品(即，物理体现的计算机程序产品)，所述指令当由一个或多个计算系统的一个或多个数据处理器执行时，使至少一个数据处理器执行本文描述的操作。类似地，还描述了可以包括一个或多个数据处理器和耦合到所述一个或多个数据处理器的存储器的计算机系统。存储器可以临时或永久地存储指令，所述指令使至少一个处理器执行本文描述的操作中的一个或多个。此外，本文描述的方法可以由单个计算系统内或分布在两个或更多个计算系统之间的一个或多个数据处理器来实现。这样的计算系统可以经由一个或多个连接来连接并且可以交换数据和/或命令或其他指令等，所述一个或多个连接包括通过网络(例如，因特网、无线广域网、局域网、广域网、有线网络等)的连接、经由多个计算系统中的一个或多个之间的直接连接等。
10.在附图和以下描述中阐述了本文所述主题的一个或多个变型的细节。从说明书和附图以及从权利要求书中，本文所述主题的其它特征和优点将显而易见。
附图说明
11.从结合附图的以下详细描述中，将更全面地理解上述实施例。附图不意图是按比例绘制的。为了清楚起见，可能不是每个组件在每幅图中被标记。在附图中：图1是示出可在加油站处提供自动化威胁检测和减轻的当前主题的一些实施方式的示例性过程的过程流程图；图2是示出可在加油站处提供自动化威胁检测和减轻的示例性系统的组件的示意
图；图3a是燃料分配器的一个实施例的侧面透视图；图3b是图3a所示的燃料分配器的前透视图；以及图4是示出图3a和3b的燃料分配器的内部组件的图。
具体实施方式
12.现在将描述某些示例性实施例，以提供对本文所公开的设备和方法的结构、功能、制造和使用的原理的总体理解。在附图中示出了这些实施例的一个或多个示例。本领域技术人员应当理解，本文具体描述并在附图中示出的设备和方法是非限制性的示例性实施例，并且本发明的范围仅由权利要求来限定。结合一个示例性实施例示出或描述的特征可以与其它实施例的特征组合。这样的修改和变化意图包括在本发明的范围内。
13.此外，在本公开中，实施例的类似命名的组件通常具有类似的特征，并且因此在特定实施例内，每个类似命名的组件的每个特征不一定完全地详细阐述。另外，就在所公开的系统、设备和方法的描述中使用线性或圆形尺寸来说，这种尺寸不意图限制可与这种系统、设备和方法结合使用的形状的类型。本领域技术人员应当认识到，对于任何几何形状，可以容易地确定这种线性和圆形尺寸的等同物。系统和设备及其组件的尺寸和形状可至少取决于其中将使用系统和设备的对象的解剖结构、系统和设备将与其一起使用的组件的尺寸和形状以及其中将使用系统和设备的方法和程序。
14.当前主题的一些实施方式涉及检测加油站处的危险情况。并入当前主题的系统可以包括位于加油站的至少一个摄像机和被配置成接收由摄像机获取的图像和/或视频数据的处理器。处理器还被配置成连续地监视图像和/或视频数据，并且使用预测建模，根据图像和/或视频数据来确定在加油站处是否可能存在危险(例如，火焰、点着的香烟、燃料溢出/泄漏、以过高的速率移动移动和/或在与燃料分配器碰撞过程中的车辆)，并且采取至少一个动作来减轻对加油站处的人或财产的损害的风险。这种方法可在几乎不需要或不需要人类干预的情况下提供加油站处的自动危险检测和危险情况的减轻。
15.图1是示出可提供加油站中的危险情况的改进检测的当前主题的一些实施方式的示例性过程100的过程流程图。
16.在110处，可以接收表征由朝向加油站的前场定向并包括该前场的视场的摄像机获取的视频馈送的数据。视频馈送可以包括由至少一个摄像机记录的连续的图像帧流，其可以描述可以在加油站发生的各种事件。示例性事件包括希望在位于前场内的燃料分配器处购买燃料或在位于接近前场的便利店购买物品的客户的进入和离开、燃料分配器在加油交易中的使用、位于前场内的空气压缩机用于对客户的车辆的轮胎充气的使用等。在一些实施方式中，摄像机可以设置在位于前场中的燃料分配器上，并且被定向为使接近燃料分配器的驾驶通道在摄像机的视场内。在一些实施方式中，摄像机可以被设置在位于前场附近的建筑物上，诸如洗车房建筑物或便利店建筑物，并且被定向成使前场内的燃料分配器在该摄像机的视场内。在一些实施方式中，可以存在多个摄像机，每个摄像机具有不同的视场，所述视场可以重叠或者可以不重叠，这取决于实施方式。
17.在120处，可以针对危险来监视表征视频馈送的数据。这种危险可以包括在前场中的燃料分配器附近火或火焰的存在；因与客户的车辆耦合的金属在前场拖过路面而产生的
火花的存在；在客户使用中的燃料分配器附近的点着的香烟的存在；由于油箱破裂而导致地面上燃料的存在或从客户的车辆泄漏；由燃料分配器的故障或客户不正确地使用燃料分配器而引起的加油过量；和/或汽车以危险的高速或在与客户或与燃料分配器、便利店或加油站环境的其它部分的碰撞过程中进入/离开或围绕前场的移动。
18.该监视可以包括使用至少一个预测模型对视频馈送执行自动危险检测，所述至少一个预测模型可以预测加油站的前场内危险的存在。可以包括一个或多个机器学习算法的预测模型可以分析视频馈送中存在的图像以确定是否存在一个或多个危险。例如，在一些实施方式中，预测模型可以识别存在于视频馈送中的特征并且确定该特征是否与存在于预测模型中的与危险相关联的模型特征实质相关。由此，模型可以预测视频馈送中存在的特征是危险的高似然性。
19.在一些实施方式中，预测模型可以将特征与包含模型特征的至少一个图像进行比较，并且确定特征与模型特征之间的相似性度量。预测模型可以在相似性度量超过预定阈值时发送视频馈送中存在的特征是危险的高似然性的指示。例如，在分析视频馈送中存在的图像时，预测模型可以通过使用边缘和实体检测算法将图像分解为组成部分来解构每个图像。预测模型可以分析每个图像的在位置上与已知危险相关联的组成部分。例如，在检测到图像中个体的存在时，预测模型可以检测并隔离个体的面部和/或手臂。预测模型然后可以分析个体的面部和/或手臂，并且寻找类似于点着的香烟的特征，点着的香烟是加油站环境中的已知危险。预测模型可以将特征与模型香烟特征进行比较，并且确定特征与模型香烟特征之间的相似性的度量。如果相似性的度量超过预定阈值，则预测模型已经确定存在该特征是点着的香烟的高似然性，并且可以发送其指示。
20.在一些实施方式中，预测模型可以分析图像并生成描述检测到的组成部分和识别出的特征的词串。词串可以从与作为预测模型的一部分的模型组成部分相关联的词语中以及从模型特征中导出，当预测模型确定组成部分和/或特征的存在时，可以将所述模型特征添加到该词串中。预测模型可以分析用于指示危险(例如，“火灾”、“点着的香烟”、“溢出燃料”、“在前场中加速的车辆”等)的词语的词串，并且基于在词串中包括此类词语而确定可能存在危险。该模型还可以接收描绘该危险的一个或多个图像以用于训练该模型，从而提高该模型确定该特征是否与该模型特征实质相关的能力。
21.在130处，可以响应于检测到加油站的前场内危险的存在而发送命令。在一些实施方式中，命令可以包括生成指示危险的存在的通知并且向终端用户设备提供通知的指令。在一些实施方式中，终端用户设备可以是加油站服务员、加油站所有者和/或加油站的其他经营者/管理者的移动设备。
22.在一些实施方式中，通知可以包括可以在移动设备的交互式显示器上呈现的提示。在一些实施方式中，终端用户设备可以是加油站终端，其与前场控制器可操作地通信，该前场控制器被配置成管理在前场内发生的加油交易并且可以由加油站服务员来操作。在这样的实施方式中，通知可以包括可以在前场控制器的交互式显示器上呈现的提示。提示可以包括指示检测到的危险的类型的消息(例如，在前场存在火灾或燃料泄漏，或者车辆操作者将在车辆的燃料添加入口中的燃料分配器喷嘴从燃料分配器拉离(在这种情况下，提示还可以包括给驾驶员的挂起输油管的消息)等)。在一些实施方式中，提示还可以为移动设备的用户(例如，加油站服务员、加油站所有者、加油站经营者/管理者等)提供响应选项，
以选择，并从而采取校正动作以减轻由危险带来的对生命或财产的损害的风险。例如，提示可以提供激活灭火系统和/或警报系统、通知应急人员和/或解激活加油站的一个或多个部分的选项。在一些实施方式中，提示还可以为用户提供将检测到的危险指定为“假阳性”或“假警报”(即，预测模型在实际上不存在危险时指示危险的存在)的选项。这种指定可以被提供给预测模型，以用于进一步训练和改进预测模型的性能。
23.在一些实施方式中，诸如当已经在前场中检测到火焰时，命令可以被提供给设置在前场中的灭火系统。灭火系统可以响应于接收到的命令而被激活，并从而通过至少一个喷洒器分配灭火剂以减轻检测到的危险，所述灭火系统可以包括朝向前场定向的至少一个喷洒器，所述至少一个喷洒器被配置成在前场的方向上分配灭火剂。
24.在一些实施方式中，命令可以被提供给警报系统，该警报系统具有至少一个扬声器，该扬声器朝向前场定向并且在前场或周围区域(例如，便利店、洗车房)中的任何客户或站服务员的可听范围内。该命令可以使经由至少一个扬声器提供指示检测到的危险的音频消息。在一些实施方式中，消息可以通告已经检测到危险。在一些实施方式中，该消息可以通告检测到的特定类型的危险(例如，在前场中存在火灾、火焰、点着的香烟和/或燃料溢出、车辆操作者带着车辆的燃料添加入口中的燃料分配器喷嘴驶离、和/或车辆以高速率行驶通过前场)。在一些实施方式中，警报系统可以包括从前场内部可见的频闪灯，并且命令可以使频闪灯点亮，从而指示危险存在。在一些实施方式中，警报系统可以具有音频扬声器和/或频闪灯，所述音频扬声器和/或频闪灯定位在便利店中靠近前场，所述音频扬声器和/或频闪灯被配置成警告便利店内的顾客在前场中危险的存在。
25.在一些实施方式中，命令可以使基于检测到的危险将检测到的危险的通知发送到适当的机构。例如，如果检测到的危险是在前场中火焰的存在，则命令可以使将在前场中火焰的存在的通知发送到本地消防部门。
26.在一些实施方式中，命令可以由前场控制器接收，前场控制器可以响应于该命令而使加油站的一些或全部被解激活。该命令可以指示加油站的哪些部分(例如，一个或多个燃料分配器、洗车房等)要被前场控制器解激活，基于加油站的哪些部分受到检测到的危险影响或者可能受到影响的确定来做出对哪些部分的确定。例如，如果检测到从燃料分配器的燃料泄漏，则命令可以包括禁用燃料向该燃料分配器的流动的指令，从而停止燃料从燃料分配器的持续泄漏。
27.图2是示出用于在加油站处自动化威胁检测和减轻的示例性系统200的组件的示意图。如图所示，系统200可以位于加油站202处，并且可以包括摄像机204a、204b、204c，每个摄像机分别设置在燃料分配器206a、206b、206c上，并且被定向为使加油站202的前场208的至少一部分在摄像机204a、204b、204c的视场内。尽管如图2所示的系统200以三个摄像机204a、204b、204c为特征，但是可以使用任何数量的摄像机。摄像机204a、204b、204c可以被配置成获取加油站202的前场208的一个或多个图像和/或视频馈送。摄像机204a、204b、204c和燃料分配器206a、206b、206c可以位于前场208中，并且可以与具有至少一个数据处理器和存储器的服务器210进行可操作通信，所述至少一个数据处理器和存储器可以形成至少一个计算系统的一部分。摄像机204a、204b、204c可以均向服务器210提供它们相应的所获取的视频馈送。服务器210可以位于加油站202处，或者在一些实施方式中，服务器210可以位于现场之外。服务器210还可以与前场摄像机212可操作地通信，该前场摄像机被定
向为使前场208在前场摄像机212的视场内，并且被配置成获取前场208的一个或多个图像和/或视频馈送，并将它们提供给服务器210。服务器210的处理器被配置成监视从摄像机204a、204b、204c和/或前场摄像机212接收的视频馈送，并使用预测模型来检测加油站202的前场208内的危险的存在。
28.服务器210还可以与被配置成分配灭火剂的灭火系统214、被配置成管理燃料分配器206a、206b、206c的前场控制器216以及包括至少一个扬声器218a和至少一个频闪灯218b的警报系统218可操作地通信。灭火系统214、前场控制器216和警报系统218中的每一个可以接收由服务器210发出的命令，以采取本文描述的动作中的一个或多个，以减轻由危险导致的对生命或财产的任何损害。
29.图3a和3b示出了可以在当前主题的一些实施方式中使用的燃料分配器300的一个实施例，并且图4示出了该燃料分配器的组件。通常，燃料分配器300包括电子设备隔间302、泵隔间304和图像传感器322。泵隔间304容纳了被配置成从油箱或其它贮存器泵送燃料的泵，以及可被配置成监视燃料流量、燃料添加剂的流量和/或燃料的其它组分的流量的一个或多个仪表。泵隔间304还可以包括其它组件以便于燃料分配和混合，诸如马达和阀、过滤器/过滤系统、蒸气回收系统等。如本领域技术人员应当理解的，泵隔间304是与燃料分配器300内的电子设备隔间302隔离的，以便于安全、安全性和/或维护。因此，燃料不允许从泵隔间304流到电子设备隔间302，而是从泵隔间304通过输油管306流到喷嘴308以用于分配。如本领域技术人员应当理解的，加油枪308均被配置成当泵从燃料分配器300泵送燃料时从其分配燃料。
30.电子设备隔间302容纳了用于促进燃料付款和促进燃料的分配的电子设备。例如，电子设备隔间302可以包括燃料控制器319，其至少在一些实施方式中包括形成至少一个计算系统的一部分的数据处理器、存储器和存储装置。燃料控制器319被配置成控制燃料从泵隔间304的分配。电子设备隔间302还包括支付终端305，其被配置成向用户提供创建期望的燃料混合物的一个或多个选项，接收表征期望的燃料混合物的指令，从用户接收支付信息和/或用户身份信息，经由前场控制器406利用pos系统发送和接收支付信息和/或用户身份信息，以及向燃料控制器319递送加油指令以分配燃料。支付终端305还可以被配置成向用户提供与加油状态相关的信息。例如，支付终端可以显示已经分配的燃料量以及当燃料混合物被分配时的对应燃料价格。
31.支付终端305可以被配置成促进用户与燃料控制器319之间的通信，并且可以包括交互式显示器320和信息模块310。至少在一些实施方式中，信息模块310可以包括形成至少一个计算系统的一部分的数据处理器、存储器和存储装置。支付终端305还可以包括一个或多个有线通信模块316和/或无线通信模块318以及控制模块312，其在一些实施方式中至少包括形成至少一个计算系统的一部分的数据处理器、存储器和存储装置。通信模块316、318可以用于允许数据分别经由有线和/或无线通信被传输到支付终端305内的各种组件和从其传输。例如，通信模块316、318可被配置成分别经由有线和/或无线通信来发送和接收可以表征例如支付信息、用户身份信息和/或关于期望的燃料选择的信息的信号。无线通信模块318可以包括例如用于经由蓝牙协议、蜂窝式协议、wi-fi协议、近场通信(nfc)和/或射频识别(rfid)协议进行通信的收发器。如本领域技术人员应当理解的，经由通信模块316、318的有线和/或无线通信可以根据各种通信协议中的任何一种，例如tcp/ip等。通信模块316、
318还与图像传感器322可操作地通信，并且被配置成接收由图像传感器322获取的图像数据。通信模块316、318可以另外发送所接收的图像数据以用于进一步的外部处理。
32.交互式显示器320可以是或可以包括触摸屏。交互式显示器320可以可操作地耦合到控制模块312，该控制模块可以用于控制、动态地重新布置和/或更新在显示器320上呈现的图形用户界面(gui)。显示器320可以被配置成以一个或多个图形元素或图形对象的形式示出信息(例如，媒体内容、燃料选择选项、支付信息、用户身份信息等)，接收其上的输入(例如，用于期望的燃料混合物的指令、用户身份信息、支付信息等)，并且可以将表征输入的数据递送到控制模块312以进行处理。显示器320可以从用户接收的信息的一些示例是：总价格、期望燃料体积、期望燃料混合物、期望添加剂、启动加油命令和终止加油命令。在一些实施方式中，用户可以提供用户信息，诸如用户偏好、联系信息等，和/或关于将消耗燃料的设备的信息，诸如车辆制造商、型号、里程等。还可以向用户提供他们可以选取的推荐的燃料混合以进行选择。
33.本文所述的主题可以提供若干优点。例如，由预测模型提供的连续监视和自动化危险检测可以允许采取更即时的威胁减轻努力，因为预测模型可以识别危险并采取各种动作来保护生命和财产，而不需要从加油站服务员或存在于加油站的其它个体处确认危险的存在。
34.本文所述主题的一个或多个方面或特征可以以数字电子电路、集成电路、专门设计的专用集成电路(asic)、现场可编程门阵列(fpga)计算机硬件、固件、软件和/或其组合来实现。这些各种方面或特征可以包括以一个或多个计算机程序的实施方式，所述计算机程序在包括至少一个可编程处理器的可编程系统上可执行和/或可解释，所述可编程处理器可以是专用或通用的，被耦合以从存储系统、至少一个输入设备和至少一个输出设备接收数据和指令，以及向其发送数据和指令。可编程系统或计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离，并且通常通过通信网络进行交互。客户端和服务器的关系借助于在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。
35.也可以被称为程序、软件、软件应用、应用、组件或代码这些计算机程序包括用于可编程处理器的机器指令，并且可以以高级过程语言、面向对象的编程语言、功能编程语言、逻辑编程语言和/或汇编/机器语言来实现。如本文所使用的，术语“机器可读介质”是指用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备，诸如例如磁盘、光盘、存储器和可编程逻辑器件(pld)，所述可编程处理器包括接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”是指用于向可编程处理器提供机器指令和/或数据的任何信号。机器可读介质可以非暂时地存储这样的机器指令，诸如例如可以是非暂时固态存储器或磁硬盘驱动器或任何等效存储介质。机器可读介质可以替代地或附加地以暂时方式存储这样的机器指令，诸如例如可以是处理器高速缓存或与一个或多个物理处理器核相关联的其他随机存取存储器。
36.为了提供与用户的交互，本文描述的主题的一个或多个方面或特征可以在计算机上实现，该计算机具有用于向用户显示信息的显示设备(诸如例如阴极射线管(crt)或液晶显示器(lcd)或发光二极管(led)监视器)以及用户可以用来向计算机提供输入的键盘和指示设备(诸如例如鼠标或跟踪球)。也可以使用其它种类的设备来提供与用户的交互。例如，提供给用户的反馈可以是任何形式的感觉反馈，诸如例如视觉反馈、听觉反馈或触觉反馈；
并且可以以任何形式接收来自用户的输入，包括但不限于声学、语音或触觉输入。其它可能的输入设备包括但不限于触摸屏或其它触敏设备，诸如单点或多点电阻或电容轨迹板、语音识别硬件和软件、光学扫描仪、光学指示器、数字图像补货设备和相关联的解释软件等。
37.本领域技术人员应当基于上述实施例理解本发明的另外的特征和优点。因此，本发明不受已经特别示出和描述的内容的限制，除非由所附权利要求指出。本文引用的所有出版物和参考文献明确地通过引用整体并入本文。