一种收台处理方法、装置和电子设备与流程

1.本发明涉及计算机技术领域，具体而言，涉及一种收台处理方法、装置和电子设备。


背景技术：

2.目前，用餐结束后的收拾餐桌(即收台)环节在餐饮行业运营过程中是一个非常关键的环节，收台效率的高低直接影响着翻台效率，收台过程通常需要工作人员在餐厅区域进行巡逻来发现即将收台以及立即可以收台的餐桌，然后通知收台人员完成收台动作。整个巡逻的过程中对于工作人员经验要求较高，对于巡逻人员的体力消耗也比较大。


技术实现要素：

3.为解决上述问题，本发明实施例的目的在于提供一种收台处理方法、装置和电子设备。
4.第一方面，本发明实施例提供了一种收台处理方法，包括：
5.当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，获取餐桌中心区域的顾客用餐图像；
6.根据获取到的所述顾客用餐图像，分析所述用餐区域内顾客的用餐意图；
7.根据得到的顾客的用餐意图，向收台人员发出收台指示信息。
8.第二方面，本发明实施例还提供了一种收台处理装置，包括：
9.获取模块，用于当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，获取餐桌中心区域的顾客用餐图像；
10.分析模块，用于根据获取到的所述顾客用餐图像，分析所述用餐区域内顾客的用餐意图；
11.指示收台模块，用于根据得到的顾客的用餐意图，向收台人员发出收台指示信息。
12.第三方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述第一方面所述的方法的步骤。
13.第四方面，本发明实施例还提供了一种电子设备，所述电子设备包括有存储器，处理器以及一个或者一个以上的程序，其中所述一个或者一个以上程序存储于所述存储器中，且经配置以由所述处理器执行上述第一方面所述的方法的步骤。
14.本发明实施例上述第一方面至第四方面提供的方案中，通过获取餐桌中心区域的顾客用餐图像，分析所述用餐区域内顾客的用餐意图，并根据得到的顾客的用餐意图，向收台人员发出收台指示信息，与相关技术中需要工作人员在餐厅区域内进行巡逻来发现即将收台以及立即可以收台的餐桌的方式相比，无需工作人员在餐厅区域内进行巡逻，就可以确定需要进行收台操作的餐桌，大大提高了餐厅的收台效率。
15.为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合
所附附图，作详细说明如下。
附图说明
16.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
17.图1示出了本发明实施例1所提供的一种收台处理方法的流程图；
18.图2示出了本发明实施例2所提供的一种收台处理装置的结构示意图；
19.图3示出了本发明实施例3所提供的一种电子设备的结构示意图。
具体实施方式
20.在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
21.此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
22.在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
23.目前，用餐结束后的收拾餐桌(即收台)环节在餐饮行业运营过程中是一个非常关键的环节，收台效率的高低直接影响着翻台效率，收台过程通常需要工作人员在餐厅区域进行巡逻来发现即将收台以及立即可以收台的餐桌，然后通知收台人员完成收台动作。整个巡逻的过程中对于工作人员经验要求较高，对于巡逻人员的体力消耗也比较大。
24.基于此，本实施例提出一种收台处理方法、装置和电子设备，通过获取餐桌中心区域的顾客用餐图像，分析所述用餐区域内顾客的用餐意图，并根据得到的顾客的用餐意图，向收台人员发出收台指示信息，无需工作人员在餐厅区域内进行巡逻，就可以确定需要进行收台操作的餐桌，大大提高了餐厅的收台效率。
25.本技术通过机器视觉对餐座就餐区域的视频信息进行学习判断，针对顾客的就餐动作、顾客有无等信息进行解析，最后实现智能化收台信息预判、收台消息通知。本技术是基于机器视觉的智能收台方法，具备省人力、识别精准、动态调配人员等优点，同时系统还能基于门店收台相关的数据信息不断学习，持续提升对收台需求识别的准确性。
26.本发明包括就餐进度识别、就餐动作识别、顾客有无识别、收台信息分析、收台通
知执行五个模块。就餐进度识别模块主要使用机器视觉对顾客累计就餐时间进行分析处理，根据就餐时间的不同划分出不同的就餐进度分层；就餐动作识别主要使用机器视觉对顾客的就餐动作进行解析，根据就餐动作划分出不同的就餐意图分层；顾客有无识别模块主要使用机器视觉对餐座区域就餐顾客是否全部离开进行判断，根据顾客有无判断顾客是否离开；收台信息分析模块主要利用就餐进度、就餐意图、就餐是否结束信息来对收台的时间进行判断，完成视觉信息转化为收台通知的时效信息；收台通知模块是根据收台分析结果，将收台指令传送给收台通知系统，收台通知系统执行收台通知，采用显示屏、对讲机耳麦以及蓝牙音箱的方式进行通知，确保通知的有效性。
27.为使本技术的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本技术做进一步详细的说明。
28.实施例1
29.本实施例提出的一种收台处理方法的执行主体是服务器。
30.所述服务器，可以是任何能够对图像进行处理分析的计算设备，这里不再一一赘述。
31.参见图1所示的一种收台处理方法的流程图，包括以下具体步骤：
32.步骤100、当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，获取餐桌中心区域的顾客用餐图像。
33.在上述步骤100中，利用预先设置在用餐区域的图像采集设备采集用餐区域图像，所述图像采集设备在采集到用餐区域图像后，会将采集到的用餐区域图像发送给所述服务器处理。
34.所述用餐区域，包括：餐桌和餐桌周围的座位。
35.所述服务器在获取到用餐区域图像后，通过运行在所述服务器自身的神经网络检测对顾客的头部进行检测，并利用所述服务器自身中构建的ssd、yolov5或者centernet等算法模型分析顾客的头部在所述用餐区域内持续出现的时间，当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，确定所述用餐区域内有顾客进行用餐活动。
36.所述时间长度阈值，用于表示顾客入座、点菜以及餐厅的上菜时间的总时间长度，可以设置为5分钟到20分钟中的任意时间长。
37.在一个实施方式中，服务器可以对餐厅内的用餐区域图像进行机器学习，确定出顾客入座、点菜以及餐厅上菜时间的时间长度的均值，将顾客入座、点菜以及餐厅上菜时间的时间长度的均值确定为所述时间长度阈值。
38.所述餐桌中心区域，就是位于餐桌中央的区域，一般在就餐过程中，会放置顾客就餐时食用的任何做好的食品或者烹饪食品的器具(如：火锅、电磁炉等)。
39.在确定所述用餐区域内有顾客进行用餐活动后，获取所述用餐区域图像携带的图像采集设备的设备标识，将所述设备标识对应的用餐区域的收台优先级设置为低优先级。从而在顾客用餐过程中，生成图像采集设备的设备标识与收台优先级的对应关系缓存在所述服务器中。
40.所述低优先级，用于表示所述设备标识对应的用餐区域的收台时间大于30分钟。
41.在上菜完毕后，当所述图像采集设备在所述餐桌中心区域检测到包括顾客头部或者顾客手部的顾客用餐图像时，说明顾客正在用餐。因此，服务器可以利用图像采集设备采
集到的顾客用餐图像，对所述用餐区域内顾客的用餐意图进行分析。
42.步骤102、根据获取到的所述顾客用餐图像，分析所述用餐区域内顾客的用餐意图。
43.在上述步骤102中，对所述用餐区域内顾客的用餐意图进行分析时，可以执行以下步骤(1)至步骤(3)：
44.(1)当距离上一次在所述顾客用餐图像中检测到顾客手部或者顾客头部的时间长度小于用餐时长阈值时，确定用餐区域内顾客的用餐意图为高意图等级；
45.(2)当距离上一次在所述顾客用餐图像中检测到顾客手部或者顾客头部的时间长度大于用餐时长阈值时，确定用餐区域内顾客的用餐意图为低意图等级；
46.(3)利用与所述低意图等级相匹配的收台优先级，对所述用餐区域的收台优先级进行更新，并获取用餐区域内的用餐区域图像。
47.在上述步骤(1)中，所述服务器利用服务器自身中构建的ssd、yolov5或者centernet等算法模型检测顾客用餐图像中出现顾客头部或者顾客手部的频率，当距离上一次在所述顾客用餐图像中检测到顾客手部或者顾客头部的时间长度小于用餐时长阈值时，确定用餐区域内顾客的用餐意图为高意图等级。
48.所述高意图等级，用于表示顾客正在用餐的过程中，并没有结束用餐活动的迹象。
49.所述用餐时长阈值，可以设置为2分钟到5分钟之间的任意时长，这里不再赘述。
50.所述服务器利用服务器自身中构建的ssd、yolov5或者centernet等算法模型检测顾客用餐图像中出现的顾客头部或者顾客手部的过程是现有技术，这里不再赘述。
51.在上述步骤(2)中，所述低意图等级，用于表示顾客正处于用餐活动的尾声，随时都有结束用餐活动的可能。
52.在上述步骤(3)中，与所述低意图等级相匹配的收台优先级，是中优先级。
53.所述中优先级，用于表示所述设备标识对应的用餐区域的收台时间小于30分钟，可以进行收台准备。
54.所述服务器中存储有低意图等级与中优先级的对应关系，所以，利用低意图等级，就可以查询出与所述低意图等级相匹配的收台优先级。然后从所述顾客用餐图像中获取到拍摄所述顾客用餐图像的图像采集设备的设备标识，并利用获取到的设备标识，查询出与该获取到的设备标识对应的用餐区域的收台优先级，并利用查询出与所述低意图等级相匹配的收台优先级，对与该获取到的设备标识对应的用餐区域的收台优先级进行调整。
55.由于已经将用餐区域中内餐桌的收台优先级调整为中优先级，所述服务器确定顾客正处于用餐活动的尾声，随时都有结束用餐活动的可能，所以，控制图像采集设备扩大观察区域，对用餐区域中内的用餐区域图像进行采集，以在根据用餐区域中内的用餐区域图像确定顾客离开用餐区域时，通知工作人员对用餐区域内的餐桌进行收台操作。
56.步骤104、根据得到的顾客的用餐意图，向收台人员发出收台指示信息。
57.在上述步骤104中，为了根据顾客用餐意图，向收台人员发出收台指示信息，可以执行以下步骤(1)至步骤(4)：
58.(1)当获取到所述用餐区域的结账信息且距离最后一次在所述用餐区域图像中检测到顾客的时间长度达到就餐结束时长阈值时，确定所述顾客在所述用餐区域内的就餐活动已经结束；
59.(2)将所述用餐区域的收台优先级调整为高优先级；
60.(3)获取拍摄所述用餐区域图像的图像采集设备的设备标识，并利用拍摄所述用餐区域图像的图像采集设备的设备标识生成收台指示信息；
61.(4)将生成的所述收台指示信息发送给所述收台人员。
62.在上述步骤(1)中，所述到就餐结束时长阈值，可以设置为1分钟至5分钟的任意时间长度，这里不再赘述。
63.所述用餐区域的结账信息，就是所述用餐区域内用餐的顾客在结账后得到的提示顾客已经结账的结账信息。所述用餐区域的结账信息，是与所述服务器交互的订单系统，在所述用餐区域内用餐的顾客结账后生成所述用餐区域内用餐的顾客的结账信息，并将生成的所述用餐区域内用餐的顾客的结账信息发送给服务器，使得服务器才获取到所述用餐区域的结账信息的。
64.在上述步骤(2)中，在确定所述顾客在所述用餐区域内的就餐活动已经结束后，服务器可以从图像采集设备所采集的用餐区域图像中获取到设备标识，然后利用该设备标识，查询出与该设备标识对应的收台优先级，并利用预设的高优先级对该设备标识对应的收台优先级进行更新。
65.所述高优先级，用于表示具有该收台优先级的餐桌可以立刻进行收台。
66.在上述步骤(3)中，在获取到拍摄所述用餐区域图像的图像采集设备的设备标识后，利用预先设置在服务器内的图像采集设备的设备标识与餐桌标识的对应关系，确定出当前立刻能够进行收台的餐桌的餐桌标识。然后，利用确定出的餐桌标识生成收台指示信息。
67.在一个实施方式中，所述收台指示信息，可以是但不限于:“xx号餐桌可以进行收台”、“请对xx号餐桌进行收台”。其中，所述收台指示信息中的“xx号”就是餐桌标识。
68.在上述步骤(4)中，在生成收台指示信息后，可以将收台指示信息转换成语音发送到进行收台工作的收台人员使用的对讲机上，以通知收台人员对收台指示信息指示的餐桌进行收台操作。
69.在进行完上述步骤(4)之后，还可以执行以下步骤(5)至步骤(6)：
70.(5)统计当前处于所述高优先级的餐桌数量；
71.(6)当统计得到的餐桌数量大于翻台餐桌阈值时，将所述收台指示信息发送给餐厅内除所述收台人员之外的其他工作人员。
72.在上述步骤(5)中，从存储的设备标识与收台优先级的对应关系中，获取所有的用餐区域的收台优先级，统计当前处于所述高优先级的用餐区域的数量，并将统计得到的当前处于所述高优先级的用餐区域的数量确定为当前处于所述高优先级的餐桌数量。
73.在上述步骤(6)中，所述翻台餐桌阈值，可以根据餐厅的大小以及收台人员的数量，设置为3至10之间的任意数值，这里不再赘述。
74.餐厅内除所述收台人员之外的其他工作人员，包括但不限于：传菜人员、引导人员、和礼仪人员。
75.综上所述，本实施例提出的收台处理方法，通过获取餐桌中心区域的顾客用餐图像，分析所述用餐区域内顾客的用餐意图，并根据得到的顾客的用餐意图，向收台人员发出收台指示信息，与相关技术中需要工作人员在餐厅区域内进行巡逻来发现即将收台以及立
即可以收台的餐桌的方式相比，无需工作人员在餐厅区域内进行巡逻，就可以确定需要进行收台操作的餐桌，大大提高了餐厅的收台效率。
76.实施例2
77.本实施例提出一种收台处理装置，用于执行上述的收台处理方法。
78.参见图2所示的一种收台处理装置的结构示意图，本实施例提出一种收台处理装置，包括：
79.获取模块200，用于当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，获取餐桌中心区域的顾客用餐图像；
80.分析模块202，用于根据获取到的所述顾客用餐图像，分析所述用餐区域内顾客的用餐意图；
81.指示收台模块204，用于根据得到的顾客的用餐意图，向收台人员发出收台指示信息。
82.所述分析模块202，具体用于：
83.当距离上一次在所述顾客用餐图像中检测到顾客手部或者顾客头部的时间长度大于用餐时长阈值时，确定用餐区域内顾客的用餐意图为低意图等级；
84.利用与所述低意图等级相匹配的收台优先级，对所述用餐区域的收台优先级进行更新，并获取用餐区域内的用餐区域图像。
85.所述指示收台模块204，具体用于：
86.当获取到所述用餐区域的结账信息且距离最后一次在所述用餐区域图像中检测到顾客的时间长度达到就餐结束时长阈值时，确定所述顾客在所述用餐区域内的就餐活动已经结束；
87.将所述用餐区域的收台优先级调整为高优先级；
88.获取拍摄所述用餐区域图像的图像采集设备的设备标识，并利用拍摄所述用餐区域图像的图像采集设备的设备标识生成收台指示信息；
89.将生成的所述收台指示信息发送给所述收台人员。
90.进一步地，本实施例提出的收台处理装置，还包括：
91.统计模块，用于统计当前处于所述高优先级的餐桌数量；
92.发送模块，用于当统计得到的餐桌数量大于翻台餐桌阈值时，将所述收台指示信息发送给餐厅内除所述收台人员之外的其他工作人员。
93.综上所述，本实施例提出的收台处理方法，通过获取餐桌中心区域的顾客用餐图像，分析所述用餐区域内顾客的用餐意图，并根据得到的顾客的用餐意图，向收台人员发出收台指示信息，与相关技术中需要工作人员在餐厅区域内进行巡逻来发现即将收台以及立即可以收台的餐桌的方式相比，无需工作人员在餐厅区域内进行巡逻，就可以确定需要进行收台操作的餐桌，大大提高了餐厅的收台效率。
94.实施例3
95.本实施例提出一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述实施例1描述的收台处理方法的步骤。具体实现可参见方法实施例1，在此不再赘述。
96.此外，参见图3所示的一种电子设备的结构示意图，本实施例还提出一种电子设
备，上述电子设备包括总线51、处理器52、收发机53、总线接口54、存储器55和用户接口56。上述电子设备包括有存储器55。
97.本实施例中，上述电子设备还包括：存储在存储器55上并可在处理器52上运行的一个或者一个以上的程序，经配置以由上述处理器执行上述一个或者一个以上程序用于进行以下步骤(1)至步骤(3)：
98.(1)当在用餐区域图像持续检测到顾客的时间长度达到时间长度阈值时，获取餐桌中心区域的顾客用餐图像；
99.(2)根据获取到的所述顾客用餐图像，分析所述用餐区域内顾客的用餐意图；
100.(3)根据得到的顾客的用餐意图，向收台人员发出收台指示信息。
101.收发机53，用于在处理器52的控制下接收和发送数据。
102.其中，总线架构(用总线51来代表)，总线51可以包括任意数量的互联的总线和桥，总线51将包括由处理器52代表的一个或多个处理器和存储器55代表的存储器的各种电路链接在一起。总线51还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起，这些都是本领域所公知的，因此，本实施例不再对其进行进一步描述。总线接口54在总线51和收发机53之间提供接口。收发机53可以是一个元件，也可以是多个元件，比如多个接收器和发送器，提供用于在传输介质上与各种其他装置通信的单元。例如：收发机53从其他设备接收外部数据。收发机53用于将处理器52处理后的数据发送给其他设备。取决于计算系统的性质，还可以提供用户接口56，例如小键盘、显示器、扬声器、麦克风、操纵杆。
103.处理器52负责管理总线51和通常的处理，如前述上述运行通用操作系统。而存储器55可以被用于存储处理器52在执行操作时所使用的数据。
104.可选的，处理器52可以是但不限于：中央处理器、单片机、微处理器或者可编程逻辑器件。
105.可以理解，本发明实施例中的存储器55可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(read
‑
only memory，rom)、可编程只读存储器(programmable rom，prom)、可擦除可编程只读存储器(erasable prom，eprom)、电可擦除可编程只读存储器(electrically eprom，eeprom)或闪存。易失性存储器可以是随机存取存储器(random access memory，ram)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的ram可用，例如静态随机存取存储器(static ram，sram)、动态随机存取存储器(dynamic ram，dram)、同步动态随机存取存储器(synchronous dram，sdram)、双倍数据速率同步动态随机存取存储器(double data rate sdram，ddrsdram)、增强型同步动态随机存取存储器(enhanced sdram，esdram)、同步连接动态随机存取存储器(synchlink dram，sldram)和直接内存总线随机存取存储器(direct rambus ram，drram)。本实施例描述的系统和方法的存储器55旨在包括但不限于这些和任意其它适合类型的存储器。
106.在一些实施方式中，存储器55存储了如下的元素，可执行模块或者数据结构，或者它们的子集，或者它们的扩展集：操作系统551和应用程序552。
107.其中，操作系统551，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序552，包含各种应用程序，例如媒体播
放器(media player)、浏览器(browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序552中。
108.综上所述，本实施例提出的计算机可读存储介质和电子设备，通过获取餐桌中心区域的顾客用餐图像，分析所述用餐区域内顾客的用餐意图，并根据得到的顾客的用餐意图，向收台人员发出收台指示信息，与相关技术中需要工作人员在餐厅区域内进行巡逻来发现即将收台以及立即可以收台的餐桌的方式相比，无需工作人员在餐厅区域内进行巡逻，就可以确定需要进行收台操作的餐桌，大大提高了餐厅的收台效率。
109.以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。