吊装状态的确定方法、装置、电子设备和可读存储介质与流程

技术特征：

1.一种吊装状态的确定方法，其特征在于，所述方法包括：

获取拍摄装置发送的包含吊装场景的二维图像；

在确定所述二维图像中包括目标吊件的情况下，通过语义分割技术得到所述目标吊件在所述二维图像中的目标面积和目标二维坐标，其中，所述目标吊件为目标吊臂或目标吊物；

通过透视变换方案确定所述目标吊件在实际空间中的目标三维坐标，其中，所述目标二维坐标和所述目标面积用于确定所述目标吊件在所述目标三维坐标中的景深坐标和高度坐标；

根据所述目标三维坐标确定所述目标吊件当前的吊装状态。

2.根据权利要求1所述的方法，其特征在于，通过语义分割技术得到所述目标吊件在所述二维图像中的目标面积和目标二维坐标之前，所述方法还包括：

将所述二维图像输入目标检测模型，得到所述目标检测模型输出检测结果；

在所述检测结果为所述目标吊件的检测框的情况下，确定所述二维图像中包括所述目标吊件，其中，所述检测框中包含所述目标吊件的目标图像；

将所述目标图像从所述二维图像中切分出来。

3.根据权利要求2所述的方法，其特征在于，所述通过语义分割技术得到所述目标吊件在所述二维图像中的目标面积包括：

将所述目标图像输入语义分割模型，得到所述语义分割模型输出的二维矩阵元素，其中，每个所述二维矩阵元素用于指示所述二维图像中的一个像素点，每个所述像素点具有对应的类别标签；

根据所述类别标签确定所述目标吊件的目标像素点；

将所述目标像素点的像素数量作为所述目标吊件的目标面积。

4.根据权利要求2所述的方法，其特征在于，所述通过语义分割技术得到所述目标吊件在所述二维图像中的目标二维坐标包括：

确定所述检测框在所述二维图像中的第一二维坐标，和所述目标吊件在所述检测框中的第二二维坐标；

将所述第一二维坐标和所述第二二维坐标的加和结果，作为所述目标吊件在所述二维图像中的目标二维坐标。

5.根据权利要求1所述的方法，其特征在于，通过透视变换方案确定所述目标吊件在实际空间中的目标三维坐标之前，所述方法还包括：

确定样本吊件在在实际空间中的样本高度坐标和样本景深坐标；

通过拍摄装置获取所述样本高度坐标、所述样本景深坐标对应的样本二维图像；

通过目标检测模型和所述语义分割技术，得到所述样本吊件在所述样本二维图像中的样本面积和样本二维坐标；

建立所述样本高度坐标、所述样本景深坐标和所述样本面积、所述样本二维坐标之间的对应关系，并将所述对应关系保存在数据库中。

6.根据权利要求1所述的方法，其特征在于，所述根据所述目标三维坐标确定所述目标吊件当前的吊装状态包括：

根据所述目标三维坐标中的横向坐标和景深坐标，确定所述目标吊件位于吊装区域中的情况下，获取所述目标吊件的高度坐标；

在确定所述高度坐标超过第一高度阈值的情况下，确定所述目标吊件当前处于已吊装状态。

7.根据权利要求6所述的方法，其特征在于，获取所述目标吊件的高度坐标之后，所述方法还包括：

在确定所述高度坐标大于第二高度阈值且小于所述第一高度阈值的情况下，获取所述目标吊件的目标正斜率，其中，所述目标吊件为为呈横向设置的条状物体，所述目标正斜率用于指示所述目标吊件的倾斜程度；

在所述目标正斜率满足预设斜率范围的情况下，确定所述目标吊件当前处于已吊装状态。

8.一种吊装状态的确定装置，其特征在于，所述装置包括：

获取模块，获取拍摄装置发送的包含吊装场景的二维图像；

得到模块，用于在确定所述二维图像中包括目标吊件的情况下，通过语义分割技术得到所述目标吊件在所述二维图像中的目标面积和目标二维坐标，其中，所述目标吊件为目标吊臂或目标吊物；

第一确定模块，用于通过透视变换方案确定所述目标吊件在实际空间中的目标三维坐标，其中，所述目标二维坐标和所述目标面积用于确定所述目标吊件在所述目标三维坐标中的景深坐标和高度坐标；

第二确定模块，用于根据所述目标三维坐标确定所述目标吊件当前的吊装状态。

9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；

存储器，用于存放计算机程序；

处理器，用于执行存储器上所存放的程序时，实现权利要求1-7任一所述的方法步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-7任一所述的方法步骤。

技术总结
本申请提供了一种吊装状态的确定方法、装置、电子设备和可读存储介质，属于吊装技术领域。所述方法包括：获取拍摄装置发送的包含吊装场景的二维图像；在确定所述二维图像中包括目标吊件的情况下，通过语义分割技术得到所述目标吊件在所述二维图像中的目标面积和目标二维坐标，其中，所述目标吊件为目标吊臂或目标吊物；通过透视变换方案确定所述目标吊件在实际空间中的目标三维坐标，其中，所述目标二维坐标和所述目标面积用于确定所述目标吊件在所述目标三维坐标中的景深坐标和高度坐标；根据所述目标三维坐标确定所述目标吊件当前的吊装状态。本申请在无法提供额外信号支持的场景内，提高检测吊件的吊装状态的准确性。

技术研发人员：丁皓;丁宏翔;顾锡昌;
受保护的技术使用者：苏州方兴信息技术有限公司;
技术研发日：2021.11.02
技术公布日：2022.02.01