一种交通行为识别方法及装置、电子设备和存储介质与流程

技术特征：
1.一种交通行为识别方法，其特征在于，所述方法包括：获取待识别图像；确定所述待识别图像包括的车辆区域中，与所述待识别图像中的骑手区域关联的关联车辆区域，所述骑手区域包括车辆以及至少一人体；对所述骑手区域进行载人数量识别，得到载人数量识别结果，以及对所述关联车辆区域进行车辆类型识别，得到车辆类型识别结果；根据所述载人数量识别结果和所述车辆类型识别结果，确定所述骑手区域中的目标骑手是否存在违规载人行为。2.根据权利要求1所述的方法，其特征在于，所述确定所述待识别图像包括的车辆区域中，与所述待识别图像中的骑手区域关联的关联车辆区域，包括：对所述待识别图像进行检测，得到所述车辆区域以及所述骑手区域；确定得到的所述车辆区域中，与所述骑手区域重合度最大的目标车辆区域，并将所述目标车辆区域确定为与所述骑手区域关联的关联车辆区域。3.根据权利要求1所述的方法，其特征在于，所述确定所述待识别图像包括的车辆区域中，与所述待识别图像中的骑手区域关联的关联车辆区域，包括：对所述待识别图像进行检测，得到所述车辆区域以及所述骑手区域；通过预先训练的关联性分数预测模型，确定所述车辆区域与所述骑手区域之间的关联分数；将所述车辆区域中，与所述骑手区域关联分数最高的目标车辆区域，确定为与所述骑手区域关联的关联车辆区域。4.根据权利要求1所述的方法，其特征在于，所述对所述骑手区域进行载人数量识别，得到载人数量识别结果，包括：对所述骑手区域进行载人数量识别，得到载人数量以及对应的第一置信度；响应于所述第一置信度达到第一置信度阈值，将所述载人数量确定为所述骑手区域的载人数量识别结果；所述对所述关联车辆区域进行车辆类型识别，得到车辆类型识别结果，包括：对所述关联车辆区域进行车辆类型识别，得到车辆类型以及对应的第二置信度；响应于所述第二置信度达到第二置信度阈值，将所述车辆类型确定为所述车辆区域的车辆类型识别结果。5.根据权利要求1
‑
4任一所述的方法，其特征在于，所述根据所述载人数量识别结果和所述车辆类型识别结果，确定所述骑手区域中的目标骑手是否存在违规载人行为，包括：响应于所述载人数量识别结果为第一识别结果，确定所述目标骑手违规载人；所述第一识别结果表征载人数量达到第一预设数量；或者，响应于所述载人数量识别结果为第二识别结果，并且所述类型识别结果表征的车辆类型为预设的非机动车类型，确定所述目标骑手违规载人；所述第二识别结果表征载人数量达到第二预设数量，所述第二预设数量小于所述第一预设数量；或者，响应于所述载人数量识别结果表征的载人数量为所述第二识别结果，并且所述类型识别结果表征的车辆类型不是所述预设的非机动车类型，确定所述目标骑手并未违规载人；或者，
响应于所述载人数量识别结果为第三识别结果，确定所述目标骑手并未违规载人；所述第三识别结果表征载人数量为第三预设数量，所述第三预设数量小于所述第二预设数量；或者，响应于所述载人数量识别结果为第四识别结果，确定针对所述目标骑手的交通行为识别无效。6.根据权利要求5所述的方法，其特征在于，所述第四识别结果表征所述待识别图像出现以下至少一种无效场景：骑手推车的场景；骑手站立在车旁的场景；多个骑手相互紧靠的场景；低清晰度的场景；车辆被遮挡的场景。7.根据权利要求1
‑
6任一所述的方法，其特征在于，所述方法还包括：响应于所述目标骑手违规载人，发出告警信息。8.根据权利要求1
‑
6任一所述的方法，其特征在于，所述载人数量识别结果通过载人识别网络对所述骑手区域进行检测获得，其中，所述载人识别网络的训练方法如下：获取第一训练样本，所述第一训练样本包括多张骑手的样本图像以及对应每张图像的载人数量的第一标注信息，所述第一标注信息包括以下标签中的一种：1人、2人、3人、无效标签，所述无效标签包括以下中的至少一种情况：骑手推车、骑手站立在车旁、多个骑手相互紧靠、低清晰度、车辆被遮挡；将所述第一训练样本输入预设的第一初始网络，得到每张样本图像的样本载人数量识别结果；基于所述样本载人数量识别结果与所述第一标注信息确定的第一损失，优化所述第一初始网络，得到所述载人识别网络。9.根据权利要求1
‑
6任一所述的方法，其特征在于，所述车辆识别结果通过车辆识别网络对所述车辆区域进行检测获得，其中，所述车辆识别网络的训练方法如下：获取第二训练样本，所述第二训练样本包括多张车辆的样本图像以及对应每张图像的车辆类型的第二标注信息；将所述第二训练样本输入预设的第二初始网络，得到每张样本图像的样本车辆类型识别结果；基于所述样本车辆类型识别结果与所述第二标注信息确定的第二损失，优化所述第二初始网络，得到所述车辆识别网络。10.一种交通行为识别装置，其特征在于，所述装置包括：获取模块，用于获取待识别图像；第一确定模块，用于确定所述待识别图像包括的车辆区域中，与所述待识别图像中的骑手区域关联的关联车辆区域，所述骑手区域包括车辆以及至少一人体；识别模块，用于对所述骑手区域进行载人数量识别，得到载人数量识别结果，以及对所述关联车辆区域进行车辆类型识别，得到车辆类型识别结果；第二确定模块，用于根据所述载人数量识别结果和所述车辆类型识别结果，确定所述骑手区域中的目标骑手是否存在违规载人行为。11.一种电子设备，其特征在于，所述设备包括：处理器；
用于存储处理器可执行指令的存储器；其中，所述处理器通过运行所述可执行指令以实现如权利要求1
‑
9任一所述的交通行为识别方法。12.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序用于使处理器执行如权利要求1
‑
9任一所述的交通行为识别方法。

技术总结
本申请提出一种交通行为识别方法及装置、电子设备和存储介质。所述方法可以包括：获取待识别图像；确定所述待识别图像包括的车辆区域中，与所述待识别图像中的骑手区域关联的关联车辆区域，所述骑手区域包括车辆以及至少一人体；对所述骑手区域进行载人数量识别，得到载人数量识别结果，以及对所述关联车辆区域进行车辆类型识别，得到车辆类型识别结果；根据所述载人数量识别结果和所述车辆类型识别结果，确定所述骑手区域中的目标骑手是否存在违规载人行为。规载人行为。规载人行为。


技术研发人员：范佳柔 甘伟豪 武伟
受保护的技术使用者：浙江商汤科技开发有限公司
技术研发日：2021.07.30
技术公布日：2021/10/18