图像处理和人群密度估计方法、设备及存储介质与流程

技术特征：
1.一种图像处理方法，其特征在于，包括：获取待处理图像；对所述待处理图像进行主体密度估计，以得到所述待处理图像的第一密度图；对所述待处理图像进行主体识别，以确定所述待处理图像的主体区域；基于所述待处理图像的主体区域，对所述第一密度图进行滤波，以得到所述待处理图像的第二密度图。2.根据权利要求1所述的方法，其特征在于，所述对所述待处理图像进行主体识别，以确定所述待处理图像的主体区域，包括：将所述待处理图像输入骨干网络进行特征提取，以得到所述待处理图像的初始图像特征；利用第一分支网络，对所述初始图像特征进行主体识别，以得到所述待处理图像的主体区域。3.根据权利要求2所述的方法，其特征在于，所述利用第一分支网络，对所述初始图像特征进行主体识别，以得到所述待处理图像的主体区域，包括：将所述初始图像特征输入第一分支网络；在所述第一分支网络中，对所述初始图像特征进行卷积处理，以得到所述待处理图像的第一目标特征；其中，所述第一目标特征是所述待处理图像为主体或背景的特征体现；根据所述第一目标特征，获取所述待处理图像中属于主体的像素点；根据所述待处理图像中属于主体的像素点，确定所述待处理图像的主体区域。4.根据权利要求3所述的方法，其特征在于，所述根据所述第一目标特征，获取所述待处理图像中属于主体的像素点，包括：根据所述第一目标特征，计算所述待处理图像中的像素点属于主体和背景的概率；针对任一像素点，若该像素点属于主体的概率大于其属于背景的概率，则确定该像素点属于主体。5.根据权利要求2所述的方法，其特征在于，所述对所述待处理图像进行主体密度估计，以得到所述待处理图像的第一密度图，包括：利用第二分支网络，对所述初始图像特征进行主体密度估计，以得到所述第一密度图。6.根据权利要求5所述的方法，其特征在于，所述利用第二分支网络，对所述初始图像特征进行主体密度估计，以得到所述第一密度图，包括：将所述初始图像特征输入所述第二分支网络；在所述第二分支网络中，对所述初始图像特征进行卷积处理，以得到所述待处理图像的第二目标特征；其中，所述第二目标特征是所述待处理图像的主体密度的特征体现；根据所述第二目标特征，生成所述第一密度图。7.根据权利要求6所述的方法，其特征在于，所述基于所述待处理图像的主体区域，对所述第一密度图进行滤波，以得到所述待处理图像的第二密度图，包括：在所述第一分支网络中，基于所述待处理图像的主体区域，生成所述待处理图像的蒙版；所述待处理图像的蒙版中标注为1的区域与所述主体区域相对应；将所述蒙版与所述第一密度图相乘，得到所述第二密度图。8.根据权利要求7所述的方法，其特征在于，在基于所述待处理图像的主体区域，生成
所述待处理图像的蒙版之前，还包括：以联合损失函数最小化为训练目标，利用样本图像对初始网络模型进行联合训练，以得到所述骨干网络、第一分支网络和第二分支网络；其中，所述初始网络模型包括：初始特征提取网络、初始分割分支网络和初始密度估计分支网络；其中，所述联合损失函数是根据模型训练输出的蒙版与所述样本图像的蒙版真值图所确定的交叉熵函数，及模型训练输出的密度图和模型训练输出的蒙版的乘积与所述样本图像的密度真值图所确定均方差函数联合确定的。9.根据权利要求8所述的方法，其特征在于，还包括：获取所述样本图像的视度图；利用激励函数对所述样本图像的视度图进行尺度变换，以确定所述样本图像的主体区域；基于所述样本图像的主体区域，生成所述蒙版真值图。10.根据权利要求9所述的方法，其特征在于，所述激励函数为tanh函数或sigmoid函数。11.根据权利要求1-9任一项所述的方法，其特征在于，在基于所述主体区域，对所述第一密度图进行滤波之前，还包括：采用目标检测框对所述待处理图像的主体区域进行标注；显示标注有目标检测框的待处理图像，以供用户查看所述目标检测框是否满足要求。12.根据权利要求11所述的方法，其特征在于，还包括：响应于针对目标检测框的调整操作，获取调整后的目标检测框的空间信息；并将调整后的目标检测框的空间信息作为待处理图像的主体区域。13.根据权利要求1-10任一项所述的方法，其特征在于，还包括：对所述第二密度图进行求和，以确定所述待处理图像包含的主体的数量；和/或，根据所述第二密度图反应的主体密度分布情况，对所述待处理图像所采集的物理区域进行管控。14.根据权利要求13所述的方法，其特征在于，所述主体为人头。15.一种人群密度估计方法，其特征在于，包括：获取待处理图像；对所述待处理图像进行人群密度估计，以得到第一人群密度图；对所述待处理图像进行人头识别，以确定所述待处理图像的人头区域；基于所述待处理图像的人头区域，对所述第一人群密度图进行滤波，以得到第二人群密度图。16.根据权利要求15所述的方法，其特征在于，包括：对所述第二人群密度图进行求和，以确定所述待处理图像包含的人数；和/或，根据所述第二人群密度图反应的人群密度分布情况，对所述待处理图像所采集的物理区域进行人流管控。17.一种图像处理方法，其特征在于，包括：
响应于图像处理请求事件，获取待处理图像；对所述待处理图像进行主体密度估计，以得到所述待处理图像的第一密度图；对所述待处理图像进行主体识别，以确定所述待处理图像的主体区域；基于所述待处理图像的主体区域，对所述第一密度图进行滤波，以得到所述待处理图像的第二密度图。18.根据权利要求17所述的方法，其特征在于，还包括：将所述第二密度图提供给发起所述图像处理请求事件的请求方；和/或，对所述第二密度图进行求和，以确定所述待处理图像包含的主体的数量；将所述待处理图像包含的主体的数量提供给发起所述图像处理请求事件的请求方；和/或，根据所述第二密度图反应的主体密度分布情况，确定针对所述待处理图像所采集的物理区域的管控策略；将所述管控策略提供给发起所述图像处理请求事件的请求方。19.一种电子设备，其特征在于，包括：存储器和处理器；其中，所述存储器，用于存储计算机程序；所述处理器耦合至所述存储器，用于执行所述计算机程序以用于执行权利要求1-18任一项所述方法中的步骤。20.一种存储有计算机指令的计算机可读存储介质，其特征在于，当所述计算机指令被一个或多个处理器执行时，致使所述一个或多个处理器执行权利要求1-18任一项所述方法中的步骤。

技术总结
本申请实施例提供一种图像处理和人群密度估计方法、设备及存储介质。在本申请实施例中，一方面，对待处理图像进行主体识别，来确定待处理图像的主体区域；另一方面，对待处理图像进行主体密度估计，得到待处理图像的密度图；之后，基于待处理图像的主体区域，对密度图进行滤波，得到滤波后的密度图，降低了密度图的背景噪声，进而有助于提高主体密度估计的准确度，以及后续根据密度图进行主体计数的准确度。度。度。


技术研发人员：颜肇义
受保护的技术使用者：阿里巴巴集团控股有限公司
技术研发日：2020.09.28
技术公布日：2021/10/18