一种融合轻量级AI分割模型的远程超声会诊方法及系统与流程

摘要: 本发明涉及计算机视觉、人工智能、远程医疗和医学图像处理,具体为一种融合轻量级ai分割模型的远程超声会诊方法及系统。背景技术:1、现有技术中,部分方案尝试引入ai...
一种融合轻量级AI分割模型的远程超声会诊方法及系统与流程

本发明涉及计算机视觉、人工智能、远程医疗和医学图像处理,具体为一种融合轻量级ai分割模型的远程超声会诊方法及系统。

背景技术:

1、现有技术中,部分方案尝试引入ai图像分割模型辅助识别超声图像中的目标区域,但常规模型计算复杂度较高,对基层端设备算力和部署环境要求较高,难以在实时远程会诊场景中稳定运行。

2、同时,不同来源的超声图像帧在输入通道、图像尺寸和数据格式上存在差异,若缺少输入格式自适应处理,容易导致模型推理失败或分割结果无法准确回填。

3、此外,现有ai分割结果多以静态掩膜或单独预测图形式输出,难以与远程会诊影像流中的具体帧建立稳定关联,也难以支持专家端对分割结果进行交互式修正。

4、即使专家完成修正,修正结果也往往不能与会诊标注数据、报告字段和图层版本状态形成连续闭环,容易出现图层错位、版本冲突、标注不同步和报告生成效率低的问题。

技术实现思路

1、鉴于上述存在的问题,提出了本发明。

2、因此,本发明解决的技术问题是:现有的远程超声会诊与图像分割方法存在ai分割结果与会诊影像流割裂、分割模型计算复杂度高、基层端实时部署能力低,以及如何将轻量级ai分割结果转换为可交互分割图层并用于专家修正和会诊报告输出怎么实现的问题。

3、为解决上述技术问题,本发明提供如下技术方案:一种融合轻量级ai分割模型的远程超声会诊方法,包括获取超声图像帧并对超声图像帧进行输入格式自适应处理,将处理后的超声图像帧输入轻量级ai分割模型,生成分割预测图。

4、将分割预测图转换为可交互分割图层,将可交互分割图层与对应的超声图像帧叠加显示于会诊影像流中。

5、对可交互分割图层进行修正,根据修正后的可交互分割图层更新会诊标注数据并输出会诊报告。

6、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:还包括,在获取超声图像帧后生成与超声图像帧对应的ai分割任务包。

7、ai分割任务包包括,帧标识、会诊影像流标识、输入格式状态、模型版本标识、推理模式标识和推理结果回填状态。

8、通过推理模式标识区分实时全帧分割模式和关键帧按需分割模式。

9、通过推理结果回填状态标记分割预测图的转换状态。

10、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述对超声图像帧进行输入格式自适应处理包括,检测超声图像帧的实际输入通道数,将实际输入通道数与轻量级ai分割模型的预设输入通道参数进行匹配。

11、当实际输入通道数与预设输入通道参数不一致时,对超声图像帧进行通道转换处理,得到标准化输入图像。

12、将通道转换处理的类型和处理后的输入通道状态写入ai分割任务包的输入格式状态。

13、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述轻量级ai分割模型包括,轻量级多尺度编码器、瓶颈层、解码器和输出卷积层。

14、通过轻量级多尺度编码器对输入格式自适应处理后的超声图像帧进行逐级下采样并输出多级特征图。

15、通过瓶颈层对最深层特征图进行通道压缩和语义增强。

16、通过解码器融合上采样特征和对应尺度的跳跃连接特征。

17、通过输出卷积层将解码器输出的分割特征映射为分割预测图。

18、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:轻量级多尺度编码器输出至少五级不同空间分辨率的特征图。

19、五级不同空间分辨率的特征图按照编码深度划分为浅层特征图、中层特征图和深层特征图。

20、通过浅层特征图表征超声图像中的边缘纹理信息,通过中层特征图表征组织结构信息,通过深层特征图表征目标区域语义信息。

21、轻量级多尺度编码器的至少一个编码阶段设置有双卷积通道注意力机制,双卷积通道注意力机制根据通道间局部交互关系生成通道权重。

22、利用通道权重对对应尺度的特征图进行通道重标定。

23、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述解码器包括多个级联的上采样块。

24、每个上采样块对上一层输入特征执行上采样处理,将上采样后的特征与轻量级多尺度编码器中对应尺度的特征图进行空间尺寸对齐,在通道维度上进行拼接,得到混合特征。

25、对混合特征执行双卷积通道注意力处理,抑制不同尺度特征之间的冗余响应,增强目标边界相关通道,输出当前尺度的解码特征图。

26、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述将分割预测图转换为可交互分割图层包括,根据ai分割任务包中的帧标识、模型版本标识和分割预测图,生成分割图层状态对象。

27、在分割图层状态对象中写入掩膜数据、轮廓数据、目标类别标签、图层版本信息、置信度信息和修正状态信息。

28、将分割图层状态对象与对应的超声图像帧建立关联,使可交互分割图层随对应的超声图像帧在会诊影像流中同步显示和同步更新。

29、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述对可交互分割图层进行修正包括,接收针对分割图层状态对象的图层修正增量记录。

30、图层修正增量记录包括,编辑对象、编辑类型、编辑位置、编辑前图层版本和编辑后图层版本。

31、根据编辑前图层版本与当前图层版本进行版本一致性校验。

32、当版本一致性校验通过时,将图层修正增量记录写入分割图层状态对象,更新掩膜数据、轮廓数据或目标类别标签。

33、当版本一致性校验未通过时,生成图层冲突状态,触发重新同步或重新分割处理。

34、作为本发明所述的融合轻量级ai分割模型的远程超声会诊方法的一种优选方案,其中:所述更新会诊标注数据并输出会诊报告包括,从修正后的分割图层状态对象中提取目标类别标签、目标轮廓、目标区域位置、目标区域面积和修正状态信息。

35、设定报告字段映射规则,根据报告字段映射规则,将目标类别标签、目标轮廓、目标区域位置、目标区域面积和修正状态信息写入会诊标注数据中的对应字段。

36、当修正状态信息表示已确认时,根据会诊标注数据生成会诊报告。

37、当修正状态信息表示存在图层冲突或待复核时,在会诊报告中生成待复核标记或阻止对应字段进入确认状态。

38、本发明的另外一个目的是提供一种融合轻量级ai分割模型的远程超声会诊系统,其能通过图像帧获取、输入格式自适应、轻量级分割推理、图层转换显示、图层修正和标注报告输出的协同方案,解决了目前的远程超声会诊技术含有ai分割结果难以接入实时影像流、分割结果不可交互、专家修正结果难以同步回写会诊标注数据和会诊报告的问题。

39、作为本发明所述的融合轻量级ai分割模型的远程超声会诊系统的一种优选方案,其中:包括图像帧获取模块、输入适配模块、分割推理模块、图层转换模块、图层显示模块、图层修正模块、标注报告模块。

40、图像帧获取模块,用于获取超声图像帧。

41、输入适配模块,用于对超声图像帧进行输入格式自适应处理。

42、分割推理模块,用于将处理后的超声图像帧输入轻量级ai分割模型,生成分割预测图。

43、图层转换模块,用于将分割预测图转换为可交互分割图层。

44、图层显示模块,用于将可交互分割图层与对应的超声图像帧叠加显示于会诊影像流中。

45、图层修正模块,用于对可交互分割图层进行修正。

46、标注报告模块,用于根据修正后的可交互分割图层更新会诊标注数据并输出会诊报告。

47、本发明的有益效果:本发明提供的融合轻量级ai分割模型的远程超声会诊方法通过ai分割任务包和输入格式自适应处理,提高了不同来源超声图像帧接入轻量级ai分割模型的兼容性和推理结果回填准确性;通过轻量级多尺度编码、瓶颈层压缩和解码融合结构,降低了分割模型的计算负担并增强了超声目标区域的分割表达能力;通过将分割预测图转换为可交互分割图层,并结合图层版本校验、图层修正增量记录和报告字段映射规则,提高了远程会诊中ai预标注、专家修正和会诊报告输出之间的连续性。本发明在实时分割能力、基层端低资源部署能力以及远程会诊协同标注闭环方面都取得更加良好的效果。