一种三维医学影像动态可视化方法及系统与流程

摘要: 本技术涉及医学影像可视化领域,特别是涉及一种三维医学影像动态可视化方法及系统。背景技术:1、随着医学成像技术和计算机图形处理技术的发展,计算机断层扫描、磁共振成...
一种三维医学影像动态可视化方法及系统与流程

本技术涉及医学影像可视化领域,特别是涉及一种三维医学影像动态可视化方法及系统。

背景技术:

1、随着医学成像技术和计算机图形处理技术的发展,计算机断层扫描、磁共振成像等设备能够获取人体内部组织、器官及病灶的医学影像数据。为便于对医学影像数据进行观察和分析,现有技术通常通过图像处理、结构识别、三维重建及图形渲染等方式,将二维医学影像转换为三维可视化结果,并通过旋转、缩放、剖切、透明显示等交互方式呈现人体解剖结构及病灶信息。三维医学影像可视化技术已逐渐应用于辅助诊疗、手术规划、医学教学及医疗信息展示等场景。

2、目前,三维医学影像可视化通常根据医学影像中的器官、组织或病灶识别结果生成相应的三维模型,并在三维模型中显示病灶位置、尺寸及相关描述信息。然而,由于不同个体的体型及解剖结构存在差异,基于统一结构或预设模板生成的可视化结果有时难以充分反映医学影像所对应个体的实际结构特征;同时,医学影像的成像质量容易受到设备性能、扫描参数、患者体位及运动状态等因素影响,影像中可能存在噪声、模糊、伪影或局部信息不完整等情况,从而影响三维可视化结果的完整性和准确性。此外,同一对象在不同时间采集的医学影像可能存在空间位置、成像尺度及组织形态等差异,导致不同检查阶段的影像结果难以直接比较;现有可视化系统所展示的信息又多采用专业医学术语、数值参数或固定标签,非专业使用者理解难度较大,并且在视角变化或显示信息较多时,还可能出现标注内容遮挡、重叠或指向关系不清等现象。

3、因此,在医学影像三维可视化过程中,三维模型与个体解剖结构的适配性不足、低质量影像影响可视化结果的可靠性、不同时期医学影像难以进行一致性对比,以及医学信息展示的直观性和可理解性较差,成为亟需解决的问题。

技术实现思路

1、本技术提供一种三维医学影像动态可视化方法及系统,旨在解决现有技术在医学影像三维可视化过程中,三维模型与个体解剖结构的适配性不足、低质量影像影响可视化结果的可靠性、不同时期医学影像难以进行一致性对比,以及医学信息展示的直观性和可理解性较差的问题。

2、第一方面,一种三维医学影像动态可视化方法,所述方法包括:

3、获取目标对象的医学影像数据以及与所述医学影像数据关联的医学文本信息;

4、从所述医学影像数据中提取解剖地标点、解剖结构区域和病灶区域,根据所述解剖地标点与预设三维参考模型中的参考地标点之间的对应关系,对所述预设三维参考模型进行非刚性变形,得到与所述目标对象相适配的个体化三维模型,并将所述解剖结构区域和所述病灶区域映射至所述个体化三维模型;

5、识别所述医学文本信息中的医学术语,根据医学术语知识库确定所述医学术语对应的通俗解释信息;

6、根据所述病灶区域在所述个体化三维模型中的空间位置确定标签锚点,将所述医学术语和所述通俗解释信息中的至少一种确定为标签内容,并基于所述标签锚点和所述标签内容生成与所述病灶区域关联的标签;

7、对关联有所述病灶区域和所述标签的个体化三维模型进行动态渲染,确定各所述标签在当前显示视角下的屏幕投影区域,根据各所述标签的屏幕投影区域检测标签重叠情况,并在存在标签重叠时调整至少一个重叠标签的显示位置,同时保持所述重叠标签与对应标签锚点之间的引导关系,得到三维医学影像动态可视化结果。

8、上述方案中,可选地,所述从所述医学影像数据中提取解剖地标点、解剖结构区域和病灶区域,根据所述解剖地标点与预设三维参考模型中的参考地标点之间的对应关系,对所述预设三维参考模型进行非刚性变形,得到与所述目标对象相适配的个体化三维模型,并将所述解剖结构区域和所述病灶区域映射至所述个体化三维模型,包括:

9、对所述医学影像数据进行解剖结构分割和病灶分割,得到解剖结构分割结果和病灶分割结果,并分别根据所述解剖结构分割结果和所述病灶分割结果确定所述解剖结构区域和所述病灶区域;

10、对所述医学影像数据进行解剖地标检测,得到由多个目标地标点构成的目标地标点集合;

11、从所述预设三维参考模型中获取与各所述目标地标点具有相同解剖语义的参考地标点,建立各所述目标地标点与对应参考地标点之间的地标对应关系;

12、根据所述地标对应关系确定由所述预设三维参考模型指向所述目标对象的非刚性空间变换关系;

13、根据所述非刚性空间变换关系对所述预设三维参考模型进行空间变形,得到所述个体化三维模型;

14、根据所述解剖结构区域和所述病灶区域在所述医学影像数据对应的影像坐标系中的空间坐标,以及所述非刚性空间变换关系,确定所述解剖结构区域和所述病灶区域在所述个体化三维模型中的映射位置,并按照所述映射位置将所述解剖结构区域和所述病灶区域映射至所述个体化三维模型。

15、上述方案中,可选地,所述根据所述地标对应关系确定由所述预设三维参考模型指向所述目标对象的非刚性空间变换关系,并根据所述非刚性空间变换关系对所述预设三维参考模型进行空间变形,得到所述个体化三维模型,包括:

16、将各所述参考地标点确定为源控制点,并将与各所述参考地标点对应的目标地标点确定为目标控制点,得到控制点对集合;

17、根据所述控制点对集合中各控制点对的空间坐标差异构建薄板样条空间变换函数,得到所述非刚性空间变换关系;

18、根据所述非刚性空间变换关系对所述预设三维参考模型进行初始变形,得到初始变形模型;

19、获取统计形状模型所限定的解剖形态分布范围,得到解剖形态约束信息;

20、根据所述解剖形态约束信息对所述初始变形模型进行形态约束,得到所述个体化三维模型。

21、上述方案中,可选地,在从所述医学影像数据中提取所述解剖地标点、所述解剖结构区域和所述病灶区域之前,还包括:

22、对所述医学影像数据进行影像质量评估,得到影像质量评估结果;

23、根据所述影像质量评估结果确定所述医学影像数据中的质量异常区域;

24、在所述质量异常区域存在具有解剖对应关系的对侧区域时,从所述医学影像数据中提取所述对侧区域,得到对侧解剖参考区域;

25、对所述对侧解剖参考区域进行镜像变换,得到映射至所述质量异常区域所在解剖侧的镜像参考区域;

26、对所述镜像参考区域与所述质量异常区域进行空间配准,得到与所述质量异常区域相适配的修复候选区域;

27、将所述修复候选区域与所述医学影像数据中的非异常影像区域进行影像融合,得到修复医学影像,并将所述修复医学影像作为用于提取所述解剖地标点、所述解剖结构区域和所述病灶区域的医学影像数据。

28、上述方案中,可选地,所述对所述医学影像数据进行影像质量评估,得到影像质量评估结果,包括:

29、将所述医学影像数据划分为多个待评估影像区域,得到待评估影像区域集合;

30、分别提取所述待评估影像区域集合中各待评估影像区域的影像质量特征,得到影像质量特征集合;所述影像质量特征包括信噪比、边缘清晰度和纹理清晰度中的至少两种;

31、将各所述待评估影像区域的影像质量特征与预设质量判定条件进行比较,得到各所述待评估影像区域对应的质量判定结果;

32、根据各所述质量判定结果确定质量异常的待评估影像区域,生成质量异常区域掩膜,并根据所述质量异常区域掩膜确定所述质量异常区域;

33、所述对所述镜像参考区域与所述质量异常区域进行空间配准,得到与所述质量异常区域相适配的修复候选区域,包括:

34、提取所述镜像参考区域和所述质量异常区域的解剖边界及纹理特征,得到区域配准特征;

35、根据所述区域配准特征对所述镜像参考区域进行非刚性配准,得到所述修复候选区域;

36、所述将所述修复候选区域与所述医学影像数据中的非异常影像区域进行影像融合,得到修复医学影像,包括:

37、根据所述质量异常区域掩膜确定所述修复候选区域对应的融合区域;

38、在所述融合区域内,将所述修复候选区域与位于所述融合区域边界外侧的非异常影像区域进行泊松融合,得到所述修复医学影像。

39、上述方案中,可选地,所述医学影像数据包括当前医学影像和至少一期历史医学影像,所述方法还包括:

40、分别从所述当前医学影像和所述历史医学影像中提取对应解剖结构及用于表征生理状态的生理相位特征,得到跨期配准参考信息;

41、根据所述跨期配准参考信息对所述当前医学影像和所述历史医学影像进行初始空间配准,得到初始对齐影像组;

42、对所述初始对齐影像组进行非刚性配准,并根据所述生理相位特征对非刚性配准结果进行生理相位校正,得到跨期对齐影像组;

43、基于所述跨期对齐影像组,分别确定当前期病灶掩膜和历史期病灶掩膜,得到跨期病灶掩膜组;

44、根据所述跨期病灶掩膜组确定所述病灶区域的尺寸变化、体积变化和空间位置变化中的至少一种,得到病灶跨期变化信息;

45、将所述当前期病灶掩膜和所述历史期病灶掩膜分别映射至所述个体化三维模型,得到当前期病灶模型区域和历史期病灶模型区域;

46、根据所述当前期病灶模型区域和所述历史期病灶模型区域之间的空间关系,确定病灶重叠区域和病灶变化区域,得到跨期病灶对比数据;

47、根据所述跨期病灶对比数据和所述病灶跨期变化信息,为所述当前期病灶模型区域、所述历史期病灶模型区域、所述病灶重叠区域和所述病灶变化区域设置相互区分的显示属性,得到跨期病灶显示数据;

48、在相同显示视角和显示尺度下,对所述跨期病灶显示数据进行分屏显示、叠加显示或时间序列切换显示,得到病灶跨期动态对比结果。

49、上述方案中,可选地,所述对所述医学影像数据进行病灶分割,得到病灶分割结果,包括:

50、将所述医学影像数据输入病灶分割模型进行病灶分割,得到初始病灶分割结果;

51、对所述初始病灶分割结果进行分割质量评估,得到分割置信度;

52、将所述分割置信度与预设置信度阈值进行比较,得到分割复核判定结果;

53、在所述分割复核判定结果表征所述分割置信度低于所述预设置信度阈值时,将所述初始病灶分割结果发送至复核终端,并获取针对所述初始病灶分割结果的人工修正信息;

54、根据所述人工修正信息对所述初始病灶分割结果进行修正,得到所述病灶分割结果;

55、根据所述医学影像数据、所述人工修正信息和所述病灶分割结果构建增量训练样本,并根据所述增量训练样本对所述病灶分割模型进行增量训练,得到更新后的病灶分割模型。

56、上述方案中,可选地,所述识别所述医学文本信息中的医学术语,根据医学术语知识库确定所述医学术语对应的通俗解释信息,包括:

57、将所述医学文本信息输入医学命名实体识别模型进行医学实体识别,得到由至少一个医学术语实体构成的医学术语实体集合;

58、根据所述医学术语知识库中的标准术语、同义术语和医学编码之间的映射关系,对所述医学术语实体集合进行术语标准化,得到标准医学术语集合;

59、以所述标准医学术语集合中的各标准医学术语为查询条件查询所述医学术语知识库,得到各所述标准医学术语对应的通俗解释信息;

60、获取从专业显示模式、通俗显示模式和混合显示模式中选定的当前显示模式;

61、在所述当前显示模式为专业显示模式时,将所述标准医学术语确定为所述标签内容;在所述当前显示模式为通俗显示模式时,将所述通俗解释信息确定为所述标签内容;在所述当前显示模式为混合显示模式时,将所述标准医学术语和所述通俗解释信息进行组合,得到所述标签内容。

62、上述方案中,可选地,所述确定各所述标签在当前显示视角下的屏幕投影区域,根据各所述标签的屏幕投影区域检测标签重叠情况,并在存在标签重叠时调整至少一个重叠标签的显示位置,包括:

63、在所述个体化三维模型的每一渲染帧中,根据当前显示视角将各所述标签锚点的三维空间坐标转换为屏幕投影坐标,得到标签投影坐标集合;

64、根据各所述标签对应的标签投影坐标、标签内容和标签显示尺寸,确定各所述标签对应的屏幕投影包围盒;

65、分别计算各所述屏幕投影包围盒与其他屏幕投影包围盒之间的交叠面积,并将交叠面积大于预设重叠阈值的标签确定为重叠标签,得到重叠标签组;

66、根据所述重叠标签组中各标签锚点与当前虚拟相机之间的距离,对所述重叠标签组中的标签进行深度排序,得到标签避让优先级;

67、按照所述标签避让优先级保留优先级较高标签的显示位置,并在预设显示边界和最大偏移距离的约束下,沿预设偏移方向按照预设偏移步长调整优先级较低标签的显示位置,直至任意两个调整后的屏幕投影包围盒之间的交叠面积不大于所述预设重叠阈值,或所述优先级较低标签的偏移距离达到所述最大偏移距离,得到标签避让位置;

68、根据所述标签避让位置更新各所述标签与对应标签锚点之间的引导线,并根据所述标签避让位置与对应标签锚点之间的距离调整所述引导线的线宽,得到标签避让后的三维医学影像动态可视化结果。

69、第二方面,一种三维医学影像动态可视化系统,所述系统包括:

70、数据获取模块,用于获取目标对象的医学影像数据以及与所述医学影像数据关联的医学文本信息;

71、个体化配准模块,用于从所述医学影像数据中提取解剖地标点、解剖结构区域和病灶区域,根据所述解剖地标点与预设三维参考模型中的参考地标点之间的对应关系,对所述预设三维参考模型进行非刚性变形,得到与所述目标对象相适配的个体化三维模型,并将所述解剖结构区域和所述病灶区域映射至所述个体化三维模型;

72、术语通俗化模块,用于识别所述医学文本信息中的医学术语,并根据医学术语知识库确定所述医学术语对应的通俗解释信息;

73、标签生成模块,用于根据所述病灶区域在所述个体化三维模型中的空间位置确定标签锚点,将所述医学术语和所述通俗解释信息中的至少一种确定为标签内容,并基于所述标签锚点和所述标签内容生成与所述病灶区域关联的标签;

74、动态渲染模块,用于对关联有所述病灶区域和所述标签的个体化三维模型进行动态渲染,确定各所述标签在当前显示视角下的屏幕投影区域,根据各所述标签的屏幕投影区域检测标签重叠情况,并在存在标签重叠时调整至少一个重叠标签的显示位置,同时保持所述重叠标签与对应标签锚点之间的引导关系,得到三维医学影像动态可视化结果。

75、相比现有技术,本技术至少具有以下有益效果:

76、本技术基于对现有技术问题的进一步分析和研究,认识到现有技术在医学影像三维可视化过程中,三维模型与个体解剖结构的适配性不足、低质量影像影响可视化结果的可靠性、不同时期医学影像难以进行一致性对比,以及医学信息展示的直观性和可理解性较差的问题,通过获取目标对象的医学影像数据及关联的医学文本信息,从医学影像数据中提取解剖地标点、解剖结构区域和病灶区域,并依据解剖地标点与预设三维参考模型中参考地标点之间的对应关系对预设三维参考模型进行非刚性变形,使所生成的个体化三维模型能够适配目标对象的实际解剖结构,再将解剖结构区域和病灶区域映射至该个体化三维模型,由此建立病灶影像信息与目标对象个体化解剖空间之间的对应关系,降低采用通用三维模型时病灶展示位置与个体实际结构不匹配的问题;在此基础上,通过识别医学文本信息中的医学术语并利用医学术语知识库确定对应的通俗解释信息,使专业医学信息能够转换为更易理解的标签内容,并根据病灶区域在个体化三维模型中的空间位置确定标签锚点,使标签内容与病灶区域形成明确的空间关联;进一步地,在对个体化三维模型进行动态渲染时,根据各标签在当前显示视角下的屏幕投影区域检测标签重叠情况,并对重叠标签的显示位置进行调整,同时保持标签与对应标签锚点之间的引导关系,从而在模型旋转、缩放等视角变化过程中减少标签遮挡、重叠及指向混淆,提高病灶位置、解剖结构和医学解释信息的显示清晰度与对应准确性,进而改善三维医学影像与个体解剖结构适配性不足以及医学信息展示直观性、可辨识性和可理解性较差的问题。