一种医学影像报告的生成方法、装置、设备及介质与流程

摘要: 本申请涉及医学影像分析,尤其涉及一种医学影像报告的生成方法、装置、设备及介质。背景技术:1、随着医学影像大数据与深度学习技术的快速发展,基于医学大模型自动生成医...
一种医学影像报告的生成方法、装置、设备及介质与流程

本申请涉及医学影像分析,尤其涉及一种医学影像报告的生成方法、装置、设备及介质。

背景技术:

1、随着医学影像大数据与深度学习技术的快速发展,基于医学大模型自动生成医学影像报告已成为智能辅助诊断领域的重要研究方向。现有技术中,通常将ct等医学影像直接输入训练好的医学大模型,由模型自动识别影像中的异常区域并生成包含病灶描述、位置信息和诊断意见的初步诊断报告。此类方法无需人工逐条书写,能够显著提高报告撰写效率,在大规模体检筛查和基层医疗场景中具有广阔的应用前景。

2、然而,现有医学大模型在生成诊断报告时存在较为严重的幻觉问题。具体表现为:生成报告中出现影像中并不存在的病灶;病灶的位置描述与影像中的实际位置不符,例如将左肺病灶写为右肺病灶;病灶的类别描述与影像表现不一致,例如将胸腔积液描述为肺结节等。上述幻觉内容会直接误导临床决策,对患者安全构成潜在风险。而且,现有技术中针对报告生成结果的质控方法多局限于文本层面的规则校验或术语比对,无法有效识别和抑制空间错配以及无影像证据支撑的虚构描述。

技术实现思路

1、本申请提供了一种医学影像报告的生成方法、装置、设备及介质,该方法通过病灶检测网络为医学大模型生成的报告提供影像证据和空间坐标,并利用标准医学疾病词库及病灶区域影像和三维空间坐标进行校验,能够有效抑制医学大模型生成报告中的幻觉内容,提高诊断报告的准确性与可靠性。

2、根据本申请的一方面,提供了一种医学影像报告的生成方法,该方法包括:

3、获取ct三维影像并将所述ct三维影像输入病灶检测网络,得到所述ct三维影像中每个病灶的病灶区域影像和三维空间坐标;

4、将所述ct三维影像输入医学大模型中,生成初步诊断报告;

5、基于预先构建的标准医学疾病词库以及所述每个病灶的病灶区域影像和三维空间坐标,对所述初步诊断报告进行校验,在校验结果通过时将所述初步诊断报告作为输出诊断报告。

6、根据本申请的另一方面,提供了一种医学影像报告的生成装置,所述装置包括:

7、病灶检测模块,用于获取ct三维影像并将所述ct三维影像输入病灶检测网络,得到所述ct三维影像中每个病灶的病灶区域影像和三维空间坐标;

8、初步诊断模块,用于将所述ct三维影像输入医学大模型中,生成初步诊断报告;

9、诊断校验模块,用于基于预先构建的标准医学疾病词库以及所述每个病灶的病灶区域影像和三维空间坐标,对所述初步诊断报告进行校验,在校验结果通过时将所述初步诊断报告作为输出诊断报告。

10、根据本申请的另一方面,提供了一种电子设备,该设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本申请任一实施例所述的医学影像报告的生成方法。

11、根据本申请的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本申请任一实施例所述的医学影像报告的生成方法。

12、根据本申请的另一方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现本申请任一实施例所述的医学影像报告的生成方法。

13、本申请提供的技术方案,通过获取ct三维影像并将ct三维影像输入病灶检测网络,得到ct三维影像中每个病灶的病灶区域影像和三维空间坐标;将ct三维影像输入医学大模型中,生成初步诊断报告;基于预先构建的标准医学疾病词库以及每个病灶的病灶区域影像和三维空间坐标,对初步诊断报告进行校验,在校验结果通过时将初步诊断报告作为输出诊断报告。本技术方案,通过病灶检测网络为医学大模型生成的报告提供影像证据和空间坐标,并利用标准医学疾病词库及病灶区域影像和三维空间坐标进行校验,能够有效抑制医学大模型生成报告中的幻觉内容,提高诊断报告的准确性与可靠性。

14、应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。

1.一种医学影像报告的生成方法,其特征在于,包括:

2.根据权利要求1所述的医学影像报告的生成方法,其特征在于,所述医学大模型的训练过程,包括:

3.根据权利要求2所述的医学影像报告的生成方法,其特征在于,根据所述训练诊断报告中对各所述病灶的文本描述信息与所述病灶区域影像,确定空间一致性损失,包括:

4.根据权利要求3所述的医学影像报告的生成方法,其特征在于,根据各所述病灶的文字特征向量与视觉特征向量,确定空间一致性损失,包括:

5.根据权利要求1所述的医学影像报告的生成方法,其特征在于,基于预先构建的标准医学疾病词库以及所述每个病灶的病灶区域影像和三维空间坐标,对所述初步诊断报告进行校验,包括:

6.根据权利要求5所述的医学影像报告的生成方法,其特征在于,在基于预先构建的标准医学疾病词库以及所述每个病灶的病灶区域影像和三维空间坐标,对所述初步诊断报告进行校验之后,还包括:

7.根据权利要求1所述的医学影像报告的生成方法,其特征在于,所述标准医学疾病词库至少包括病灶名称、病灶征象术语、规范诊断术语,以及病症与器官位置之间的对应关系。

8.一种医学影像报告的生成装置,其特征在于,包括:

9.一种电子设备,其特征在于,所述设备包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的医学影像报告的生成方法。