内窥镜视频的尺寸评估方法、计算机设备和内窥镜系统与流程

本申请涉及图像处理，特别是涉及一种内窥镜视频的尺寸评估方法、计算机设备和内窥镜系统。

背景技术：

1、内窥镜是一种在临床上被广泛使用的诊断和辅助治疗设备，该设备可以经人体的自然腔道或者是手术切口进入人体内，减少伤口对人体的二次破坏，能清晰逼真地显示解剖结构，辅助医生看到x射线不能显示的人体内病变。

2、在利用内窥镜诊疗过程中，经常需要针对特定的生理组织观察或操作。例如常见的消化内镜检查过程中，医护人员需要对消化道内的各类病灶（如息肉或癌变组织）进行观察或切除等操作。其中，对生理组织尺寸的评估是在观察或操作过程中极为重要的一环，准确的生理组织尺寸评估（以下简称为尺寸评估），可以极大地帮助医护人员进行相关的临床评估或治疗。

3、当前的医学内窥镜诊疗中，为了帮助医护人员进行尺寸评估，一种可选的做法是针对内窥镜图像进行的生理组织识别，并同步识别生理组织的尺寸大小，再将尺寸大小以数字的方式展示给医护人员查看。这种方式可以实现对尺寸的评估，但存在明显的缺陷，即难以满足实际临床场景中对生理组织更加精细化的尺寸评估需求。

4、基于上述情况可知，实际应用中需要一种可以帮助医护人员全面、准确评估生理组织尺寸的内窥镜视频的尺寸评估方法。

技术实现思路

1、基于此，有必要针对上述技术问题，提供一种可以帮助医护人员对待测量对象进行更加全面、准确的内窥镜视频的尺寸评估方法、装置、计算机设备和内窥镜系统。

2、本申请提供的一种内窥镜视频的尺寸评估方法，方法包括：

3、对内窥镜视频中的待测量对象进行三维建模，得到待测量对象的三维模型。

4、确定出三维模型的三维包围框，以及三维包围框的长、宽和高的尺寸。

5、控制在显示装置的内窥镜显示界面中显示带有三维包围框的三维模型。三维包围框的长、宽和高上分别显示有各自尺寸对应的标尺，标尺包括多个刻度条。内窥镜视频和三维模型在内窥镜显示界面中的显示位置不同。

6、相对上述相关技术，本申请实施例至少具有以下优势：

7、优势1：尺寸评估的全面性更佳，有助于医护人员评估待测量对象（包括生理组织）三维或二维的局部细节尺寸和整体尺寸，而不是仅能知道一个整体尺寸。优势2：尺寸评估更加直观且操作方便。相对二维图像而言，三维模型对待测量对象局部和整体的展示更为直观。同时结合长宽高上的刻度条，医护人员想关注待测量对象任何角度或位置的细节情况，都可以在三维模型上快速实现。相对二维图像上直接显示整体尺寸而言，本申请实施例的操作方便且信息反馈直观可察，无需反反复复地操作调整内窥镜头端部位置和角度。优势3：尺寸评估的准确性更高。一方面如优势1和优势2中所述，相对二维图像而言，三维模型对待测量对象的展示更为直观且细节丰富清晰，医护人员可以更好地分辨出待检测对象不同的局部细节情况。在此基础上结合长宽高上的刻度条信息，可以快速准确地实现对待测量对象局部细节的精准评估。另一方面，本申请实施例标注的是待测量对象三维包围框的尺寸，同时还维持着对内窥镜视频的同步显示。在此基础上，即使对待测量对象本身识别和分割存在一定的偏差，医护人员依然可以根据内窥镜视频中待测量对象的情况、三维模型的情况以及对应刻度条来准确评估其整体尺寸。相对无刻度条，仅能反馈整体尺寸数值的情况而言，本申请实施例受到识别算法精度的干扰影响大大降低。

8、在其中一个实施例中，对所述三维模型的显示模式包括第一显示模式，当处于第一显示模式时，三维模型的显示视角，与内窥镜视频中对待测量对象的观察视角实时同步。

9、在其中一个实施例中，对所述三维模型的显示模式包括第二显示模式，当处于第二显示模式时，响应于用户对三维模型的控制指令，根据控制指令对三维模型进行目标操作，目标操作包括旋转、缩放和平移中的任意操作。

10、在其中一个实施例中，当三维模型的显示视角发生变化时，更新三维模型的三维包围框，以使得更新后的三维包围框的坐标轴与显示装置的显示屏幕坐标系对齐。

11、在其中一个实施例中，响应于用户输入的单位调整指令，将标尺的刻度单位调整为单位调整指令关联的刻度单位，并根据调整后的刻度单位调整标尺中刻度条的数量。

12、在其中一个实施例中，在三维包围框的第一矩形面的长和宽上显示有间距均匀的刻度条，第一矩形面为三维包围框中正对用户视野的矩形面。

13、在其中一个实施例中，在控制在内窥镜显示界面中显示带有三维包围框的三维模型之前，还包括：

14、确定出刻度条在三维包围框的长、宽和高上显示时的默认刻度单位，其中默认刻度单位与三维包围框的整体尺寸呈正相关。

15、在其中一个实施例中，默认刻度单位大于或等于预设的最小单位阈值，最小单位阈值根据预设的最小像素点数在显示装置中对应的显示尺寸确定。

16、在其中一个实施例中，响应于用户的显示模式切换指令，切换至第二显示模式。其中，当进入第二显示模式时，控制在内窥镜显示界面中放大三维模型及三维包围框的显示尺寸，并缩小内窥镜视频的显示尺寸。

17、在其中一个实施例中，当处于第二显示模式时，输出模型数据缺失预警。模型数据缺失预警用于提示用户三维模型存在数据缺失风险。

18、当检测到内窥镜视频更新时，基于更新后的内窥镜视频，对三维模型进行更新。

19、一种尺寸评估装置，装置包括：

20、三维建模模块，用于对内窥镜视频中的待测量对象进行三维建模，得到待测量对象的三维模型。

21、包围框确定模块，用于确定出三维模型的三维包围框，以及三维包围框的长、宽和高的尺寸。

22、显示控制模块，用于控制在显示装置的内窥镜显示界面中显示带有三维包围框的三维模型。三维包围框的长、宽和高上分别显示有各自尺寸对应的标尺，标尺包括多个刻度条。内窥镜视频和三维模型在内窥镜显示界面中的显示位置不同。

23、一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述各个内窥镜视频的尺寸评估方法实施例的步骤。

24、一种内窥镜系统，包括：内窥镜、图像处理设备、光源设备、显示装置以及上述实施例的计算机设备。

25、一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述各个内窥镜视频的尺寸评估方法实施例的步骤。

26、上述尺寸评估装置、计算机设备、内窥镜系统和存储介质的有益效果，可以参考上述内窥镜视频的尺寸评估方法实施例的相关说明。

1.一种内窥镜视频的尺寸评估方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述默认刻度单位大于或等于预设的最小单位阈值，所述最小单位阈值根据预设的最小像素点数在所述显示装置中对应的显示尺寸确定。

3.根据权利要求1所述的方法，其特征在于，还包括：

4.根据权利要求1所述的方法，其特征在于，还包括：

5.根据权利要求1至4任一所述的方法，其特征在于，在所述控制在显示装置的内窥镜显示界面中显示带有所述三维包围框的所述三维模型之后，还包括：

6.根据权利要求1至4任一所述的方法，其特征在于，所述对内窥镜视频中的待测量对象进行三维建模，得到所述待测量对象的三维模型，包括：

7.根据权利要求1所述的方法，其特征在于，对所述三维模型的显示模式包括第一显示模式，所述方法还包括：

8.根据权利要求1或7所述的方法，其特征在于，对所述三维模型的显示模式包括第二显示模式，所述方法还包括：

9.根据权利要求8所述的方法，其特征在于，所述方法还包括：

10.根据权利要求8所述的方法，其特征在于，所述方法还包括：

11.一种内窥镜视频的尺寸评估方法，其特征在于，所述方法包括：

12.根据权利要求11所述的方法，其特征在于，所述响应于用户的显示模式切换指令，在所述第一显示模式与所述第二显示模式之间切换，还包括：

13.根据权利要求12所述的方法，其特征在于，所述调整所述三维模型与所述内窥镜视频在所述内窥镜显示界面中的显示尺寸，包括：

14.根据权利要求11所述的方法，其特征在于，包括：

15.根据权利要求11至14任一所述的方法，其特征在于，在所述控制在显示装置的内窥镜显示界面中显示带有所述三维包围框的所述三维模型之后，还包括：

16.根据权利要求11至14任一所述的方法，其特征在于，在所述确定出三维模型的三维包围框，以及所述三维包围框的长、宽和高的尺寸之前，还包括：

17.根据权利要求11至14任一所述的方法，其特征在于，在所述控制在显示装置的内窥镜显示界面中显示带有所述三维包围框的所述三维模型操作之前，还包括：

18.根据权利要求17所述的方法，其特征在于，所述默认刻度单位大于或等于预设的最小单位阈值，所述最小单位阈值根据预设的最小像素点数在所述显示装置中对应的显示尺寸确定。

19.根据权利要求17所述的方法，其特征在于，还包括：

20.根据权利要求17所述的方法，其特征在于，还包括：

21.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至10中任一项所述的方法的步骤，或者实现权利要求11至20中任一项所述的方法的步骤。

22.一种内窥镜系统，其特征在于，包括：内窥镜、图像处理设备、光源设备、显示装置以及如权利要求21所述的计算机设备。

23.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至10中任一项所述的方法的步骤，或者实现权利要求11至20中任一项所述的方法的步骤。