基于异常区域感知的舌象伪影检测与修复方法及系统与流程

摘要: 本发明涉及舌象图像处理领域,具体涉及基于异常区域感知的舌象伪影检测与修复方法及系统。背景技术:1、当前中医在对患者进行检测时,会通过患者的舌象判断病人的身体状况...
基于异常区域感知的舌象伪影检测与修复方法及系统与流程

本发明涉及舌象图像处理领域,具体涉及基于异常区域感知的舌象伪影检测与修复方法及系统。

背景技术:

1、当前中医在对患者进行检测时,会通过患者的舌象判断病人的身体状况。这是因为中医认为心脏和脾胃的状态最先会反映在舌头上。例如《内经素问·藏气法时论》内提及:舌为心之苗,又为脾之外候。因此,中医在对患者进行检测时,可能需要先获取患者的舌象图像,之后根据患者的舌象图像,对患者的身体状况进行检测。

2、但是,当前在获取患者的舌象图像时,由于患者舌头上可能含有唾液等液体,使得获取的患者的舌象图像内可能含有反光区域等伪影,导致通过患者的舌象图像对患者的身体状况进行判断时,判断结果的准确率可能较低。因此,对患者的舌象图像内的反光区域进行处理。而当前去除舌象图像内的反光区域时,主要是依据每一反光区域周围的其他正常区域中像素点的灰度值,来修复舌象图像内的反光区域。其修复方法,属于无中生有的猜测,还原性相对较低。

技术实现思路

1、本发明提供基于异常区域感知的舌象伪影检测与修复方法及系统,以解决对患者的舌象图像内的反光区域进行修复时,修复结果的准确性相对较低的问题。

2、为了实现上述目的,本发明提供如下技术方案:

3、多次移动舌象图像采集设备对待检测患者进行拍照,得到多张舌象图像;

4、根据舌象图像内像素点的灰度值,获取每一张舌象图像内的边缘、边缘像素点与边缘像素点的梯度幅值,并将每一张舌象图像分为若干区域;获取每一像素点的亮度值,根据每一张舌象图像内边缘像素点的数量、梯度幅值,以及每一边缘像素点周围的其他像素点的亮度分布,从多张舌象图像内选择一张作为待修复图像;

5、根据待修复图像内的每一区域中的所有像素点的亮度值中的最小值,从待修复图像内的所有区域中,得到光照较强区域;对不同张舌象图像进行对齐,根据待修复图像与每一张舌象图像的对齐结果,以及舌象图像内每一区域以及区域中的像素点在舌象图像中的位置,区域中所含像素点的数量,从待修复图像内的所有区域中得到疑似反光区域;将同时为疑似反光区域与光照较强区域的区域,记为最终反光区域;

6、将待修复图像内每一反光区域周围的像素点,记为待修复图像内反光区域中的正常对照像素点;根据待修复图像内每一反光区域中的像素点与相同的反光区域中正常对照像素点的欧氏距离、正常对照像素点的灰度值,以及其他张舌象图像内像素点的灰度值与亮度值,得到修复后的舌象图像。

7、进一步地,所述多次移动舌象图像采集设备对待检测患者进行拍照,得到多张舌象图像的具体计算步骤为:

8、使用舌象图像采集设备对待检测患者的舌头进行拍照时,不断移动舌象图像采集设备,得到张舌象图像;其中,表示预设的舌象图像的数量;

9、且每一次移动时,舌象图像采集设备与待检测患者的舌头的角度关系的变化是固定的,并且在拍照过程中,待检测患者的舌头保持不变,舌象图像采集设备与待检测患者的舌头的中心之间的距离是固定的。

10、进一步地,所述获取每一像素点的亮度值,根据每一张舌象图像内边缘像素点的数量、梯度幅值,以及每一边缘像素点周围的其他像素点的亮度分布,从多张舌象图像内选择一张作为待修复图像的具体计算步骤为:

11、将第张舌象图像内第个像素点在通道下的值,作为第张舌象图像内第个像素点的亮度值;若一个像素点不为边缘像素点,则其为非边缘像素点;

12、根据每一像素点的亮度值,使用大津阈值法对第张舌象图像内的第个边缘像素点的8邻域内的非边缘像素点进行聚类,得到两个聚类簇,将第个聚类簇中所有非边缘像素点的亮度值的均值,记为第个聚类簇的平均亮度;

13、将第1个聚类簇的平均亮度与第2个聚类簇的平均亮度的差值绝对值,记为第张舌象图像内的第个边缘像素点的反光影响度;

14、根据每一张舌象图像内边缘像素点的数量、边缘像素点的梯度幅值,以及每一边缘像素点的反光影响度,得到每一张舌象图像的信息表现度;

15、若第张舌象图像内的第个边缘像素点的8邻域内的非边缘像素点的数量小于等于1,则第张舌象图像内的第个边缘像素点没有反光影响度;

16、将所有张舌象图像内,信息表现度最大的舌象图像,记为待修复图像。

17、进一步地,所述根据每一张舌象图像内边缘像素点的数量、边缘像素点的梯度幅值,以及每一边缘像素点的反光影响度,得到每一张舌象图像的信息表现度的具体计算步骤为:

18、

19、式中,表示第张舌象图像的信息表现度,表示第张舌象图像内边缘像素点的数量,表示第张舌象图像内的第个边缘像素点的梯度幅值,表示第张舌象图像内的第个边缘像素点的反光影响度,表示函数,当第张舌象图像内的第个边缘像素点无反光影响度时,令。

20、进一步地,所述根据待修复图像内的每一区域中的所有像素点的亮度值中的最小值,从待修复图像内的所有区域中,得到光照较强区域的具体计算步骤为:

21、将待修复图像内第个区域中所有像素点的亮度值中的最小值,记为第个区域的最小亮度值;

22、根据每一区域的最小亮度值,使用大津阈值法,对待修复图像内的所有区域进行聚类,得到两个聚类簇;

23、将两个聚类簇中,包含的所有区域的最小亮度值的均值最大的聚类簇,记为光照较强区域所在的聚类簇;

24、将光照较强区域所在的聚类簇内的区域,记为光照较强区域。

25、进一步地,所述根据待修复图像与每一张舌象图像的对齐结果,以及舌象图像内每一区域以及区域中的像素点在舌象图像中的位置,区域中所含像素点的数量,从待修复图像内的所有区域中得到疑似反光区域的具体计算步骤为:

26、以待修复图像为基准,将待修复图像与每一张舌象图像进行对齐操作,得到待修复图像内每一像素点,在每一张舌象图像内的对应像素点;

27、获取待修复图像的几何质心,以及待修复图像内的每一区域的几何质心;

28、获取每一张舌象图像的几何质心,以及舌象图像内的每一区域的几何质心;

29、若待修复图像内第个区域中的第个像素点,在第张舌象图像内的对应像素点,处于第张舌象图像内的第个区域中,则将待修复图像内第个区域中的第个像素点,记为待修复图像内第个区域中位于第张舌象图像内第个区域中的对照像素点;

30、获取待修复图像内第个区域与第张舌象图像内的第个区域的相似性的具体计算公式如下:

31、

32、式中,表示待修复图像内第个区域与第张舌象图像内的第个区域的相似性,表示第张舌象图像内的第个区域的几何质心与第张舌象图像的几何质心的欧氏距离的值,表示待修复图像内第个区域的几何质心与待修复图像的几何质心的欧氏距离的值,表示第张舌象图像内的第个区域中所含像素点的数量的值,表示待修复图像内第个区域中所含像素点的数量的值,表示绝对值函数,为以自然常数为底的指数,表示待修复图像内第个区域中所含像素点的数量,表示第张舌象图像内的第个区域中所含像素点的数量,表示两个数据之间取最大值的函数,表示待修复图像内第个区域中位于第张第个区域中的对照像素点的数量;

33、使用大津阈值法,对待修复图像内第个区域与第张舌象图像内的所有区域的相似性进行聚类,将其聚为两个类簇;

34、若两个类簇中所含相似性的数量均大于1,则将待修复图像内第个区域记为疑似反光区域。

35、进一步地,所述将待修复图像内每一反光区域周围的像素点,记为待修复图像内反光区域中的正常对照像素点的具体计算步骤为:

36、将待修复图像内的所有像素点中,不位于反光区域中的像素点,记为正常像素点;

37、获取待修复图像内第个反光区域的最小外接矩形;

38、并将待修复图像内第个反光区域的最小外接矩形的四条边各向外扩一个像素点的宽度,得到一个新的矩形区域,将其记为待修复图像内第个反光区域的对照区域;

39、将待修复图像内第个反光区域的对照区域中的正常像素点,记为待修复图像内第个反光区域中的正常对照像素点。

40、进一步地,所述根据待修复图像内每一反光区域中的像素点与相同的反光区域中正常对照像素点的欧氏距离、正常对照像素点的灰度值,以及其他张舌象图像内像素点的灰度值与亮度值,得到修复后的舌象图像的具体计算步骤为:

41、令第张舌象图像的次序值为,得到每一张舌象图像的次序值,并将待修复图像对应的舌象图像的次序值,作为待修复图像的次序值;

42、将所有舌象图像内,次序值与待修复图像的次序值不同的舌象图像,记为对照舌象图像;

43、获取第张对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响权重的具体计算公式如下:

44、

45、式中,表示第张对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响权重,表示待修复图像内第个反光区域中的正常对照像素点的数量,表示待修复图像内第个反光区域中的第个像素点与待修复图像内第个反光区域的对照区域中的第个正常对照像素点的欧氏距离,表示待修复图像内第个反光区域中的第个像素点与待修复图像内第个反光区域的对照区域中的所有正常对照像素点的欧氏距离的倒数之和,表示待修复图像内第个反光区域中的第个正常对照像素点的亮度值,表示待修复图像内第个反光区域中的第个正常对照像素点在第张对照舌象图像内的对应像素点的亮度值,表示绝对值函数,为以自然常数为底的指数函数;

46、获取第张对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响系数的具体计算公式如下:

47、

48、式中,表示第张对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响系数,表示所有张对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响权重的和,表示对照舌象图像的数量;

49、根据每一张对照舌象图像对待修复图像内每一反光区域中的每一像素点的灰度影响系数、每一张对照舌象图像内像素点的灰度值,以及待修复图像内像素点的灰度值,得到待修复图像内每一反光区域中的每一像素点的修复灰度值;

50、将待修复图像内每一反光区域中的每一像素点的灰度值替换为其修复灰度值,完成反光区域中像素点的灰度修复,并将所得舌象图像记为修复后的舌象图像。

51、进一步地,所述根据每一张对照舌象图像对待修复图像内每一反光区域中的每一像素点的灰度影响系数、每一张对照舌象图像内像素点的灰度值,以及待修复图像内像素点的灰度值,得到待修复图像内每一反光区域中的每一像素点的修复灰度值的具体计算步骤为:

52、构建横坐标为待修复图像内第个反光区域中的第个像素点在每一对照舌象图像内对应像素点的灰度值,纵坐标为待修复图像内第个反光区域的第个正常对照像素点在每一对照舌象图像内对应像素点的灰度值,将其记为待修复图像内的第个二维坐标系;

53、将所有对照舌象图像映射到待修复图像内的第个二维坐标系内,得到待修复图像内的第个二维坐标系内的若干坐标点;其中,每一坐标点对应一个舌象图像,并将待修复图像内的第个二维坐标系内的第个坐标点,对应的对照舌象图像对待修复图像内第个反光区域中的第个像素点的灰度影响系数,记为第个坐标点对线性拟合的影响权重;

54、使用加权最小二乘法对待修复图像内的第个二维坐标系内的所有坐标点进行线性拟合,且进行线性拟合时,将每一坐标点对线性拟合的影响权重,作为其对拟合过程的影响权重,得到一个拟合公式,将其记为待修复图像内第个反光区域的第个拟合公式;

55、将待修复图像内第个反光区域的对照区域中的第个正常对照像素点的灰度值作为因变量,输入到待修复图像内第个反光区域的第个拟合公式中,将输出的自变量记为待修复图像内第个反光区域中的第个像素点的第个参考灰度值;

56、获取待修复图像内第个反光区域中的第个像素点的修复灰度值的具体计算公式如下:

57、

58、式中,表示待修复图像内第个反光区域中的第个像素点的修复灰度值,表示待修复图像内第个反光区域中的第个像素点与待修复图像内第个反光区域的对照区域中的第个正常对照像素点的欧氏距离,表示待修复图像内第个反光区域中的第个像素点与待修复图像内第个反光区域的对照区域中的所有正常对照像素点的欧氏距离的倒数之和,表示待修复图像内第个反光区域中的正常对照像素点的数量,表示待修复图像内第个反光区域中的第个像素点的第个参考灰度值。

59、本发明的第二方面,提供了基于异常区域感知的舌象伪影检测与修复系统,该系统包括以下模块:

60、数据采集模块:多次移动舌象图像采集设备对待检测患者进行拍照,得到多张舌象图像;

61、待修复图像获取模块:根据舌象图像内像素点的灰度值,获取每一张舌象图像内的边缘、边缘像素点与边缘像素点的梯度幅值;获取每一像素点的亮度值,根据每一张舌象图像内边缘像素点的数量、梯度幅值,以及每一边缘像素点周围的其他像素点的亮度分布,从多张舌象图像内选择一张作为待修复图像;

62、最终反光区域获取模块:根据每一张舌象图像内的边缘将每一张舌象图像分为若干区域;根据待修复图像内的每一区域中的所有像素点的亮度值中的最小值,从待修复图像内的所有区域中,得到光照较强区域;对不同张舌象图像进行对齐,根据待修复图像与每一张舌象图像的对齐结果,以及舌象图像内每一区域以及区域中的像素点在舌象图像中的位置,区域中所含像素点的数量,从待修复图像内的所有区域中得到疑似反光区域;将同时为疑似反光区域与光照较强区域的区域,记为最终反光区域;

63、舌象图像修复模块:将待修复图像内每一反光区域周围的像素点,记为待修复图像内反光区域中的正常对照像素点;根据待修复图像内每一反光区域中的像素点与相同的反光区域中正常对照像素点的欧氏距离、正常对照像素点的灰度值,以及其他张舌象图像内像素点的灰度值与亮度值,得到修复后的舌象图像。

64、本发明的技术方案的有益效果是:

65、1.提高反光区域检测的准确性与鲁棒性

66、本发明摒弃了传统依赖单一亮度阈值检测反光区域的方式,而是结合多角度拍摄的舌象图像,通过区域位置、大小及对应像素点数量的综合相似性度量,初步筛选出疑似反光区域,再进一步利用区域最小亮度值的聚类结果判定光照较强区域,将二者交集作为最终反光区域。该方法充分利用了反光区域在多角度舌象图像中表现出的突发性和高亮度双重特征,有效避免了阈值设置不当导致的漏检或误检,显著提升了反光区域检测的准确性。

67、2.实现基于客观数据驱动的反光区域修复,还原性高

68、本发明利用同一舌象在不同拍摄角度下的对照舌象图像,通过分析待修复区域内像素点与周围正常对照像素点在亮度上的差异,为每张对照舌象图像赋予合理的灰度影响权重,并基于加权最小二乘拟合建立灰度映射关系,最终反推出反光区域中每个像素点的修复灰度值。该过程不是简单的插值或邻域填充,而是依据多源实测数据进行的客观还原,相比现有无中生有的修复方法,修复结果更贴近真实舌象,具有更高的可信度和保真度。

69、3.优化待修复图像的选择策略,降低修复难度

70、本发明通过计算每张舌象图像的信息表现度,综合考虑边缘像素点数量、梯度幅值及反光影响度,自动筛选出信息量最丰富的舌象图像作为待修复对象。这确保了修复操作集中于舌象图像内容最完整的版本,避免了因舌象图像本身信息不足而导致修复效果不佳的问题,从源头提升了整体修复质量。

71、4.增强修复过程对光照和角度变化的适应性

72、本发明在计算对照舌象图像影响权重时,引入了像素点亮度差和空间距离的双重约束,能够有效抑制因拍摄角度变化带来的亮度波动对修复结果的干扰;同时,在区域相似性度量中刻意避开灰度值,仅使用位置和尺寸信息,进一步降低了光照条件对反光区域检测的负面影响。因此,本发明在不同光照环境和拍摄条件下均能保持稳定的修复性能。