一种智能口腔健康评估与个性化护理系统及方法

摘要: 本发明涉及口腔健康管理与人工智能,更具体的说是涉及一种智能口腔健康评估与个性化护理系统及方法。背景技术:1、口腔健康评估通常依赖于在专业医疗机构中由牙医使用口镜...
一种智能口腔健康评估与个性化护理系统及方法

本发明涉及口腔健康管理与人工智能,更具体的说是涉及一种智能口腔健康评估与个性化护理系统及方法。

背景技术:

1、口腔健康评估通常依赖于在专业医疗机构中由牙医使用口镜、探针等器械进行目视检查和探诊,或者借助口腔内窥镜、牙科ct等专业设备采集影像后由医师人工判读。这种方式存在评估频次低、成本高、难以实现日常连续监测的问题,用户无法在日常生活中及时掌握自身口腔健康状态的变化趋势。

2、随着移动终端摄像能力的提升,利用普通可见光摄像头拍摄口腔日常影像并进行自动化分析逐渐成为可能。然而,可见光日常影像仅能反映口腔的表观形态和颜色信息,难以直接获取与早期龋损、牙龈炎症、牙菌斑分布等密切相关的生化层面特征,例如牙釉质脱矿程度、牙龈血红蛋白浓度、菌斑指示剂残留等。这些生化特征通常需要多光谱成像设备或口腔荧光成像设备才能采集,而此类设备价格较高、操作专业,不适合家庭日常使用。

3、另一方面,即便能够同时获取多种模态的口腔影像,不同模态影像在拍摄视角、空间分辨率、坐标系定义上存在差异,直接将各模态特征进行融合会因空间错位而引入评估误差。此外,日常拍摄场景下影像质量波动较大,例如光照不均、拍摄角度偏移、口腔区域暴露不完整等问题时有发生,若采用固定权重对各模态特征进行融合,低质量模态的数据会对评估结果产生不可控的干扰,导致评估结果不稳定。

4、因此,如何提供一种智能口腔健康评估与个性化护理系统及方法是本领域技术人员亟需解决的问题。

技术实现思路

1、有鉴于此,本发明提供了一种智能口腔健康评估与个性化护理系统及方法,通过获取口腔日常影像与三维结构影像,提取时间动态特征、三维结构特征及视觉生化预测特征,并以三维结构为基准进行空间校准,再根据数据完整度动态调节权重进行多模态融合评估,最终匹配护理策略库生成个性化方案,实现了不依赖专业设备与人工判读的多模态精准口腔健康综合评估,显著降低日常监测门槛,提升评估客观性与个体针对性。

2、为了实现上述目的,本发明采用如下技术方案:

3、一方面,本发明提供了一种智能口腔健康评估与个性化护理系统,包括:

4、采集模块,用于获取口腔的日常影像和三维口腔结构影像;

5、动态特征提取器,用于对同一口腔位置在不同时间点获取的日常影像进行配准和差分分析,提取动态变化特征,

6、静态特征提取器,用于基于所述三维口腔结构影像提取三维结构特征;

7、特征映射模块,用于从日常影像中预测视觉生化特征;所述特征映射模块采用基于迁移学习的教师-学生网络模型从所述日常影像中预测视觉生化特征;

8、特征校准模块,用于以所述三维结构特征作为空间校准基准,对所述动态变化特征和所述视觉生化特征进行空间对齐和几何偏差校正,生成校准后的日常动态特征和校准后的视觉生化特征;

9、融合权重自调节模块,用于根据各模态影像数据的数据完整度动态调节各模态特征的注意力权重;

10、多模态融合分析模块,用于根据所述注意力权重,对校准后的日常动态特征、校准后的视觉生化特征和三维结构特征进行加权融合,输出口腔健康综合评估结果;

11、个性化护理模块,用于根据所述口腔健康综合评估结果,匹配预设护理策略库,生成并输出与用户当前口腔健康状态相对应的个性化护理方案。

12、优选的,所述动态特征提取器包括配准单元和时序差分子单元;

13、所述配准单元用于基于口腔解剖标志点对不同时间点的日常影像进行刚性配准,并对刚性配准后的残留局部形变进行非刚性校正;

14、所述时序差分子单元用于采用局部结构相似性指数与残差稠密光流场联合表征,提取随时间演变的动态变化特征。

15、优选的,所述教师-学生网络模型包括教师网络和学生网络;

16、所述教师网络以多光谱口腔影像或口腔荧光影像为输入进行预训练,用于输出视觉生化特征;

17、所述学生网络以可见光日常影像为输入,通过知识蒸馏损失、局部特征图对齐损失与域自适应损失与所述教师网络联合训练,使所述学生网络从可见光日常影像中预测得到与所述教师网络输出分布一致的视觉生化特征。

18、优选的,所述特征校准模块包括空间变换单元和残差计算单元;

19、所述空间变换单元用于提取所述三维结构特征中的牙弓曲线和咬合平面,将三维结构特征投影至可见光日常影像的拍摄视角平面,生成二维空间校准基准图;通过薄板样条插值将所述动态变化特征和所述视觉生化特征与所述二维空间校准基准图进行配准,变换至标准牙科二维坐标系;

20、所述残差计算单元用于计算变换后的动态变化特征和视觉生化特征与所述二维空间校准基准图之间的局部几何偏差,生成包含平面内各坐标轴方向偏差量的校准残差向量,并基于所述校准残差向量的l2范数确定校准残差。

21、优选的,所述融合权重自调节模块包括完整度评估单元、补偿单元和权重计算单元;

22、所述完整度评估单元用于根据影像的口腔区域覆盖率、画面清晰度和光照均匀度计算各模态的数据完整度评分,并基于数据完整度确定初始置信权重;

23、所述补偿单元用于根据所述数据完整度评分和校准残差的误差来源计算各模态特征的补偿权重;

24、所述权重计算单元将所述初始置信权重与所述补偿权重进行融合,并通过softmax函数归一化,生成最终的注意力权重。

25、优选的,所述多模态融合分析模块包括跨模态注意力融合单元和评估解码单元;

26、所述跨模态注意力融合单元用于根据所述注意力权重,对所述校准后的日常动态特征、所述校准后的视觉生化特征和所述三维结构特征分别进行自适应加权,并通过多头交叉注意力机制对加权后的各模态特征进行深层交互融合,生成融合语义特征向量;

27、所述评估解码单元用于将所述融合语义特征向量输入至由多层全连接网络构建的联合评估网络中,所述联合评估网络同时输出口腔健康综合评分、牙周健康等级和龋齿风险指数,作为所述口腔健康综合评估结果。

28、优选的,所述个性化护理模块包括护理效果预测单元和方案生成单元;

29、所述护理效果预测单元用于基于所述口腔健康综合评估结果,结合用户历史护理响应数据,构建口腔健康状态转移模型,预测不同护理方案在预设时间窗口内的预期改善效果;

30、所述方案生成单元用于根据所述预期改善效果与预设护理策略库中各护理方案的评估指标进行匹配,选取综合改善效果最优的护理方案,生成并输出个性化护理方案。

31、另一方面,本发明还提供了一种智能口腔健康评估与个性化护理方法,包括:

32、获取口腔的日常影像和三维口腔结构影像;

33、对同一口腔位置在不同时间点获取的日常影像进行配准和差分分析,提取随时间演变的动态变化特征;

34、基于所述三维口腔结构影像提取三维结构特征;

35、利用基于迁移学习的教师-学生网络模型从所述日常影像中预测视觉生化特征;

36、以所述三维结构特征作为空间校准基准,对所述动态变化特征和所述视觉生化特征进行空间对齐和几何偏差校正,生成校准后的日常动态特征和校准后的视觉生化特征;

37、根据各模态影像数据的数据完整度动态调节各模态特征的注意力权重;

38、根据所述注意力权重,对校准后的日常动态特征、校准后的视觉生化特征和三维结构特征进行加权融合,输出口腔健康综合评估结果;

39、根据所述口腔健康综合评估结果,匹配预设护理策略库,生成并输出与用户当前口腔健康状态相对应的个性化护理方案。

40、经由上述的技术方案可知,与现有技术相比,本发明公开提供了一种智能口腔健康评估与个性化护理系统及方法,通过教师-学生网络模型将多光谱、荧光影像中的视觉生化特征提取能力迁移至可见光日常影像,使得用户无需配备专业多光谱或荧光成像设备,仅通过日常可见光拍摄即可获得生化层面的口腔特征表征,有利于降低日常口腔健康监测的设备门槛和使用成本。进一步,本发明以三维口腔结构特征作为空间校准基准,对动态变化特征和视觉生化特征进行校正,能够减少不同模态影像因拍摄视角和坐标系差异导致的空间错位,有利于提高多模态特征融合的空间一致性。同时通过融合权重自调节模块根据各模态数据完整度动态调节注意力权重,能够在日常拍摄数据质量波动较大的场景下降低低质量模态对评估结果的干扰,有利于提升口腔健康综合评估结果的稳定性和可靠性。最后,本发明结合用户历史护理响应数据构建口腔健康状态转移模型,预测不同护理方案的预期改善效果并据此匹配最优方案,能够为不同用户提供具有针对性的护理建议,有利于提升护理方案的个性化程度和预期执行效果。