图谱引导点云补全方法、装置、设备及介质
本发明涉及医学图像处理、三维点云重建、人工智能辅助骨科手术规划和个性化膝关节假体设计,特别是涉及一种面向膝关节假体个性化设计的图谱引导点云补全方法、装置、设备及介质。
背景技术:
1、全膝关节置换术是终末期膝关节疾病的重要治疗方式。现有标准化膝关节假体通常按照有限型号进行匹配,难以完全适配不同患者的股骨远端、胫骨近端以及关节面形态差异,容易造成假体-骨面不匹配、覆盖不足或过覆盖等问题,从而影响术后力线、软组织平衡以及长期稳定性。随着三维打印、计算机辅助设计和术前规划技术的发展,基于患者个体解剖形态的个性化膝关节假体设计具有重要临床价值。
2、然而,在骨关节炎、骨缺损、严重退变或其他病理状态下,患者原始健康骨面形态往往已经不完整。尤其是股骨髁、滑车沟、胫骨平台等关节面关键区域发生缺损时,仅依赖当前病损骨面难以直接恢复患者的原始解剖形态。传统统计形状模型通常需要稠密点对应关系,并依赖线性形状空间表达,在面对复杂非线性个体差异和大范围缺损时,重建能力和解剖可信度受到限制。
3、近年来,基于深度学习的点云补全方法能够从部分点云推断缺失区域,避免显式建立点对应关系,但多数方法主要依赖部分输入的局部几何特征。对于膝关节这类具有严格解剖约束的医学结构,当病损区域较大、局部几何线索不足时,单纯依靠局部特征容易产生不符合解剖结构的补全结果,难以为假体设计提供可靠的健康骨面参考。
4、此外,膝关节远端股骨和近端胫骨的骨骺线区域在退变过程中通常相对稳定,可作为推断关节面和骨端局部形态的重要解剖锚点。现有点云补全网络缺少对骨骺线等稳定解剖结构的显式利用,也缺少可解释、可空间定位的全局-局部多尺度解剖先验。
5、因此,如何提供一种能够同时保持整体骨形态一致性和局部关节面细节的膝关节点云补全方法,以支持个性化膝关节假体设计,是迫切需要本领域技术人员解决的技术问题。
技术实现思路
1、鉴于上述问题,本发明提供用于克服上述问题或者至少部分地解决上述问题的一种图谱引导点云补全方法、装置、设备及介质。利用膝关节骨面部分点云和骨骺线点云,结合全局-局部解剖图谱、跨分辨率特征聚合以及教师-学生一致性训练,实现了股骨和胫骨病损区域三维形态补全。
2、本发明提供了如下方案:
3、一种图谱引导点云补全方法,包括:
4、获取患者膝关节ct数据,分割出股骨、胫骨及骨骺线,重建三维表面模型并采样获得部分骨面点云以及骨骺线点云;将所述部分骨面点云以及所述骨骺线点云分别经过跨分辨率编码器进行特征提取,获得多尺度骨面特征以及骨骺线条件特征;
5、利用全局图谱分支处理所述骨面编码特征,获得表征整体形态的多个图谱块;利用局部图谱分支处理所述骨骺线编码特征,获得与骨骺线至关节面区域相关的局部图谱块;利用双图谱融合单元基于图谱块空间中心距离构造邻接关系,通过消息传递机制实现全局与局部先验的信息交互,融合后的特征经图谱解码器生成对应的三维曲面片,拼接形成全局图谱点云以及局部图谱点云;
6、以所述全局图谱点云以及所述局部图谱点云作为支持集,以所述部分骨面点云作为查询集,通过邻域特征聚合与注意力机制将先验传递至部分点云特征,生成带有解剖约束的种子特征,并回归得到种子点集;
7、以所述种子点集为初始几何骨架,通过层级上采样结构逐级生成高密度完整骨面点云。
8、优选地:所述消息传递机制包括图注意力机制,所述图注意力机制由下式表示:
9、
10、
11、式中, 表示融合后的第个图谱块特征,表示第个图谱块特征,表示第个图谱块的邻域集合,表示图谱块间的注意力权重,表示共享特征变换矩阵,表示图谱块之间的相关性得分,表示指数运算。
12、优选地:所述种子特征由下式表示:
13、
14、式中,表示第个种子点特征,表示第个图谱支持特征,表示查询点与图谱支持点之间的注意力权重。
15、优选地:所述注意力权重由下式表示:
16、
17、式中,表示查询点特征,表示第个图谱支持特征。
18、优选地:网络训练过程包括图谱预训练阶段以及补全网络训练阶段;
19、所述图谱预训练阶段以完整骨面及骨骺线点云为输入,预训练图谱生成器,损失函数包含几何重建损失、潜在空间正则化及原型一致性约束;
20、所述补全网络训练阶段将预训练模型作为教师网络,学生网络接收部分骨面及骨骺线点云,通过多尺度点云重建损失和教师-学生一致性损失进行训练;损失函数包含重建损失,所述重建损失采用chamfer距离衡量预测点云与真实点云之间的几何差异。
21、优选地:所述由下式表示:
22、
23、式中:表示预测点云,表示真实点云,和分别表示预测点云和真实点云中的点数,和分别表示对应点云中的点,表示欧氏距离。
24、优选地:总损失函数表示为:
25、
26、式中,表示网络总损失,表示点云重建损失,表示教师–学生一致性损失,表示图谱正则化损失,和分别表示各损失项的权重系数。
27、一种图谱引导点云补全装置,用于执行上述的图谱引导点云补全方法,所述装置包括:
28、输入编码单元,用于获取患者膝关节ct数据,分割出股骨、胫骨及骨骺线,重建三维表面模型并采样获得部分骨面点云以及骨骺线点云;将所述部分骨面点云以及所述骨骺线点云分别经过跨分辨率编码器进行特征提取,获得多尺度骨面特征以及骨骺线条件特征;
29、全局-局部图谱生成单元,用于利用全局图谱分支处理所述骨面编码特征,获得表征整体形态的多个图谱块;利用局部图谱分支处理所述骨骺线编码特征,获得与骨骺线至关节面区域相关的局部图谱块;利用双图谱融合单元基于图谱块空间中心距离构造邻接关系,通过消息传递机制实现全局与局部先验的信息交互,融合后的特征经图谱解码器生成对应的三维曲面片,拼接形成全局图谱点云以及局部图谱点云;
30、图谱引导种子生成单元,用于以所述全局图谱点云以及所述局部图谱点云作为支持集,以所述部分骨面点云作为查询集,通过邻域特征聚合与注意力机制将先验传递至部分点云特征,生成带有解剖约束的种子特征,并回归得到种子点集;
31、层级点云解码单元,用于以所述种子点集为初始几何骨架,通过层级上采样结构逐级生成高密度完整骨面点云。
32、一种图谱引导点云补全设备,所述设备包括处理器以及存储器:
33、所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
34、所述处理器用于根据所述程序代码中的指令执行上述的图谱引导点云补全方法。
35、一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行上述的图谱引导点云补全方法。
36、根据本发明提供的具体实施例,本发明公开了以下技术效果:
37、本技术实施例提供的一种图谱引导点云补全方法、装置、设备及介质,通过全局图谱和局部图谱共同建模,使网络既能保持股骨或胫骨整体形态一致性,又能恢复关节面附近细粒度结构。通过骨骺线条件局部图谱利用相对稳定的解剖锚点,增强病损严重情况下对股骨远端和胫骨近端关键区域的补全能力。通过图谱块空间锚定和双图谱融合,使不同图谱块能够对应相对稳定的解剖区域,提高网络先验的可解释性和跨样本一致性。通过图谱引导种子生成和层级解码,提高缺损区域种子点初始化质量,降低仅依赖部分输入局部特征导致的结构漂移和表面失真。通过图谱预训练和教师-学生一致性训练,将健康解剖先验有效迁移至病损点云补全任务,并在推理阶段保持较低计算开销,适合临床术前规划和个性化假体设计流程。
38、当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com