作者|王润泽,阿里巴巴达摩院算法工程师

引言

 

低剂量CT在降低辐射剂量的同时会引入噪声和伪影,容易掩盖细小组织和早期病变。现有的深度学习降噪算法通常忽视人体组织的解剖语义信息,可能会导致次优的降噪结果,例如过度平滑或粗粒度的降噪等。

 

本文提出了一种新的方法ALDEN (Anatomy-aware Low-dose CT DENoising framework)将预训练视觉模型的语义特征与对抗学习和对比学习相结合以解决上述问题。

 

图片

现存问题及挑战介绍

 

  • 像素级约束的局限:L1/MSE等损失强调全局误差最小化,忽略局部解剖语义,导致细微结构与纹理的过度平滑,削弱对微小病灶与组织的可见性。

 

  • 传统GAN的语义盲区:多数GAN去噪方法在边缘分布P(Ŷ)≈P(Y)上学习,难以捕捉“噪声-组织类型”间的依赖关系;而实际不同组织的噪声特性存在差异,统一判别会抹平组织特异性的纹理还原。

     

  • 解剖监督成本高:显式引入语义的直观做法是联动分割网络,但精细、多器官的标注昂贵且难以覆盖丰富的解剖多样性,通用化受限。

     

 

图片

当前工作价值介绍

 

 

图片

 

  • 本文首次将Pretrained Vision Models(PVMs)引入LDCT去噪:通过利用DINOv2、MedSAM等大规模预训练模型的层级语义表征,无需额外解剖标签,即可提供丰富的语义先验知识,解决“高成本标注-低可迁移性”的瓶颈;

     

  • 解剖感知判别器AAD(Anatomy-Aware Discriminator):通过基于注意力机制的多层级特征融合AFF(Attention-based Feature Fusion),以NDCT的PVM语义引导判别器促进生成器学习组织特异性的细粒度去噪模式;

     

  • 语义引导对比学习SCL(Semantic-guided Contrastive Learning):PVM特征空间中对齐预测降噪结果与NDCT在同一空间位置的语义(正样本),并构造双重负样本:与同位LDCT特征对比以压制残余噪声、与异位NDCT特征对比以惩罚解剖错配;通过InfoNCE实现“保结构、抑伪影”的统一优化。

     

 

图片

性能表现

 

 

图片

 

ALDEN在两个低剂量CT降噪数据集上达到了感知指标LPIPS和保真指标PSNR、SSIM和RMSE之间的均衡性能,证明本文方法能够缓解保真和感知之间的两难境地。

 

 

图片

 

可视化效果表明ALDEN相比于其他算法有效保留了器官和组织内在的纹理细节同时也维持了期望的降噪程度,取得了最接近NDCT图像的效果。

 

 

图片

 

TotalSegmentator 117器官分割任务上,ALDEN在低/高噪声模拟LDCT的两种强度下均取得最优DSC,尤其高噪声下81.06%显著领先,表明ALDEN能更好地保留解剖结构,对下游分析任务更友好。

 

 

图片

结语

 

ALDEN以“预训练语义先验+解剖感知对抗+语义对比约束”的统一框架,系统性解决了LDCT去噪中“过度平滑、语义缺失、指标两难”的痛点,既在图像层面实现更好的组织纹理保真,又在临床相关的下游任务中验证了实际价值。其模块化、无标签依赖的特性为跨场景泛化与工程落地提供了良好基础,也为后续在3D重建、跨模态协同与可解释医学影像恢复上打开了新的空间。

 

 

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐