当前位置: 首页 > news >正文

MambaMorph:基于 Mamba 的医学 MR-CT 可变形配准框架

摘要
跨模态(如MR-CT、T1-T2)体素级空间对应在医学图像分析中至关重要。然而,现有配准方法在精度和临床适用性方面仍存在不足。本文提出MambaMorph,一种新型多模态变形配准框架,包含基于Mamba的注册模块和细粒度特征提取器,并构建首个脑MR-CT配准数据集SR-Reg。实验表明,MambaMorph在SR-Reg和公开IXI数据集上显著优于现有SOTA方法,Dice系数最高提升近6%,推理速度达0.27秒/对,验证了其在临床应用中的潜力。

关键词:多模态配准·Mamba·特征学习


1 引言

1.1 研究背景

变形图像配准通过补偿非刚性形变(如手术创伤和成像差异)实现精准空间对齐。例如,术前MR与术中CT间可能存在高达10mm的形变[20],仅靠仿射配准无法校正。尽管传统方法(如[1,7])能计算可微位移场并达到较高精度,但其计算成本高、难以实时应用。基于学习的方法(如VoxelMorph[2])虽效率提升,但存在以下挑战:

  1. 多模态差异:MR与CT的强度分布显著不同,现有方法难以有效表征跨模态特征;
  2. 数据稀缺:标注良好的多模态配准数据集不足;
  3. 计算效率:Transformer等长程建模方法面临二次复杂度问题,难以处理大尺寸体素序列。

1.2 现有方法局限性

  • 传统方法​(如LKU-Net[16]、TransMorph[4]):通过UNet-like模块或Swin Transformer捕捉长程相关性,但计算开销大;
  • 合成数据方法​(如SynthMorph[13]):因合成数据质量差导致模型收敛缓慢;
  • 预训练策略​(如ContraReg[5]、SAME[19]):依赖预训练编码器提升特征表示,但对新模态适应能力有限;
  • 跨模态注意力机制​(如[22]):虽直接提取跨模态特征,但二次复杂度限制其应用。

1.3 本文贡献

  1. 提出Mamba注册模块:基于Mamba序列建模技术(线性复杂度),替代Transformer实现高效长程空间关系建模;
  2. 设计细粒度特征提取器:采用轻量级UNet提取像素级特征,支持多模态细粒度对齐;
  3. 构建SR-Reg数据集:包含180对高精度脑MR-CT配准样本及对应分割标签;
  4. 验证框架优势:在SR-Reg和IXI数据集上,MambaMorph在Dice系数和推理速度上均超越SOTA方法。

2 方法

2.1 整体框架

2.2 Mamba注册模块

  • 混合分支架构:水平分支处理完整体积,UNet-like分支通过分割、位置嵌入和Mamba块级联实现序列特征学习。

2.3 细粒度特征提取器

设计轻量级2层UNet(通道数固定为16),仅包含单个下采样步骤以保留局部信息,与注册模块共享权重。


3 实验

3.1 数据集与评估指标

  • SR-Reg数据集:180对脑MR-CT配准样本(分辨率1mm³),经SynthSeg[3]分割、SynthStrip[15]去颅骨、强度归一化处理;
  • IXI数据集:公开T1-T2脑图像数据(427/50/100用于训练/验证/测试);
  • 评估指标:Dice系数、95% Hausdorff距离(HD95)、雅可比行列式非正比例(P|J|≤0)、推理时间、内存占用。

3.2 定量结果

表1显示MambaMorph在SR-Reg和IXI数据集上的优势:

方法SR-Reg(Dice↑)SR-Reg(HD95↓)IXI(Dice↑)IXI(HD95↓)
MambaMorph82.71±1.452.00±0.2287.52±1.511.53±0.24
XMorpher[21]76.84±2.542.44±0.3180.45±2.162.14±0.32

3.3 消融研究

表2验证各组件的贡献:

方法特征提取器Dice(%)时间(s)内存(Gb)参数量
MambaMorph82.710.277.607.59
MambaMorphregX78.980.165.417.31

4 结论

本文提出MambaMorph框架,首次将Mamba集成至医学图像配准领域。实验表明:

  1. Mamba模块在长程相关性建模上优于Transformer,显著提升配准精度;
  2. 细粒度特征提取器有效捕捉跨模态局部特征;
  3. SR-Reg数据集为多模态配准提供了高质量基准。
    未来研究将探索Mamba与特征学习的深度融合,并推动其在临床场景中的应用。

图表位置标记

  • 图1:MambaMorph框架示意图

  • 表1:SR-Reg与IXI数据集定量对比

  • 表2:消融研究结果
  • 图2:SR-Reg测试案例的配准结果可视化
  • 联系QQandweichat
References
1. Avants, B.B., Epstein, C.L., Grossman, M., Gee, J.C.: Symmetric diffeomorphic
image registration with cross-correlation: evaluating automated labeling of elderly
and neurodegenerative brain. Medical image analysis 12 (1), 26–41 (2008). https:
//doi.org/10.1016/j.media.2007.06.004
2. Balakrishnan, G., Zhao, A., Sabuncu, M.R., Guttag, J., Dalca, A.V.: Voxelmorph:
a learning framework for deformable medical image registration. IEEE transactions
on medical imaging 38 (8), 1788–1800 (2019). https://doi.org/10.1109/TMI.2019.
2897538
3. Billot, B., Greve, D.N., Puonti, O., Thielscher, A., Van Leemput, K., Fischl, B.,
et al.: Synthseg: Segmentation of brain mri scans of any contrast and resolution
without retraining. Medical image analysis 86 , 102789 (2023). https://doi.org/10.
1016/j.media.2023.102789
4. Chen, J., Frey, E.C., He, Y., Segars, W.P., Li, Y., Du, Y.: Transmorph: Transformer
for unsupervised medical image registration. Medical image analysis 82 , 102615
(2022). https://doi.org/10.1016/j.media.2022.102615
5. Dey, N., Schlemper, J., Salehi, S.S.M., Zhou, B., Gerig, G., Sofka, M.: Con
trareg: Contrastive learning of multi-modality unsupervised deformable image
registration. In: International Conference on Medical Image Computing and
Computer-Assisted Intervention. pp. 66–77. Springer (2022). https://doi.org/10.
1007/978-3-031-16446-0_7
6. Dou, H., Bi, N., Han, L., Huang, Y., Mann, R., Yang, X., et al.: Gsmorph:
Gradient surgery for cine-mri cardiac deformable registration. arXiv preprint
arXiv:2306.14687 (2023), https://arxiv.org/abs/2306.14687

文章转载自:

http://jBu3aBK0.nmbbt.cn
http://WaBJVDAr.nmbbt.cn
http://BH0GtwUA.nmbbt.cn
http://qF1tVC1f.nmbbt.cn
http://d5LVgp2j.nmbbt.cn
http://6Lu1coK9.nmbbt.cn
http://QrY2PxXB.nmbbt.cn
http://IbZv9C7y.nmbbt.cn
http://6A4NuBuJ.nmbbt.cn
http://uNi2jSsO.nmbbt.cn
http://DhXSvVHH.nmbbt.cn
http://fdcVnWgo.nmbbt.cn
http://RnHdcXyY.nmbbt.cn
http://vNiPsGXq.nmbbt.cn
http://zU8uoUbI.nmbbt.cn
http://zeZqHK4L.nmbbt.cn
http://NIeBeFUb.nmbbt.cn
http://aKQYhh4p.nmbbt.cn
http://hF8CsRUt.nmbbt.cn
http://6pTMcGmq.nmbbt.cn
http://qpHvMcEJ.nmbbt.cn
http://cbQLYidb.nmbbt.cn
http://Y0A3Ii1d.nmbbt.cn
http://scPJ0XoH.nmbbt.cn
http://XNLvNMA3.nmbbt.cn
http://OyLMXALA.nmbbt.cn
http://pKio2Rvf.nmbbt.cn
http://F4pz8RzX.nmbbt.cn
http://6LjBA5h6.nmbbt.cn
http://5DXURAaY.nmbbt.cn
http://www.dtcms.com/a/52532.html

相关文章:

  • scBaseCamp:一个AI代理的可持续扩充的单细胞数据存储库
  • Huggingface transformers库使用教程(翻译)--------(2)使用piplines进行推理
  • IDC权威认证!永洪科技入选 IDC「GBI图谱」,点亮生成式 BI 价值灯塔
  • 【Linux】使用问题汇总
  • MySQL-多表查询
  • 模拟数据文件少写“+”加在本地如何恢复?
  • Java 实现 Oracle 的 MONTHS_BETWEEN 函数
  • 在PyCharm开发环境中,如何建立hello.py文件?
  • 小菜鸟系统学习Python-迭代实现斐波那契和汉诺塔问题
  • C语言——链表
  • 国产替代新篇章:领麦微红外测温传感器赋能3D打印精准制造
  • 开启科创服务新篇章:八月瓜科技CRM数字化管理系统成功上线
  • 永磁直驱式风力发电虚拟同步机仿真模型Matlab/Simulink模型
  • 从数据到决策,永洪科技助力良信电器“智”领未来
  • 【CV001】归一化互相关模板匹配matlab实现
  • 【漫话机器学习系列】120.参数化建模(Parametric Modeling)
  • PHP动态网站建设
  • Linux内存分页:原理、优势与实践
  • pytest框架 核心知识的系统复习
  • vulnhub靶场之【digitalworld.local系列】的mercy靶机
  • c++变量和声明的语法总结
  • 塔能物联运维:城市照明极端天气下的“定海神针”
  • 计算机毕设-基于springboot的网上商城系统的设计与实现(附源码+lw+ppt+开题报告)
  • CoreDNS 可观测最佳实践
  • /***************************所有笔记汇总目录***************************/
  • 【卫星语音通信】神经网络语音编解码算法:AudioDec
  • vtk 3D坐标标尺应用 3D 刻度尺
  • DeepSeek架构革命:动态异构计算
  • Ubuntu22.04安装Ollama部署DeepSeek-R1:32B模型
  • 《2025国内免费DeepSeek-R1自部署平台实测指南:三大运营商/腾讯/华为哪家强?附避坑清单》