MT-UNet

MT-UNet

融合Transformer和UNet的医学图像分割新模型

MT-UNet是一种结合Transformer和UNet优势的医学图像分割模型。该模型在Synapse和ACDC数据集上分别达到79.20%和91.61%的DSC评分。MT-UNet通过混合transformer结构实现多尺度特征融合,为医学图像分析提供新思路。项目开源代码和预训练权重,便于研究者复现结果和深入研究。

MT-UNet医学图像分割数据集准备模型训练权重文件Github开源项目

MT-UNet

2024年4月15日更新

我们已根据最近提出的问题在./dataset/目录下上传了lists_Synapse.zip文件。请与您下载的Synapse数据集一起使用。

2022年3月5日更新

论文已被ICASSP 2022接收。今天发布完整代码。

请注意,如果您之前申请过我们的代码,那个版本现已过时,建议您使用此仓库中的最新版本。


1. 准备数据集

  • Synapse数据集可在TransUnet的仓库中找到。

  • ACDC数据集稍复杂,因为我们发现之前的工作使用不同的划分但直接相互比较。为确保实验公平,我们使用自己的划分并重新运行所有方法。我们已上传预处理后的ACDC数据集在此,或您可以在这里自行下载数据集。

2. 克隆代码

  • 首先,用以下命令克隆我们的代码:
git clone git@github.com:Dootmaan/MT-UNet.git
cd MT-UNet
  • 然后,根据您的实验环境修改"train_mtunet_ACDC.py"和"train_mtunet_Synapse.py"。您可以在这两个文件中搜索"path/to/dataset",并替换为您机器上ACDC和Synapse数据集的实际路径。

3. 开始训练

  • 之后,您可以用以下命令开始训练:
CUDA_VISIBLE_DEVICES=0 nohup python3 -u train_mtunet_ACDC.py >train_mtunet_ACDC.log 2>&1 &

权重默认保存在"./checkpoint/ACDC/mtunet",预测结果保存在"./predictions"。您也可以使用argparser在训练前加载我们的权重。

ACDC权重

Synapse权重


我们已测试代码确保其正常工作。但如果您仍发现bug,欢迎提交拉取请求或直接提出问题。

我们也鼓励您阅读下方的更新日志,了解更多关于此仓库的信息。

2022年1月5日更新

通过基于先前权重的再次训练,我们的模型在ACDC上也取得了更好的性能(91.61% DSC)。我们已将ACDC的权重更新为这个最新版本,您可以自行查看。然而,先前版本的权重仍可在Google Drive上获取,您可以通过之前的提交访问它们。

2022年1月4日更新

我们进一步训练了MT-UNet,结果在Synapse上取得了更好的结果,DSC为79.20%。我们已将Synapse的公开权重更新为此版本,并将在论文中更新结果。

2022年1月3日更新

应当提到,我们目前正在对模型进行一些统计评估,这些结果也将在本站公开。

  • [已更新] 点击这里获取我们用于Synapse的权重。

  • [已更新] 点击这里获取我们用于ACDC的权重。TransUnet的作者没有提供ACDC数据集的划分。因此,我们基于自己的数据集划分进行了所有ACDC实验。

2021年11月19日更新

  • 感谢您对我们工作的兴趣。我们已上传MTUNet的代码,以帮助同行进行进一步研究。然而,其余代码(如训练和测试代码)目前组织得不太好,我们计划在论文发表时发布它们。还应注意,这些代码目前以粗略的形式提供。如果您是该领域的新手或在将我们的模型应用到自己的数据集时遇到困难,请联系我们获取这些代码。

这是我们ICASSP2022论文《MIXED TRANSFORMER UNET FOR MEDICAL IMAGE SEGMENTATION》的官方实现。

完整代码将在论文发表后发布。

编辑推荐精选

扣子-AI办公

扣子-AI办公

职场AI,就用扣子

AI办公助手,复杂任务高效处理。办公效率低?扣子空间AI助手支持播客生成、PPT制作、网页开发及报告写作,覆盖科研、商业、舆情等领域的专家Agent 7x24小时响应,生活工作无缝切换,提升50%效率!

堆友

堆友

多风格AI绘画神器

堆友平台由阿里巴巴设计团队创建,作为一款AI驱动的设计工具,专为设计师提供一站式增长服务。功能覆盖海量3D素材、AI绘画、实时渲染以及专业抠图,显著提升设计品质和效率。平台不仅提供工具,还是一个促进创意交流和个人发展的空间,界面友好,适合所有级别的设计师和创意工作者。

图像生成AI工具AI反应堆AI工具箱AI绘画GOAI艺术字堆友相机AI图像热门
码上飞

码上飞

零代码AI应用开发平台

零代码AI应用开发平台,用户只需一句话简单描述需求,AI能自动生成小程序、APP或H5网页应用,无需编写代码。

Vora

Vora

免费创建高清无水印Sora视频

Vora是一个免费创建高清无水印Sora视频的AI工具

Refly.AI

Refly.AI

最适合小白的AI自动化工作流平台

无需编码,轻松生成可复用、可变现的AI自动化工作流

酷表ChatExcel

酷表ChatExcel

大模型驱动的Excel数据处理工具

基于大模型交互的表格处理系统,允许用户通过对话方式完成数据整理和可视化分析。系统采用机器学习算法解析用户指令,自动执行排序、公式计算和数据透视等操作,支持多种文件格式导入导出。数据处理响应速度保持在0.8秒以内,支持超过100万行数据的即时分析。

AI工具酷表ChatExcelAI智能客服AI营销产品使用教程
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
AIWritePaper论文写作

AIWritePaper论文写作

AI论文写作指导平台

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

AI辅助写作AI工具AI论文工具论文写作智能生成大纲数据安全AI助手热门
博思AIPPT

博思AIPPT

AI一键生成PPT,就用博思AIPPT!

博思AIPPT,新一代的AI生成PPT平台,支持智能生成PPT、AI美化PPT、文本&链接生成PPT、导入Word/PDF/Markdown文档生成PPT等,内置海量精美PPT模板,涵盖商务、教育、科技等不同风格,同时针对每个页面提供多种版式,一键自适应切换,完美适配各种办公场景。

AI办公办公工具AI工具博思AIPPTAI生成PPT智能排版海量精品模板AI创作热门
潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

下拉加载更多