MT-UNet

MT-UNet

融合Transformer和UNet的医学图像分割新模型

MT-UNet是一种结合Transformer和UNet优势的医学图像分割模型。该模型在Synapse和ACDC数据集上分别达到79.20%和91.61%的DSC评分。MT-UNet通过混合transformer结构实现多尺度特征融合,为医学图像分析提供新思路。项目开源代码和预训练权重,便于研究者复现结果和深入研究。

MT-UNet医学图像分割数据集准备模型训练权重文件Github开源项目

MT-UNet

2024年4月15日更新

我们已根据最近提出的问题在./dataset/目录下上传了lists_Synapse.zip文件。请与您下载的Synapse数据集一起使用。

2022年3月5日更新

论文已被ICASSP 2022接收。今天发布完整代码。

请注意,如果您之前申请过我们的代码,那个版本现已过时,建议您使用此仓库中的最新版本。


1. 准备数据集

  • Synapse数据集可在TransUnet的仓库中找到。

  • ACDC数据集稍复杂,因为我们发现之前的工作使用不同的划分但直接相互比较。为确保实验公平,我们使用自己的划分并重新运行所有方法。我们已上传预处理后的ACDC数据集在此,或您可以在这里自行下载数据集。

2. 克隆代码

  • 首先,用以下命令克隆我们的代码:
git clone git@github.com:Dootmaan/MT-UNet.git
cd MT-UNet
  • 然后,根据您的实验环境修改"train_mtunet_ACDC.py"和"train_mtunet_Synapse.py"。您可以在这两个文件中搜索"path/to/dataset",并替换为您机器上ACDC和Synapse数据集的实际路径。

3. 开始训练

  • 之后,您可以用以下命令开始训练:
CUDA_VISIBLE_DEVICES=0 nohup python3 -u train_mtunet_ACDC.py >train_mtunet_ACDC.log 2>&1 &

权重默认保存在"./checkpoint/ACDC/mtunet",预测结果保存在"./predictions"。您也可以使用argparser在训练前加载我们的权重。

ACDC权重

Synapse权重


我们已测试代码确保其正常工作。但如果您仍发现bug,欢迎提交拉取请求或直接提出问题。

我们也鼓励您阅读下方的更新日志,了解更多关于此仓库的信息。

2022年1月5日更新

通过基于先前权重的再次训练,我们的模型在ACDC上也取得了更好的性能(91.61% DSC)。我们已将ACDC的权重更新为这个最新版本,您可以自行查看。然而,先前版本的权重仍可在Google Drive上获取,您可以通过之前的提交访问它们。

2022年1月4日更新

我们进一步训练了MT-UNet,结果在Synapse上取得了更好的结果,DSC为79.20%。我们已将Synapse的公开权重更新为此版本,并将在论文中更新结果。

2022年1月3日更新

应当提到,我们目前正在对模型进行一些统计评估,这些结果也将在本站公开。

  • [已更新] 点击这里获取我们用于Synapse的权重。

  • [已更新] 点击这里获取我们用于ACDC的权重。TransUnet的作者没有提供ACDC数据集的划分。因此,我们基于自己的数据集划分进行了所有ACDC实验。

2021年11月19日更新

  • 感谢您对我们工作的兴趣。我们已上传MTUNet的代码,以帮助同行进行进一步研究。然而,其余代码(如训练和测试代码)目前组织得不太好,我们计划在论文发表时发布它们。还应注意,这些代码目前以粗略的形式提供。如果您是该领域的新手或在将我们的模型应用到自己的数据集时遇到困难,请联系我们获取这些代码。

这是我们ICASSP2022论文《MIXED TRANSFORMER UNET FOR MEDICAL IMAGE SEGMENTATION》的官方实现。

完整代码将在论文发表后发布。

编辑推荐精选

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

讯飞绘文

讯飞绘文

选题、配图、成文,一站式创作,让内容运营更高效

讯飞绘文,一个AI集成平台,支持写作、选题、配图、排版和发布。高效生成适用于各类媒体的定制内容,加速品牌传播,提升内容营销效果。

热门AI辅助写作AI工具讯飞绘文内容运营AI创作个性化文章多平台分发AI助手
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
商汤小浣熊

商汤小浣熊

最强AI数据分析助手

小浣熊家族Raccoon,您的AI智能助手,致力于通过先进的人工智能技术,为用户提供高效、便捷的智能服务。无论是日常咨询还是专业问题解答,小浣熊都能以快速、准确的响应满足您的需求,让您的生活更加智能便捷。

imini AI

imini AI

像人一样思考的AI智能体

imini 是一款超级AI智能体,能根据人类指令,自主思考、自主完成、并且交付结果的AI智能体。

Keevx

Keevx

AI数字人视频创作平台

Keevx 一款开箱即用的AI数字人视频创作平台,广泛适用于电商广告、企业培训与社媒宣传,让全球企业与个人创作者无需拍摄剪辑,就能快速生成多语言、高质量的专业视频。

即梦AI

即梦AI

一站式AI创作平台

提供 AI 驱动的图片、视频生成及数字人等功能,助力创意创作

下拉加载更多