Unpaint: 一款基于Stable Diffusion的Windows和Xbox AI图像生成应用

Unpaint: 革新AI图像生成的Windows原生应用

在人工智能图像生成领域,一款名为Unpaint的应用正在引起广泛关注。这款由开发者axodox创建的开源软件,为Windows和Xbox用户带来了便捷高效的AI图像创作体验。让我们深入了解Unpaint的特性、优势以及它对AI图像生成行业的影响。

突破性的技术实现

Unpaint最引人注目的特点是其完全基于C++的实现。与大多数依赖Python环境的AI图像生成工具不同,Unpaint将整个图像生成过程集成在单一进程中运行。这种创新方法带来了几个重要优势:

1. 更简单的部署:无需配置复杂的Python环境,用户只需安装几个可执行文件和库文件(约30MB)即可使用。

2. 更小的存储占用:除了模型权重文件(每个模型约2.5GB)外,应用本身非常轻量。

3. 更广泛的兼容性:C++实现使得Unpaint可以轻松集成到各种可导入C++或C函数的应用中。

功能丰富的图像生成能力

尽管采用了独特的技术路线,Unpaint在功能上并不逊色于其他主流工具。它支持Stable Diffusion的多种核心功能:

• txt2img:根据文本描述生成图像
• img2img:基于输入图像生成新的变体
• inpainting:智能填充图像的指定区域
• ControlNet增强:提供更精确的图像生成控制

此外,Unpaint还集成了安全检查器,确保生成内容的适当性。

Unpaint的用户界面直观易用,左侧为输入区域,右侧实时显示生成结果

跨平台支持与性能优化

Unpaint不仅面向Windows PC用户,还支持在Xbox游戏主机上运行,为游戏玩家和创意工作者提供了新的创作可能性。

在性能方面,Unpaint采用DirectML技术,可以充分利用NVIDIA和AMD等主流GPU的计算能力。随着微软最近在Build大会上宣布的DirectML优化,Unpaint的性能还将进一步提升。虽然基于ONNX的管道在优化程度上可能还不及直接使用PyTorch和CUDA,但随着驱动程序的不断更新,性能差距正在迅速缩小。

安装与使用

Unpaint现已在Microsoft Store上架,用户可以直接搜索下载。对于需要最新开发版本的用户,可以从GitHub的发布页面获取安装文件。

首次安装时,用户需要完成以下步骤:

1. 下载.msix和.crt文件
2. 安装自签名证书(仅测试版需要)
3. 运行.msix文件进行安装

安装完成后,用户还需要下载至少一个图像生成模型才能开始使用。Unpaint支持从本地硬盘或HuggingFace平台安装模型,开发团队还提供了详细的模型转换教程。

Unpaint支持ControlNet功能,左侧为深度图输入,右侧为生成的图像结果

开源社区与未来发展

作为一个开源项目,Unpaint欢迎开发者参与贡献。项目使用Visual Studio 2022进行开发,感兴趣的开发者可以按照GitHub仓库中的说明设置开发环境并开始贡献代码。

Unpaint的成功证明了原生应用在AI图像生成领域的潜力。随着更多开发者加入和贡献,我们可以期待看到更多创新功能的加入,以及在性能和用户体验方面的持续优化。

结语

Unpaint为Windows和Xbox用户带来了一种全新的AI图像生成体验。通过巧妙利用C++和DirectML技术,它在保持功能丰富性的同时,大大简化了部署和使用过程。无论是对于普通用户还是开发者,Unpaint都提供了一个值得关注和探索的平台。随着AI技术的不断进步,像Unpaint这样的创新应用将继续推动图像生成领域的边界,为创意表达开辟新的可能性。