Stable Diffusion WebUI Prompt Travel:在潜空间中创造动画效果

Stable Diffusion WebUI Prompt Travel:在潜空间中创造动画效果

Stable Diffusion WebUI Prompt Travel是一个为AUTOMATIC1111/stable-diffusion-webui设计的扩展脚本,它允许用户在潜空间中插值不同的提示词条件,从而生成看似连续的图像序列,创造出伪动画效果。这个创新的工具为AI艺术创作者提供了一种新的表现方式,让静态图像焕发生机。

工作原理

Prompt Travel的核心思想是在潜空间中进行插值。它的工作流程如下:

1. 用户在提示词/负面提示词框中输入多行文本,每一行被视为一个"阶段"。

2. 脚本会逐一生成图像,在一个阶段向下一个阶段插值。

3. 在这个过程中,脚本会逐步改变经过处理的输入提示词,同时保持其他设置(如步数、采样器、CFG因子、种子等)不变。

4. 最后,脚本会将生成的图像序列导出为视频。

值得注意的是,脚本只会固定主要的种子值,用户仍可以设置subseed = -1来引入更多变化。

主要功能

Prompt Travel支持以下主要功能:

• 文生图(txt2img)和图生图(img2img)模式
• 多种采样器选择,如Euler a、DDIM等
• 三种生成模式:固定(fixed)、连续(successive)和胚胎(embryo)
• 支持ControlNet,可以在提示词或控制条件之间进行插值
• 上采样选项
• 可选的外部后处理管道,大幅提升平滑度

使用方法

要使用Prompt Travel,用户需要:

1. 在提示词/负面提示词框中输入多行文本,每行代表一个阶段。
2. 选择合适的生成模式、采样器和其他参数。
3. 点击生成按钮,脚本会自动在各阶段之间插值并生成图像序列。
4. 可选择使用后处理管道来进一步优化结果。

最新更新

Prompt Travel持续迭代更新,不断增加新功能并修复问题。最新版本v3.1支持SDXL v1.0模型,并与stable-diffusion-webui v1.5.1和sd-webui-controlnet v1.1.229兼容。

近期的一些重要更新包括:

• 重新实现核心功能,提高与其他扩展的兼容性
• 添加RIFE到controlnet-travel
• 新增用于后处理工具链的GUI界面
• 集成depth-image-io的基本功能,支持depth2img模型

结语

Stable Diffusion WebUI Prompt Travel为AI艺术创作开辟了新的可能性。通过在潜空间中巧妙地插值不同提示词,它能够生成流畅的伪动画效果,为静态图像赋予生命力。无论是制作演示文稿、绘本还是其他创意项目,Prompt Travel都是一个值得尝试的强大工具。

随着持续的更新和社区的贡献,我们可以期待这个扩展在未来会带来更多令人兴奋的功能。对于那些希望将AI艺术推向新高度的创作者来说,Prompt Travel无疑是一个不可或缺的利器。

查看Prompt Travel GitHub仓库