ARTICLE DETAIL

资讯详情

深耕编程入门与网站建设的一线实战洞察。

零门槛上手 sd-webui-animatediff:用 Stable Diffusion WebUI 一键搞定 GIF 动画制作

零门槛上手 sd-webui-animatediff:用 Stable Diffusion WebUI 一键搞定 GIF 动画制作 零门槛上手 sd-webui-animatediff用 Stable Diffusion WebUI 一键搞定 GIF 动画制作【免费下载链接】sd-webui-animatediffAnimateDiff for AUTOMATIC1111 Stable Diffusion WebUI项目地址: https://gitcode.com/gh_mirrors/sd/sd-webui-animatediff如果你已经玩腻了 Stable Diffusion 生成的静态图片一定想过能不能让画面里的女孩眨眼、让云朵飘动、让镜头缓缓推近好消息是装上 sd-webui-animatediff 这个扩展后你能像生成图片一样生成 GIF 动画——动动鼠标一段 2 秒的短片就诞生了。这套新手教程会带你走完从环境准备、模型安装到参数调优的全过程照着点就能跑通。这个项目能帮你做什么先搞清楚一件事Stable Diffusion WebUI 本身只会出静态图而 AnimateDiff 是专门给模型注入运动模块的技术让模型在生成时多考虑一个时间维度。sd-webui-animatediff 把这项能力打包成了一个开箱即用的 WebUI 扩展还顺手接上了 ControlNet让画面不是乱动而是按你的意图动。和其他动画生成工具相比它的最大优势是和文生图共用同一套工作流。你不需要学习新的界面、新的概念只要会填提示词就能让任何一段提示词动起来。更贴心的是它把运动模块以插件方式注入 UNet切换模型时不用重新加载权重省心也省显存。从实用角度看它能做的不止是让静态图动一下你可以做提示词旅行Prompt Travel让画面内容随时间渐变、图片生视频Img2Vid给一张首帧图生成一段动画、ControlNet 视频生视频V2V用源视频控制画面内容甚至叠加 Motion LoRA 来控制镜头平移、旋转等运动轨迹。这些玩法都集成在同一块面板里普通用户完全够用。出发前的装备清单动手之前先按下面的清单核对一遍环境。这些是项目明确声明的最低要求版本不满足会直接报错别抱着侥幸心理跳过。装备版本要求说明AUTOMATIC1111 Stable Diffusion WebUI≥ 1.8.0整个扩展的运行底座太老版本不支持sd-webui-controlnet≥ 1.1.441很多进阶功能V2V、提示词旅行依赖它PyTorch≥ 2.0.0深度学习运行库WebUI 一般已自带显卡显存建议 ≥ 6GB默认 16 帧 512×512 出图约需 4~6GB见下文优化第一步安装扩展本体。在 WebUI 的Extensions → Install from URL页面把仓库地址填进去点 Install 后重启 WebUI或使用git clone https://gitcode.com/gh_mirrors/sd/sd-webui-animatediff手动下载到extensions/sd-webui-animatediff/目录。重启后txt2img 和 img2img 页面里就会出现一个AnimateDiff折叠面板。第二步准备运动模块Motion Module。这是动画能力的核心权重文件。去 Model Zoo 下载一个 SD1.5 的运动模块比如mm_sd15_v2.ckpt或mm_sd15_v3.safetensors放进stable-diffusion-webui/extensions/sd-webui-animatediff/model/目录。如果你想把模型放到别的目录也可以在Settings → AnimateDiff里指定路径。第三步开启两个关键开关。进入Settings → Optimizations务必勾选Pad prompt/negative prompt to be same length并点击 Apply settings——不勾它动画会被拆成两段不相关的画面。旁边的 Batch cond/uncond 可选勾上跑得更快但更吃显存。搞定这一步离成品又近了一步。接下来进入最激动人心的环节动手生成。从零生成你的第一段 GIF 动画目标很简单用一句提示词生成一段 16 帧、约 2 秒的循环 GIF。整个过程不到 10 分钟。第 1 步选对入口。在 txt2img 页签生成纯文本驱动的动画在 img2img 页签做图片生视频。新手第一次建议从 txt2img 开始最省事。第 2 步正常写提示词。选一个你熟悉的 SD1.5 底模别用 SDXL 模型配 SD1.5 的运动模块会出严重伪影像平时出图一样写提示词和负面提示词。图像尺寸用默认 512×512 即可分辨率越高越吃显存。第 3 步打开 AnimateDiff 面板并启用。点击AnimateDiff折叠面板勾选Enable AnimateDiff确认 Motion module 下拉框里选中了你放进model/目录的文件。如果列表为空点旁边的刷新按钮。第 4 步按需调整这几个参数。Number of frames帧数默认 0 表示自动使用Context batch size的数值对新手来说保持默认就好。FPS每秒播放几帧默认 8。生成 16 帧、FPS8动画时长就是 2 秒。Display loop number循环次数0 表示无限循环播放。Context batch size上下文批量大小默认 16和 SD1.5 运动模块的训练规格一致建议别动它。Closed loop闭环想让首尾帧衔接、做成无缝循环选RP或A不追求循环选R-P。第 5 步点击 Generate。接下来就是见证成果的时刻——生成过程比普通出图慢一些16 帧相当于同时算 16 张图耐心等一小会儿。完成后右侧图库会出现一段 GIF预览图下方通常还会附带一整套可复制的参数信息infotext。输出文件会自动保存在stable-diffusion-webui/outputs/txt2img-images/AnimateDiff/日期/目录下包含 GIF 和每一帧的 PNG 原图。如果你不想要帧图可以在Settings → AnimateDiff里取消Save frames to custom directory之类的选项输出就只剩动画本体了。到这里你已经有了一段自己造出来的动画。不过默认参数只是及格线接下来我们聊聊怎么让它更惊艳。让成品更出彩参数与效果调优先学会控制运动方向。想让镜头平移、旋转、放大给 V2 运动模块配一个 Motion LoRA 即可用法和普通 LoRA 完全一样把文件放进stable-diffusion-webui/models/Lora/然后在提示词里写lora:mm_sd15_v2_lora_PanLeft:0.8就能让画面整体向左平移。PanDown、ZoomIn 等方向同理换名字即可。注意 Motion LoRA 只适用于 V2 运动模块。让内容随时间变。用提示词旅行功能在正向提示词框里分行写帧号提示词模型就会在这几帧之间做平滑插值。比如第一行写头提示词然后写0: closed mouth、8: open mouth结尾再补一行收尾提示词——人物的嘴就会在动画进行到一半时张开。这个功能需要安装 ControlNet不用启用它把帧号从小到大排好、小于总帧数即可。让首尾真正闭环。想做循环动画但发现接缝明显在Closed loop里选RP减少闭环上下文并让提示词旅行也闭环或A强制首尾帧一致适合镜头运动类动画。配合Overlap帧间重叠数量默认取 batch size 的 1/4和Stride步长决定时间一致性默认 1微调能显著改善长序列的连贯性。让画面更稳。如果帧与帧之间闪烁、跳变打开面板里的FreeInit折叠区勾选 Enable FreeInit。默认参数对多数场景已经够好如果画面里运动幅度很大把 Filter Type 换成 Gaussian 更合适。代价是生成时间变长迭代次数越大越平滑也越慢。给 GIF 画质做最后一道打磨。在Settings → AnimateDiff里勾选Calculate the optimal GIF palette扩展会计算最优调色板显著减少 GIF 的色带和偏色这是性价比极高的一步。此外保存格式除了 GIF还能选 MP4、WEBP、WEBM 等按分享场景挑即可。如果你显卡不太行试试这几招。在Settings → Optimizations打开FP8 weight需 PyTorch ≥ 2.1.0显存占用立竿见影。换用Euler A等更省资源的采样器配合 LCM 思路把步数压到 6~8 步、CFG 降到 1~2速度能快好几倍。记得减少图幅尺寸永远是最直接的降显存手段。新手避坑速览把最容易踩的坑浓缩成一张速查卡遇到问题先来这里对号入座千万别混搭SD1.5 运动模块配 SDXL 底模或反过来用 HotShot-XL / AnimateDiff-XL 配 SD1.5必然出严重伪影。别忘勾选 Pad prompt不勾 Pad prompt/negative prompt to be same length生成的是两段不相关的 GIF。改 batch number别改 batch size想一次出多段动画调批次数批量大小在这个扩展里会被帧数接管乱动反而爆显存。帧数别小于上下文批量大小Number of frames 若设成比 Context batch size 还小的非 0 值会踩到已知问题建议要么留 0 要么保持一致。V3 适配器要用专用文件V3 运动模块搭配的 adapter 有状态字典兼容问题务必用项目指定来源的版本。下载 Motion LoRA、Hotshot-XL、V3 适配器时认准官方 fp16/safetensors 版本这些文件的格式与通用权重不互通用错会加载失败。生成失败先看日志WebUI 的终端日志会直接打印异常绝大多数问题模型路径、版本、显存不足都能在里面找到答案。写在最后从安装扩展到跑出第一段动画其实只隔着一层窗户纸环境就绪 → 放好模型 → 勾选启用 → 点击生成四步而已。等你熟悉了基础流程不妨再往深走一步——试试 ControlNet V2V用一段源视频去驱动画面内容或者翻一翻项目自带的 docs/features.md 和 docs/how-to-use.md里面把每个参数和玩法都写得清清楚楚。动画生成的门槛正在快速降低而你已经站在了像出图一样出视频的门口。现在就打开 WebUI 装上这个扩展用一句你最喜欢的提示词去生成属于自己的第一段 GIF 动画吧。生成之后记得分享给同好——每个人的第一段动画都值得被看见。【免费下载链接】sd-webui-animatediffAnimateDiff for AUTOMATIC1111 Stable Diffusion WebUI项目地址: https://gitcode.com/gh_mirrors/sd/sd-webui-animatediff创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表