AI绘画专栏之 SDXL AI动画手把手教程(34)

在哪下整合包

链接：https://pan.quark.cn/s/46a442f4f451

最新视频制作

(2.5D), (ridiculous, incredibly ridiculous, huge file size, super detailed, high resolution, extremely detailed),
 masterpiece, official art, super high resolution, 
 1 girl, full body, solo, waving_wind, The background is the sky, 

1.风

2.火

3.雷

4.电

160 40

黄金圣斗士的由战斗到战死的动画

每次制作完卸载模型

视频效果

https://www.bilibili.com/video/BV1Ww411F7gw

视频制作

1.参数

(8k, best quality, masterpiece:1.2), 
(realistic, photo-realistic:1.2),
 (close shot:1.1),(cinematic_angle), 
 (lens_flare:1.3), Rolling Cloud, 
 1 girl, full_body, (((golden_hair))), in the forest, wearing a white dress, looking at viewer, <lora:v2_lora_ZoomOut:1>, 

NSFW, blurry, low quality, bad anatomy, sketches, lowres, worstquality, bad proportions, out of focus, 

318003029

perfect face ,best quality,

bad face,low quality,

每次更换下面的参数

1.red

2.green

3.blue

4.pink

6.golden

遥遥领先动图制作

Logo动图制作

人物动态化带转场镜头控制~

1.文生图/图生图固定seed

2.转场控制Lora权重设置从0.8-1区别在于提示词需要动态效果相关

3.每次出完第一批需要第二批时重启

存放模型位置

E:\sd-webui-aki\sd-webui-aki-v4\extensions\sd-webui-animatediff\model

看这里👆

1.是什么

GPU 内存优化，~12GB VRAM 用于推理

基础显存需要占用12GB左右，拉低分辨率试试其他显存

图片转giff的视频插件可制作giff等等

此扩展以不同的方式实现 AnimateDiff。它不需要您克隆整个 SD1.5 存储库。它还（可能）对 应用了最少的修改，因此如果您不想重新加载模型权重，则无需重新加载。ldm

WebUI 上的批量大小将在内部替换为 GIF 帧号：1 批生成 1 个完整的 GIF。如果要一次生成多个GIF，请更改批号。

批号与批号不同。在 A1111 WebUI 中，批号高于批大小。批号表示顺序步骤的数量，但批大小表示并行步骤的数量。当您增加批号时，您不必太担心，但是当您增加批号（在此扩展中，视频帧号）时，您确实需要担心您的VRAM。使用此扩展时，根本不需要更改批大小。

2023年9月24日19:05:21最新版效果对比

V1版本 对比 Model V2版本

验证SDXL是否支持？

为啥我的支持了？但是转场效果一般

效果图

效果图2 SDXL悬溺 单纯拼接动图

3.怎么玩

1.采样方法选择DDIM

2.最大帧数按着自己显卡速度评估一般不超过24

常见问题

1. 问：我正在使用阻止谷歌的远程服务器。我该怎么办？
2. 答：您必须找到一种方法在本地下载运动模块并重新上传到您的服务器。
3. 问：我需要多少VRAM？
4. 答：目前，您可以通过 NVIDIA 3090 使用此扩展运行 WebUI。我不能保证 GPU 的任何其他变体。实际VRAM使用情况取决于您的图像大小和视频帧数。您可以尝试减小图像大小或视频帧数以减少VRAM的使用。默认设置消耗 12GB VRAM。稍后将添加更多VRAM信息。
5. 问：我可以生成视频而不是 GIF 吗？
6. 答：很遗憾，你不能。这是因为整批图像将通过转换器模块，这会阻止我们按顺序生成视频。我们期待用于视频生成的深度学习的未来发展。
7. 问：我可以使用 SDXL 生成 GIF 吗？
8. 答：至少在目前，你不能。此扩展实质上是将多个运动模块注入SD1.5 UNet。它不适用于 SD 的其他变体，例如 SD2.1 和 SDXL。我不确定如果您强制将运动模块添加到 SD2.1 或 SDXL 会发生什么。未来的实验是必要的。
9. 问：我可以使用此扩展程序来做 gif2gif 吗？
10. 答：由于 AnimateDiff 的 1 批行为，可能无法支持 gif2gif。但是，我需要与AnimateDiff的作者讨论这个问题。
11. 问：我可以使用 xformer 吗？
12. 答：是的，它不会应用于 AnimateDiff。我将尝试其他优化。请注意，xformers 将更改您生成的 GIF。
13. 问：如何在t2timage部分中重现结果？
14. 答：您必须将create_random_tensors替换为
15. torch.manual_seed(<seed>) from einops import rearrangex = rearrange(torch.randn((4, 16, 64, 64), device=shared.device), 'c f h w -> f c h w')
16. ，然后重试。A1111 以完全不同的方式生成随机张量。这仅适用于 WebUI < v1.6.0。这部分指令将在我查看新的随机张量生成逻辑的源代码后更新。
17. 问：V1.2.0 不适用于 img2img。为什么？
18. 答：我不知道。我会尽快弄清楚原因。

https://github.com/guoyww/animatediff/

AnimateDiff [2023/09/25] 发布 MotionLoRA 及其模型动物园，实现摄像机移动控制！请下载 MotionLoRA 模型（每个模型 74 MB，可从 Google Drive / HuggingFace / CivitAI 获取）并保存到 models/MotionLoRA 文件夹。例如

获取 lora 模型：使用 A1111 根据自己喜欢的图片集训练 lora 模型（例如，教程英文、日文、中文）或从 Civitai 下载 Lora 模型。

为 Lora 模型制作动画：使用 gradio 界面或 A1111（例如，英文、日文、中文教程）

结合其他技术发挥创意，如超分辨率、帧插值、音乐生成等。

报错解决

我正在参与2023腾讯技术创作特训营第三期有奖征文，组队打卡瓜分大奖！