本文给大家分享一个最近比较火的AI视频制作方法，这类视频大家可能都看过，就是《女孩的一生》或者《男孩的一生》，这类视频之所以这么火，首先是触动了大家的内心、产生了共鸣，让大家快速感受到了人生的漫漫旅途，其次就是AI制作的新奇方式，让人不免眼前一亮。
其实我去年就注意到了这类视频，只是没想到它的关注度这么高，在B站上，这类视频的最高播放量竟然达到了300多万，真的是出乎我的意料。当然这其中肯定也有账号权重的加成和平台的推荐，但是这个播放量真的挺吸引人的。
于是这几天我自己也制作了一个类似的视频，并发布到了我的微信视频号上，结果当天就产生了5000多的播放量，后来继续发布又达到了1.4万的播放量，看来这个成功很可能是可以复制的，怀着略微激动的心情，特别分享给大家。
本文就给大家分享下此类视频的制作方法，我们要使用的工具是 Stable Diffusion WebUI 和它的一个插件 AnimateDiff，这里简单介绍下它们。
- Stable Diffusion WebUI 是当下最流行的AI绘画工具之一，可以在浏览器中使用，操作简单方便，容易上手，有很多扩展插件可以使用。
- AnimateDiff 是一个即插即用的模块，不需要额外训练，就能将图片轻松转换为动画视频。
下面开始我们的探索之旅。
工具准备
这里给大家分享两种方式，一是直接使用已经配置好的镜像，只需要使用这个镜像启动一个新的容器实例，就可以直接开始视频创作了，适合新手人群；另外一种方式就是自己手动安装，这种方式需要一些动手能力，适合在自己的电脑上使用，不过需要12G显存以上的Nvidia显卡。
使用镜像
首先访问 http://127.0.0.1:6006”的提示，就说明 Stable Diffusion WebUI 已经启动成功了。
然后我们回到“容器实例”列表页面，再点击“自定义服务”，就可以在浏览器打开“Stable Diffusion WebUI”了。
如果还想了解关于 AutoDL 的更多操作细节，可以看这篇文章：juejin.cn/post/726160…
手动安装
如果你想在本机安装或者体验下安装的乐趣，那么我也准备了一份手动安装说明。
安装 Stable Diffusion WebUI
关于 Stable Diffusion WebUI 的安装方法，大家一般使用的都是秋叶整合包，网上的教程可以用汗牛充栋来形容了，我之前也介绍过这种方式，大家可以参考下：
注意本机安装时，需要牛X显卡，12G以上的Nvidia显卡，20G以上显存运行更流畅。
安装 Animatediff 插件
启动 Stable Diffusion WebUI 后，我们在主菜单中找到“扩展插件/Extensions”，点击进入后，按照下图的方式安装插件：
如果访问 Github 存在障碍，可以给公众号（yinghuo6ai）发消息：动画视频，即可获取完整的AnimateDiff 插件，然后放到 Stable Diffusion WebUI 的extensions目录中即可。
安装成功后，记得重启 Stable Diffusion WebUI。
然后就能在“文生图”和“图生图”的页面下方看到这个插件，如下图所示，点击右侧按钮就能展开插件的参数设置面板。
安装 Animatediff 模型
这里说的模型是 AnimateDiff 生成视频时所使用的模型，这种模型从真实世界的视频中学习了很多运动先验知识，不是 Stable Diffusion 生成静态图片使用的模型。
我们可以在抱脸下载到这些模型：
外网访问不方便的同学可以给公众号（yinghuo6ai）发消息：动画视频，即可以获取最新模型的国内下载地址。
这些模型还需要搭配 Stable Diffusion 的模型一起使用，如果使用的 Stable Diffusion 模型是1.5版本，建议下载这个最新的 v3 版本。
如果使用的是 Stable Diffusion XL 模型，请下载这个 mm_sdxl_v10_beta。不过根据官方的介绍，因为训练数据的不足，XL模型的效果可能不太好，还是建议使用SD 1.5。
模型下载后放到插件的 model 目录下，如下图所示：
有的同学可能会问：怎么识别 Stable Diffusion 模型的版本？我们下载模型的时候，模型的名字和详情中一般都会标注这个模型的基础模型或者算法版本，1.5 或者 XL，所以不用担心分不清楚。如下图所示：
生成视频
万事俱备，现在就可以开始制作动画视频了。注意生成的视频是没有声音的，你还可能还想给视频加一些配乐、加一些贴纸，我们可以到剪映中再做一下剪辑，下边也会有一个简单的使用介绍。
生成视频
首先看怎么生成视频，只需要简单的两步：
第1步： 选择Stable Diffusion模型，填写提示词和反向提示词，如下图所示：
Stable Diffusion 模型可以根据自己的喜好进行选择，官方推荐了两个，一个是真实模型 realisticVision，另一个是动漫模型 ToonYou，大家可以自行下载，也可以给公众号“yinghuo6ai”发消息“SD”获取下载地址。
提示词的编写有点技术含量，不过也很容易掌握。这种提示词的编写方法称为“Prompt Travel”，可以理解为“提示词旅行”或者“提示词穿梭”，编写时分为三个部分：
- 首行是头部提示，可以不写。
- 中间部分使用“帧号: 提示内容”的格式进行编写，帧号按升序排列，第一帧的索引为0。
- 最后一行是尾部提示，同样是可选的。
头部提示和尾部提示会增加到中间每个帧的提示词前后，用于控制生成视频中关键帧的图片生成。
如果不使用这种提示词编写方法也是可以生成动漫视频的，比如“1girl is dancing”可以生成一个女孩跳舞的视频，只是不太适合本文演示的视频内容。
贴出我使用的提示词：
masterpiece, best quality, indian, wealthy family, solo, aryans,
0: a new born cute baby girl lying on a crib crying, top view,gold jewelry,
10: a new born cute baby girl lying on a crib crying, top view,gold jewelry,
20: a 3 years old cute girl,indian clothes,gold jewelry,
30: a 5 years old cute girl,saree clothing,gold jewelry,
40: 7 years old girl in the classroom,school uniform, pretty,noble school,exclusive school,
50: 7 years old girl in the classroom,school uniform, pretty,noble school,exclusive school,
60: 12 years old girl wearing a backpack, school uniform, pretty,noble school,exclusive school,
70: 17 years old girl,((dancing)), saree, pretty,gold jewelry,(school show),
80: 17 years old girl,((dancing)), saree, pretty,gold jewelry,(school show),
90: 17 years old girl dancing, saree, pretty,gold jewelry,
100: 20 years old woman graduates from college, (black PhD hat),on campus, pretty,
110: 20 years old woman graduates from college, (black PhD hat), on campus, pretty,
120: 25 years old woman working in office, computer, ((professional suit)),pretty,
140: 25 years old woman working in office, computer, ((professional suit)),pretty,
150: 26 year old woman in wedding, lehari clothing, pretty,gold jewelry,
160: 26 year old woman in wedding, lehari clothing, pretty,gold jewelry,
170: 27 year old woman, pregnant woman with a big belly, lehari clothing, pretty,gold jewelry,
180: 30 year old woman holding a baby, lehari clothing, pretty,gold jewelry,
190: 30 year old woman holding a baby, lehari clothing, pretty,gold jewelry,
200: 38 year old woman standing in front of the classroom blackboard, Indian teacher uniform,
210: 40 year old woman standing in front of the classroom blackboard, Indian teacher uniform,
220: 50 year old woman, looking at viewer, home party, rice container, saree clothing,gold jewelry,
230: 50 year old woman, looking at viewer, home party,rice container, saree clothing,gold jewelry,
240: 60 year old woman traveling, standing on a large cruise ship,lehari clothing,gold jewelry,
250: 60 year old woman traveling, standing on a large cruise ship,lehari clothing,gold jewelry,
260: 70 year old woman crossed legs, lehari, indian style,
270: 70 year old woman crossed legs, lehari, indian style,
280: a 80 year old woman in a large memorial photograph is displayed hanging on the wall, lehari, indian clothes,gold jewelry,
290: a 80 year old woman in a large memorial photograph is displayed hanging on the wall, lehari, indian clothes,gold jewelry,
little smile, looking at viewer, simple background,
第2步： 配置Animatediff参数，如下图所示：
Motion module：这里选择动画模型，如果 Stable Diffusion 模型使用的是 1.5 模型，这里请选择 v3_sd15_mm.ckpt，如果 SD 使用的是XL模型，这里请选择
Save format 也就是生成视频的保存格式，这里建议勾选 GIF 和 MP4。
Enable AnimateDiff 勾选后就会在 Stable Diffusion WebUI 生成时创建视频。
Number of frames 视频的总帧数，一定要比上边提示词中使用的提示词要大。
Closed loop 控制视频的循环播放效果，也就是让最后一帧更趋同于第一帧，这在Gif动画时特别有用，不过长视频就不推荐了，这里选择“N”。其它几个选项会逐渐加深对视频循环的倾向，A会让最后一帧和第一帧的画面相同。
其它 Stable Diffusion 的采样器、采样步数、图片的宽高，我们全部使用默认的就可以了，等你熟练操作了，可以试着改改参数。
然后我们就可以去点击生成了，图片生成区域会展示处理进度，最后我们可以查看GIF和MP4，然后点击右上角的下载按钮下载到本地。
视频剪辑
这一步可以在手机中完成，通过手机自带的应用市场安装一个“剪映”APP。
点击“开始创作”选择下载到手机中的视频。
然后在页面下方点击“音频”，继续点击“音乐”，选择一首搭配的音乐就行了（上边可以搜索的哦）。
注意音乐的长度和视频的长度可能不匹配，拖动相应的区域就可以进行剪辑，试试就会用了，其它功能也是多试试，很容易就掌握了。
最后点击右上角的“导出”，我们就可以在手机相册中找到这个视频了。
进阶功能
Animatediff还可以搭配 ControlNet 使用，这样我们就可以做更多的生成控制，比如参考某种风格、使用某种动作姿势，等等。
举个美女跳舞的例子，我们可以先找一个美女跳舞的视频，然后使用 Stable Diffusion+Animatediff 进行重绘，这样我们就可以生成1个新的美女跳舞视频，人物、服饰、背景是新的，但是人物的动作是参考视频的。
首先看 Animatediff 的设置：
然后我们在 ControlNet 中启用 OpenPose 类型：
生成效果差不多是这样的：
当然我们也可以使用其它的 ControlNet 类型，直接在ControlNet给一张参考图片，而不使用视频作为参考。
关于Sora
前段时间OpenAI发布了AI视频生成模型Sora，其在遵循复杂文本提示和生成复杂场景方面表现卓越，着实震惊了世界，但是根据这两天的消息，由于各个方面的原因，Sora短期内都不会公开发布，更谈不上开源了，所以使用 Animatediff 生成视频还是有很大意义的。
Animatediff 官方的计划也是继续开发这个扩展程序，直到有具备强大复杂场景生成能力、易于定制且拥有类似SD1.5良好生态系统的开源视频模型发布为止。
资源下载
因技术更新较快，本文提到的方法可能会过期失效，如需最新版本请通过下方公众号获取。另外本人文章中使用的SD模型、Lora模型、SD插件、示例图片等，都已经上传到我整理的 Stable Diffusion 绘画资源中，最新下载地址也可通过下方的公众号获取。
给公众号 yinghuo6ai 发消息：SD，即可获取最新的AI绘画教程和资源下载地址。
以上就是本文的主要内容了，心动不如行动，有兴趣的快去试试吧。
Animatediff的官方使用参考：
