# 48 分钟！别再说你不会做小说 AI 视频！
# 视频
视频链接：https://www.bilibili.com/video/BV1em421n7fN (opens new window)
# 视频文字版
大家好 好久不见
我是老陆
因为有些朋友想做 AI 小说视频
但不懂具体的操作步骤
我去年也做过小说推文视频
那个时候还没有自动化的工具
得用手搓图片提示词
因为做的非常辛苦
身边有很多朋友熬夜出视频
于是我就做了小说 MJ 的提示词工具
用来提高效率啊
关键是少熬点夜
熬夜比较伤身体
那么今天
我来介绍一下 MJ 的新功能和小技巧
再详细说说呢
如何让小说生成 AI 视频
聊聊这个工具的新功能
最后分享几个关于 AI 的新尝试
所有的工具网站我会放在视频简介中
这期操作会比较详细
所以时间比较长
我在视频下方呢做了进度条
方便大家观看
我们先来说说 MJ
Niji6 的新功能分享
第一点就是 MJ Niji6 的风格垫图
它的命令是这个--sref
然后后面放图片的链接
--sw 0-1000 0 是表示比较不像的
1000 是表示比较像这个图片的风格
那我们来看一下它的效果如何
先是这里看一下 翻译
一个黑色长发女孩
穿着白色的汉服
唐风古装漫画
那这边我用的是 Niji6
会发现出的人啊
有点偏 3D
光影效果什么的比较偏 3D
然后我们让他垫一张这个风格垫图
我们想要他出现这种人
比较卡通一点
比较平面一点的人
那么我们就刚刚 SREF
然后这个垫图的网址啊
我们是 SW 1000
先试试顶格啊
发现我们生成的人
就是非常的好啊
几乎一样
几乎跟他差不多
那我们试试看把它换成一个男孩
提示词改成男人啊
蓝色头发
红色汉服特写
会发现呢
那也可以
但是有一点就是
他这个头发颜色是紫色
我们后面再说
为什么
现在我们把提示词改成动物啊
这边动物是改成个猫
嗯 也没问题
可以的
然后我们再把提示词改成纯景物
就是里面不要有人
也是垫了一张图
发现也没问题
但是我们发现上面 4 张图有什么
一样的地方
是它们的颜色非常的趋近
你看都是紫色
我拉一下
嗯有点紫色蓝色这种感觉
景物和颜色非常趋近
因为我们的 SW 的参数是比较高的
所以它这个颜色会比较趋近
我们试试看更换颜色
我们把 SW 固定在 100
稍微低一些
然后我们就让它换成红绿底色
底色是红绿色
会发现有一点
但是呢
其实紫色和蓝色还是比较多的
那我们试着把 SW 调小
调成 50 哎
发现红绿背景一模一样的提示词
可以啊 红绿背景已经有了
大部分红色绿色都换过来了
紫色也很少
说明这个 SW 是很影响颜色的生成的啊
但是我们会发现
如果把它变成 SW 50
那生成的人物就会有点
固定不住
跟那个二次元人物是有一些区别的
那你看如果是 1000 的话
就非常非常像
嗯 50 的话就是有一点点不一样了
但是 50 的话
好处是它的颜色会有大幅的修改
可以颜色不会
定的那么死
那我们总结一下
sref 固定画风
SW 越高画风越像
但是颜色呢
会非常固定
如果想要图片通过提示词更改颜色
那需要减小到 50 左右啊
第二点分享呢是单人角色固定
是--cref
后面是跟图片链接
它也有个 CW 值
那 0-100 那 0 是表示面部很像
其他都可以更改
那 100 表示头发
面部还有衣服都是一样的
让我们看一下啊
一个方脸红头发蓝眼睛的中国男人
嗯这个是生成的
是这样子
然后我们用这张图来做一个
角色固定
先是 CW 值等于 100
固定脸部、头发和衣服
那我们换个动作
拿着一本书大笑
会发现啊
没有问题
呃衣服也对
然后也在笑
然后头发也对
然后我们去除人物关键词
再次尝试
就是把这个人物关键词啊
只剩下一个中国男人
后面的红头发蓝眼睛
拿着啊黑色汉服
都不要都不要
看他如何
只定 CW 100
只定 CW 100
发现没问题
也是可以锁的
嗯
然后我们再测试一下
调整 CW 值为 50
把它调低
会发现 男人身上的衣服变了
衣服锁不住
但是面部和头发是没问题的
然后我们再来测试
CW 值调为 0
会发现衣服是变了
但是面部、头发还是一样 可以锁
所以说 0 也是 OK 的
他会锁面部
然后我们再试一下
CW 值为 0
我们改变他的头发颜色和衣服
那我们改成
改成白发啊
蓝色唐装
拿书大笑
会发现这个头发其实是很难更改的
他的白色
嗯只有一半
你看红色还是大多数
它的白色只有一半
还是要抽卡
嗯这点还是做的不够完善的地方
这边我们换成一个黑发
再试一下黑发
发现也是一半
有一半黑
一半红很难改变
那我们结论是
CW 为 100 时
提示词就不用输入人物的面部
衣服头发也可以固定角色
CW 为 0 时可以修改衣服的样式和颜色
固定人物比较像
但是头发颜色修改效果不是非常好
我们再来做第三个分享
双人角色固定尝试
这边是如果我们要画双人图
如何固定角色呢
我这边试了 8 种情况
因为太多了
嗯大概
大概拉拉着看看吧
比较长 双人提示词
单人垫图
单人垫图
就各种尝试嘛
各种尝试都有
然后我们看一下尝试的结果
我们先用这一个
老年男人
嗯白色短发
黑西装 再来一个是年轻女人
黑色长发
黄色连衣裙
然后我们用这两张图来测试
一点是双人提示词
发现没有问题
这两个动作都很和谐
但是呢两个人物的样子
都会有一定程度上的变化
那是肯定的
因为他用提示词锁嘛
但是他们两个人动作、表情
都是可以出的
没有问题
然后第二个是单人垫图出双人提示词
我们这边垫了一张老人图
发现老人固定的还行
嗯但是他其实没有眼镜
呃但是女人的话
就是会不停变化
嗯但是也还好呃
头发颜色和这个衣服还是锁住的
下面是是单人垫图
就是这个东西
这个有个问题啊
就是他的 CW 值如果高的话
就发现他合成了
他变成一个人了
嗯 他变成一个人
CW 值太高了
但是我把 CW 值降为 0
两个人了
但是
这两个人会有面部相同的情况出现
会替换脸啊
所以说下面这个也是一样的
也是同样效果
你看这个脸都趋近
头发都是白色的啊
所以不太好啊
双人垫图加双人提示词
发现是可以的
但是要注意
这边的垫图的 IW 值要调低 0.5 左右
或者偏下
因为如果 IW 值为 1 的话
就会出现融合现象啊
我这边的给大家看一下
好
在这里你看 我这边是两张人物垫图
然后设的 IW 值默认是 1
发现他这边会有融合现象
这个男的和女的容易融合
所以 IW 如果双人垫的话
IW 值不能太高
会有融合现象
然后我们继续分享
双人垫图+双人提示词+双人角色固定
这两个都是双人会怎么样
其实效果是换脸哈
脸部又趋近
脸部很趋近
嗯效果不好
把 CW 值设成 0 以后
也会有这种情况出现
脸部比较趋近
再来是双人提示词加
固定单人图 还是老样子啊
CW 值 100 就发现他的很像了啊
垫的是张老人
所以说这个女生也很强壮啊
CW 至 0 也是这样啊
女生是白头发了呃
头发颜色错了
这边是双人提示词加双人角色固定啊
这个效果的话就是还是老样子啊
他的脸部会一样
趋近 不是很好
如果调到 0
cw 值为 0 会有几张好的
会有几张好的
但是还是有几张他是出不来的
他脸部很趋近
所以说结论是
测试下来
我觉得比较好的方法是
双人提示词抽卡
个人认为是可以的
因为虽然说他脸部有些不像
但是呢嗯
但是他的动作很流畅做的
我更在乎他的动作是不是做到位
景色是不是可以更换
第二点是
双人电图和双人加双人提示词
也是可以的
但是比较难出流畅的动作
IW 值要设低
比如说 0.5
但是我觉得这个动作出的有点僵硬
不是很好
所以我我还是倾向于这个
双人提示词就可以了
啊第二步
我们来看一下小说制作视频的流程
我们先看一下文案的智能分镜
我这边准备了一个文案
游戏《鬼屋魔影》的文案
然后我们复制一下
黏贴到这边
然后我们可以用手工分镜
在这边打分隔词
#号键
也可以按行分
也可以按句分 都可以
这里我们说一下
按照复制提示词的文案分镜
我们用 Kimi 这个免费的 AI 帮我们分镜
这个 AI 支持长文本
非常的给力
我们直接复制进去
然后回车
等待一下
这样它会在一句话一个分镜
一行一个分镜
它会输出
这边我们稍微等待一下
好了输出完毕
我们复制一下
然后我们点删除
再粘贴
点 2 行分隔的一行分隔
把每一行进行分镜
然后我们点格式排版的标点符号
替替换
他会把所有标点符号都替换成句号
我们确认啊
都变成句号了
这边逗号都变成句号了
然后
我们这边再点排版格式的每句换行
他会再把每句都换一行
这样就跟字幕很像了
再点删除句号
好我们句号都删除了
这样的话就是每一段一个分镜了
我们点开始批量编辑
如果是做小说推文新号的话
其实没必要固定人物
可以先 AI 批量写词
我们直接出词
按一下批量写词以后稍等一下
然后他就会就会出词
人物场景和动作都有
但是这次我们说一下这个 MJ 的新功能
固定风格和固定人物
所以我们这个不要了
先重新开始一下批量编辑
我们先用 AI 生成一下小说人物
在文案编辑中
点击复制提示词小说人物
然后我们进入 Kimi AI 中
复制粘贴发送
这样 Kimi AI 就会帮我们生成
小说人物的名称
和小说人物的外貌
当然只能做一个参考
具体还是要自己手动改一下
好我们复制一下男人的外貌
进入人物
然后新建几个人物
一个是男主
一个是女主
还有一个是怪物
然后我们在男主的地方
复制人物提示词
再改一下身高不要了
呃只要头发
然后其他的
嗯不需要
穿着也需要简单一点
词尽量简单一点
不要太复杂
穿深灰色的风衣就可以了
好 然后它会自动翻译成英文
这边选一个青年吧
不要中年
然后我们来说一下这个 A
为什么不能用 1
而是用 A
因为是这样子的
我们在这个
导出表格
这里有一个命令
加数字序号的东西
如果我们用了一
而不是用 A
这样的话
我们复制命令看一下
就出现 0001
然后空格 1
这样的话会造成一个复数的形式
mj 就会变混
它会可能会变成一个多人物
所以我们就这边用 A
这边呃对
改成一个英文就好了
不用中文
然后我们把女主也复制过来
呃也是一样
身高也是不要了
然后头发加上
穿衣打扮
穿白色连衣裙
后面也不要了
稍微改一改
好了
然后我们怪物输入一下
呃
是个蔓藤怪物
绕满慢腾的怪物
现在我们要开始固定一下小说的画风
我们在固定参数这边
命令先打一下
--ar 4:3
再用个 Niji6
后面再加一个 SREF
再把这张图
这张是我们选择风格图
复制链接
把它的图片链接复制进来
然后我们再加一个--sw 参数
参数是 1000
我们改 500 好了
嗯要比较像一点
稍微大一些
然后人物这边
复制命令
复制到 discord 上
啊这边我们加一个特写
因为是人物嘛
他要一个近距离的照片
我们加一个特写
女主也加上
呃怪物不要加
好复制
粘贴一下
然后再是女主
弄多一点啊
好选一点
然后再是怪物
好我们等待一下
行了已经全部出完
我们就选这一张
男主角选第一幅图
女主角选第二幅
第一幅图 也选第一幅
然后怪我这边生成的不好
所以说我另外找了一张图
这是男主
然后我们把它图像链接复制一下
到人物角色固定栏
然后黏贴
这边有个 CW 值
我们把它改成 0
不要 100 我们改成 0
然后用衣服的提示词来固定衣服
因为如果改成 100 的话
嗯就会造成动作出不来
比较不好看
怪物这边呢
我们的 CW 值设高一点
因为怪物的外形也要差不多一致
AI 其实跟人一样
你给他的规则越少
他完成的事情就会越好
所以我们尽量少设规则
值要小一点
我们先来批量编辑
这边然后点男主啊
这边也是男主
啊都是男主
前面几个都是男主的图片
这个开始是女主了
都把它点上
这是女主
然后是怪物
但是男主的枪口啊
这边是怪物
这是男女主都有
都勾上
这个也是都勾上
好了我们现在已经完成勾选
这个人物提示词中把特写去掉
因为当时我们做肖像的时候有特写
现在我们要出图了
我们不要特写了
因为这样会太近了镜头
然后我们看一下这个标签系统
点击标签
这边就是你想设什么
自定义的词都可以
然后我们在批量编辑中添加标签
我们这个选一下
这边是让他大叫好了
女主的大叫
惊恐大叫
然后按住这个标签拖动
就会更换这个提示词的顺序
比如说我们这边拖动一下大叫哎
他左边右边顺序就改变了
顺序他会变化
比较方便的就可以变化了
我们这边再看一个
男主这边手枪吧
把他移到前面来
好我们出一下提示词批量出
让我们改一下
这个提示词出的
因为他出的准确率不够高
啊这些不要了
这个也不要
这个不要
简单一点
可以
哎可以可以
这些都还好
我们简单一点啊
我们就稍微改改就好了
不要太复杂
随便试一下
这个不要太长了
单句 AI 吧 换一个
哦这个太长了
这个不要
这些都不要
这个可以
怪物
这个不太好
啊这个怪物我们已经选过了
就加一个动作就可以了
我随便输一个冲撞
这个还行
啊这边我们已经收有手枪了
那标签有了
那我们不要也可以
怪物倒地
好这就可以了
然后批量中翻英 翻译一下
好翻译完成了
然后我们看到这个敏感词啊
我们这边打开了以后
呃如果有敏感词的话
就会 MJ 的敏感词
就是有些地方呃
可能有点血腥暴力之类的
那我们要把它改掉
这是血液
那我们就把他改掉
好正常了
如果有标红的
就把它改掉
导出表格
这个是 Excel 表格
也可以导成那个 TXT 的文档
都可以
然后表格是这样子的
一行是一列命令
都导出了
我们来说一下
这个固定参数中的 SW 参数
现在是 500
其实这个 500 是不好的
因为它太高了啊
具体为什么
我们来看一下
左上方是我的跑图插件
这个可以在我的文档里有
这边是一个 Autojourney 的插件
这是别的团队做的
也是很不错的跑图插件
我们先点一下开始跑图
然后选择 Niji 机器人 自动切割
我们把它的这个表格导入进去
然后这里选命令发送
一定要间隔啊
因为 MJ 最近他的封号有点厉害
所以说我们要间隔长一些啊
这边 800-1000
然后 6 这个是跑慢速比较好
但现在我们试验就快一点
因为我就直接用 fast 模式了
稍微快一点
150-200 就行
150-200 就行
6 个然后开始
然后关闭
可以关闭的啊
可以关闭
他还会跑的
然后打开这个自动下载
要在跑图之前打开自动下载
然后在跑图之后关闭
现在图片已经跑好了
我们点一下关闭停止按钮
停止下载图片
他如果不到 80 张
他就会自动打一个包
然后我们点开这个压缩包
里面就是切割好的图片了
呃然后我们看一下是什么问题啊
那个 500 的问题
会发现这是第一张图
这个风格和这个颜色
这是第二张图
都发现这个颜色啊
都非常相近
这个风格
人物动作也非常相近
就感觉不出有什么区别啊
这就不太好了
相当于你就没怎么变化了
这个场景啊
有是有但很细微那
所以说我们要把 SW 的参数改掉
我们这边改一个很低的参数 20
这就够了
因为它已经有这个 cref 单人的垫图了
再加上 SW 的 20 就够了
然后我们导出命令
好重新导出
我们跑一下图
这个 Autojourney 也可以跑图
他是怎么跑的呢
就是这边切换到 Nijibot
然后自动下载
打开就好了
然后下面是呃
导出这个 TXT 文件
导出以后把这个文件打开
命令复制进去
复制到这个 Autojourney
你就可以跑了
复制啊点这个发送
右上角是个设置
可以设置个时间间隔
也跟我这个一样的
然后我这边我就不演示了
我们先用我这个跑图啊
点一下这个
把新的表格放进去
然后开始跑图
然后我们耐心等待一下
跑完啊 打开这个下载
现在就剩 20 了
SW 20 我们看一下效果如何
稍等片刻
好我们现在已经完成了
我们看一下先停止
这下载好的图片啊都 OK
我们看一下新的图片的效果如何
这是新的图片
看一下这个 4 张图
都不太一样了
画风啊
差不多但是他的颜色啊
动作啊都有出来啊
确实不一
不太一样了
动作都不一样啊
这边场景换了
也是不一样的一个状态啊非常好
跟我们前面 SW100 的比
呃差距非常大啊
这动作都出来了
这是个女主啊
女主做的一般啊
女主没怎么改过提示词
都差不太多
啊这是女主
这个是蔓藤怪物哎
固定的也还可以
差不多这是男主拔枪
这是怪物
这边是双人图
会发现这个双人图啊
你看啊是双人图 20 了
只有 SW 20
但是个双人图
你会发现这四张图的风格都不太相近
为什么呢
因为我们这个 CW 值没上
因为我们没固定人物嘛
只是靠双人提示词加风格垫图
来固定的
发现这四张图都不太一样
会有点画风区别
所以我们要做一个操作
就是在这个固定参数里面
嗯改一下 SW 值
把 SW 值改成 50
然后我们保存一下
添加一个新配置
就叫 SW 50
然后添加配置
这就是个新配置的
会把这个前置命令
后置命令和参数都保存在这个配置中
然后我们回归 20
在批量编辑里把这个 50 单独改了
把这个 14 和 15 行的双人图单独改成 50
我们勾了双人提示词以后
它会自动的
把这个 CREF 的命令给取消掉
因为只在勾选单人物时生效
这个因为我们 如果生效两个人的话
效果不太好
我就把它取消了啊
这边的话
勾选双人物提示词
是没有这个 CREF 的啊
改好了以后
我们把它复制命令再跑一次
看看效果
也不用特别高
50 就够了
稍微高一些
具体的具体的一些效果的话
大家可以去测试一下啊
然后我们把它及时改一改
有些不要了
好我们复制命令
跑一下图
另外一个也是一样
附近的
好跑一下
行了我们跑好了
看一下这个图片的效果
下载一下
我们看到这 4 张图片
风格哎还是比较趋近的
比较趋近了
比刚才那种的风格好多了
好这四张图都差不多啊
风格比较像
稍微把 SW 改大一点就可以了
因为我们现在没有用那个提示
CREF 锁定
所以说稍微
你看这个 4 个图
这个 4 个图就嗯
比较发散性
比较大
嗯有点不太一样
呃
这里面我漏说了一个镜头和光线啊
我补录一段
这边是镜头
然后我们选可以选择各种镜头
选一个后视图
比如说我们
然后这边有这个批量设置
可以批量这个设置这个镜头
这是光线
光线有各种光线
我们就呃选一个夜光吧
好然后我们复制命令
我们跑一下图试试看
粘贴
跑图
啊好了
我们看一下效果啊
啊这就是后视图
因为从背后看嘛
背后的视角对的
这就是补录的部分
下面我们来看一下选择图片
我们点开始选图
然后下载的文件夹打开
把这两个包都解压出来
把之前的 14 和 15 张啊给替换进去
原来的那几张删掉
因为是 SW 值是不一样的
删掉一下
好把这这几张替换进去
然后我们导入 MJ 图片
把这个图片的全部选中
Ctrl+A 然后打开
这边我们有这个批量选图
可以选好几份图片
因为如果你做好几个视频的话就有用
4 格挑图这个是
我们就直接一键对应
简单一点 是好
就这 4 个都对应起来了
我们也不选了
就给他对应一下就好了
节约一下时间
这是男主
这几个动作还行吧
啊拿枪
双枪啊
这是女主
女主有点哼哼
不太行啊
动作比较的一致啊
很一般啊
图片也不选了
就这样了
这是怪人啊
怪人
藤蔓怪人
然后拿枪指着怪物
这怪物倒地
这个地方不太像啊
提示字还要再改一改
然后是逃离
嗯
行就这样了
我们再导出
点击左上角的导出图片压缩包
我们可以导出图片
这是去水印
水印工具的话
如果你有什么瑕疵可以去一下
导出图片 要记住
这边导入的图片一定要是非高清图片
容量比较小才行
如果说容量比较大的话网页会有问题
非高清图片是可以的
高清图片不要导进来啊
这边是第一套图
这一步补充说一个东西
在这个故事背景里
可以提高 AI 提示词的准确率
我们输一下故事背景就可以了
我们先随便输一个啊
未来科技
故事
然后我们编辑里
呃单句 AI 出一下
就会发现
这两句原来的文案变成了一个哎
变成变了
变成了一个科技感了啊
这就是它的作用了
呃然后我们把它换回来
1920 年的美国
庄园恐怖故事
好 再出一下单句 AI
那正常了
就跟以前的是一样了
变成了庄园恐怖的故事
所以说这个背景还是很有用的啊
大家可以按需求填写
接下来我们生成一下音频和字幕
这边勾选这个分隔符
然后导出文案
好了文案出来了
就跟字幕一模一样
我们复制进窦哥的里面啊
随便什么配音软件都可以啊
然后我们加入停顿
随便搞一下
生成一下配音
好了配音就有了
我们在生成字幕
下载配音
然后下载字幕
这样我们的配音和字幕就都有了
现在我们来说一下如何高清图片
这是高清图片的工具
嗯
在这个选择图片里的
图片高清工具
点开以后是一个网址
他这个网站下载就可以了
是免费的
我们下载好了
这是选择图片还是选择文件夹
我们选择选择文件夹
然后把这个图片的文件夹选中啊
这个是模型
我们用这个 fast 的模型
输出文件夹
这边我们随便新建一个文件夹
高清图片
好 选择 然后我们开始高清
因为 MJ 生成的图片都是比较小的啊
高清度不是很高清
我们先要把它跑一下高清模型
稍微清晰一些 啊好了
我们进行一下对比啊
这是高清图
这个是非高清的图
我们对比放大一下
啊这个这是
啊这是高清图
一个是非高清图
就会有区别
比较明显的一个比较糊
放大后比较糊
那我们跑一下
跑一下高清会比较好一些
接下来我们打开一下剪映
开始做这个视频了
原来的删掉
开始创作
导入
把这个高清图啊选中
然后导入进去
这边要记得字幕
要放在图片的上面
图片放在主轨
字幕放在上面一个轨道
这样就好了
要不然图片对齐字幕的功能会失效
好关掉
我们点那个剪映草稿
导入这个 draft_content.json 的文件
这个文件的名字要对应
我们找到这个剪映的草稿文件夹
然后找到 3 月 28
好进去
这个文件名字一定要对应上啊
要一样的
苹果不太一样
但是差不多 打开
然后我们这边有个对齐图片
和一个图片打关键帧
这个是对齐字幕和图片的功能
有一个上下移动和随机打帧的效果
我们就选上下移动
简单一点
之后我们导出 json 文件
就可以正常导出了
如果说
字幕和这个批量编辑中的文案不对应
是会报错的
我们改一下
这边 我们下面改吧
比如说这边的文案加个 111
是不对应的
我这个跟字幕对不上
然后我们导出会报错
这边会写到底是哪一个分镜报错
我们只要把字幕复制一下
粘贴进来就可以了
啊粘贴进来
好 这就一样了
一定要对齐
然后打勾
好了 导出了之后
之后我们把这个 json 文件覆盖掉
原文件就可以了
覆盖掉原文件
就是剪映的草稿
也是 3 月 28 号的
哎复制进来
把原来的这个 json 文件给删掉
然后把这个重命名
一定要重命名
仔细要把它删除
你看有个空格
一模一样
空格也删掉
好一致了
那么我们再打开剪映
就发现字幕和图片完全对齐了
几句话一张图
然后关键帧也打好了啊
就是这么简单
这样一个故事就做好了
我们加入一下声音
刚才做好的声音
然后把它加入进来
这样一部 AI 小说就做好了
音乐什么的我就不加了
然后我来说说看如何替换
这个剪映的素材
因为有些人可能要做几个素材
就先把它关掉
关掉以后呢
我这边在剪映草稿里有一个
替换素材的工具
可以下载啊
下载好以后再点击一下
然后把草稿的文件夹选中
3 月 28
选择文件夹
直接选择就可以了
然后再选择一个图片文件夹
就是你想替换图片的文件夹
这边我是第二套图
选择一下开始替换
点一下
这边图片数量也会给你列出来啊
好开始替换成功
我们再进入剪映看一下
就会发现图片已经完全被替换了
然后关键帧还是在的
下面是第三部分
我关于 AI 的新尝试
主要有三个
一个是图片生成视频
pika、gen2 和 Sora
我们先来讲这个
图片生成视频呢
现在主要的主流工具就是这几个
然后还有一个 SVD 的插件啊
先说一个 run way 吧
run way 就是这里的
那直接点击这个就可以了啊
生成视频
然后选择 gen2
它的一个模型
那我们上传一张图片
比如说上传一张这个图片
我们不加任何提示词吧
直接生成啊
这个是它的比例
然后它的风格
它的 camera
它的相机啊
我们什么都不加吧
提示词也不加
直接让它生成啊
4 秒的视频啊
看效果如何
然后我们这边是点 pika
pika 的话在下面也是有个 image
输入一个刚才的图片
一模一样
好了 我们也是什么都不点啊
这是声音
他还可以有声音啊
这个是啊
也是 camera
我们直接点生成
稍等一下
好已经生成完毕了
我们看看效果
这是 runway 的
哦他动了一下哇
后面有点变形了啊
变成一个莫名其妙的人
好我们看看 pika 的
稳定度还可以呃
但是 Pika 牺牲了一点动作啊
他可能稳定度上面做过一些设置呃
只是微小的动作
比如说镜头拉远拉近啊
就是头发动动啊之类的
这两个呢
其实都呃
要抽卡而且很一般
呃非常一般
你看到这个 Sora 了吗
这个 openai 啊
非常牛但是现在呢
它这个效果很好
但是没有出来
而且他出来以后
我觉得成本应该会非常高
算力用的非常高
因为他的视频可以出的很长
而且非常的真实
嗯看下他的视频
感觉很棒
很真实啊
不是一个档次的啊感觉
希望它能早点出来吧
可能用户用上可能要很长一段时间了
啊我们再来说说第二个呃
练声音模型
这个是一个大佬做的一个开源的模型
开源的工具
在 b 站上有
叫做花儿不哭啊
感谢大佬的分享啊
无私分享
是开源的
呃可以在 github 上下载
然后我就不演示它的做法了
在这里可以看
到时候我会把它这个链接
都放在我的简介里面
大家有需要可以去拿
啊这边我选择
我练好了已经啊
这边选我的声音模型
比较简单
然后一个参考的语气的
这里写参考音频的文本
然后我们
合成一下
这里我已经有了合成的文本
他有中文
虽然是用中文练的模型
但是他中文、英文和日文都可以
我测试下来
发现这个中文和日文比较不错
但英文是有点点不像了啊
我试一下中文
我们合成一下
稍等片刻
好了 我们听听看像不像
在德希托庄园的迷雾中
爱德华坎比迈入这片遗忘之地
心中既有不安也有期待
他推开庄园大门
沉重的吱呀声似乎在诉说着未解之谜
怎么样是不是还是有点像的
跟我的声音还是比较像的
那就可以把这个声音下载下来啊
替换掉我的刚才小说里的一个文本
嗯但是我的语气不好
因为我不是一个配音专业的
我的语气很平淡
试一下
玩一玩啊玩一玩
在德希托庄园的迷雾中
爱德华坎比迈入这片遗忘之地
心中既有不安也有期待啊
配不上因为他是这个
刚才云希读的那个字幕啊
要重新做一下字幕才行
那也简单的
只要把这个字幕删掉
然后在这里有一个智能的文稿匹配
我们点这个开始匹配
然后把文案黏贴进来
然后开始匹配
他就会自动的把你之前的音频对应上
这就对应上字幕了
但是可能图片不一样
图片是对不上了
不过呃
我们不管那么多啊
就尝试一下
大概尝试一下
在德西托庄园的迷雾中
爱德华卡恩比迈入这片遗忘之地
心中既有不安也有期待
他推开庄园大门
好了 然后我们还差什么
还差一个音乐
是吧
然后我们
说到了一个生成音乐的
AI 音乐的一个软件啊
非常厉害
也是最近出来的
我试过了很厉害
就是 suno 这个网站
他现在是每天有 50 个积分
可以 10 首歌
那我们试一下他怎么玩啊
这边可以把你的歌词放进去
我们先找一个恐怖的故事啊
我这边有个恐怖童谣
这小时候的童谣
但是我一直觉得很恐怖
呃这个我把它翻译成
因为是英文的一个故事嘛
我把它翻译成英语了啊
我也做好了
我大概说一下怎么做
就是把它翻成英语以后
我就不翻译了啊
放在这里
中文也是可以的
它中文是识别的
认得啊你看它这个中文的古风歌曲
我做的它都是 OK 的听一下
呃拉拉快一点
是不是还可以啊
都还准确的
还行的啊
然后复制进歌词在这里了
然后他这里有个生成啊
歌词会自动生成
但是呢
你也可以自己生成 他在前面啊
我先等他生成完毕啊
生成完毕我再讲
稍等一下哎
这个是音乐的类型
我们可以换音乐类型
比如说啊爵士啊
他这个可以换音乐类型都有啊
你输自己想输入的音乐类型也可以
你看他这边有 第一小节
第二小节
这是音乐上的东西
然后就是合唱
你就可以打
你可以打吉他 solo 啊什么的
就可以做这个音乐的类型了
非常简单的啊
弄完以后
这边直接选择个 V3 最新的模型
然后我们直接创建就可以了啊
我们随便随便创一个吧
rap 无所谓
试一个啊
之前我做好的
我们听下效果啊
非常不错
啊英文版的泥娃娃
是不是很灵异啊
这歌我晚上再听都有点危险的感觉
这很灵异
就可以把这首歌下载下来
然后作为一个插曲啊
配到我们这个
AI 小说里
视频里这样就
他推开庄园大门
先把我的视频或声音给关掉
是不是这个很有感觉啊
这灵异的氛围就起来了啊
所以这个歌曲也可以原创啊
看一下好了没有啊
这比较慢啊
也不算慢
大概一分钟不到就可以好了
我们等他好了以后
我们听一下这个效果
他是个 rap
这个一次性是生成两个的
一次性生成两个
他这个现在是有订阅的
但是每天可以生成
免费生成 10 个歌
是一首歌是 5 个积分
我们听一下好了一个
可以可以啊
还是不错的
好今天的分享就到这里了
最后还有一个小短片
大家欣赏一下吧
娱乐一下
好就这样
大家下次再见 拜拜
