# Luma 做小说 AI 视频:梦幻效果还是白日梦?
# 视频
视频链接:https://www.bilibili.com/video/BV1eE421N7VF (opens new window)
# 视频文字版
大家好我是老陆
最近文生视频挺火的
竞争也比较激烈
runway、pika
快手的可灵
还有 luma
最近我也在使用 runway 做视频
在这里我分享一下我的制作流程
再测试下呢
最近很火的这个 luma AI
试试看它的效果到底是怎么样的
先看一下
我用 midjourney+runway 做的一个视频
感谢 B 站的推流啊
这个视频流量还是不错的
78 万
那我们来看一下大概是怎么样的效果
好 大概是这样子的
我先来分享一下 runway 的使用感受
第一点就是动漫人物的形变
动漫人物是特别容易形变的啊
因为我主要用的是
runway 的图生视频功能
我要保持人物的一致性
所以不能用文生视频的功能
我用的是图生视频
那这里动漫人物呢
会产生形变
特别是在快速运动时
人物就容易变形
效果很不自然
我们来看一下
找一个
这个
你看这个脸啊
脸就会变成另外一张脸了
所以说要大量的抽卡
才能保持不变
第二个就是运动幅度问题
它的幅度其实是比较小的
画面显得比较像静态那种图片
稍微有点动态特效
人物动作幅度
人物动作幅度
也比较小
缺乏真实感
然后我们看一下啊
这张
你看他人物就没怎么变
他背景有些特效
所以这种情况是非常多的
因为前两个因素
所以这个 Runway 需要大量的抽卡
才能完成
视频耗时也很长
效率也比较低
虽然我用的是无限制账号
他线程数量是 5 个(繁忙时只有 2 个)
做下来平均差不多 2 到 5 分钟一个
也需要很长的时间才能做完
那我针对这个情况开发了
自己的小插件
用 automa 开发的
我打开这个
automa 这个插件啊
然后点击一下
这里面我已经输入好了
输入好的是数据
这个数据的话就是图片的一些数据啊
图片的数据
然后这里直接运行就行
他就会自动的上传这个图片
然后进行跑图
但是有个问题啊
他这里因为 runway 的前端
变得非常的频繁
导致我的插件比较不稳定
而且有漏图的情况
所以我就给自己的这个网站的会员
因为他本来就是会员需求
我就给会员用一下
其他我就
我就不公开了
如果用插件的话最好是
有两个人认识的拼
或者是自己买单独的一个号
因为避免被别人抢线程
好我们直接进入主题
我们今天用这个 luma
来做我们的动态视频
看看它效果如何
这个 luma 是比较贵的
你看它这个价格啊
500 美金 2000 个视频
差不多一个视频生成的话还要 1.8
非常贵 那他叫撸吗
是问我们撸不撸是吧
我买不起
只能撸了
那我今天撸一个试试看(每月免费 30 次生成)
我们先进入我的这个工具网站(xiaoshuomj)
用一个文案
就用我当时做的文案好了
我们先按行分隔
这个软件具体的操作我就不演示了
大家请看之前的视频
好我们直接点入开始批量编辑
10 张图然后我们直接出词
这个年轻的女性
不是啊 因为是个男的
稍微改一下
其他的还可以啊
还可以差不多啊
这个不行 垂钓
啊可以了好
我们先看一下这个批量中翻英
把它翻译成英文
好了
我们在固定参数这里加一些参数
这里我加好了
这个参数
就是这张图片的垫图的风格图
然后--SW 50 --ar 4:3
然后 niji6
图片就是 不是这张
是这张
随便找了一张
好 我们直接导出表格就可以了
导出命令
然后我们去 midjourney 里跑下图
然后点开始跑图 这个地方
选一下
我们刚才导出的
然后给他一个参数选
选 10 啊刚好 10 张图嘛
选 10 开始跑图
然后我们快一点
好 稍等一下
好了 我们已经生图完成
我们去选一下图 到这个里面
工具里面
然后选择
选择图片
开始选图
我们导入 MJ 图片
把所有图片都导进去(ctrl+a)
打开 4 格挑图吧
好 我们选一下 第一张图
不悲反喜
随便选
自家水库
巨蟒
这个吧
吞噬系统 这个吧
哎都是蛇
深海巨蟒
哈 地狱蟒
地狱蟒这个吧
星空
这个吧
呃这个也是蛇
没什么区别啊
这个是小蛇
小蛇
然后我是在家垂钓
我们随便选一个
好
然后我们选择导出图片压缩包
好 导完了
那就是这 10 张图
解压一下
好 我们到 luma 里生成一下
luma 生成呢
分为两种
一种是文字生成
一种是传图生成
我们是用传图生成
第一套图
好 传上去
他这个不能直接点运行
他这个一定要提示词
那提示词其实很简单
我们就把这个提示词传
给他就好了啊
这提示词直接传给他就行了
那我们为了方便
我们先把这个固定参数给删了
删掉
因为我们不要固定参数
把这个命令勾掉
然后把这个序号也勾掉就可以了
复制 直接复制到 luma 中
然后每一张图我们都这样搞一下
这个速度确实有点慢
这个 luma 的速度真的慢
现在我们已经全部生成完毕了
我们看一下它的效果如何
我只跑了一遍啊
保证原汁原味
我们就不改它了
一遍过 来看看它效果到底如何
哎呦这个
这个人脸变了
直接变化了
看看这张
这个就是镜头移动啊
没什么太大效果
效果不明显
这是蛇
这个
呃变化了
但是后面的感觉还好吧
至少动作幅度是比较大的
比 runway 大一些啊
这就是定住了
没有什么变化
啊这是 奥哟
这什么 哈哈
有点意思
啊其他的都 哎
哇
出来了一个新剧情
出来了新剧情
哇消失了这个
哎呦
哎呦这个有点机械化
这个不是很好看啊
哦这个
退下了 直接退下了是吗
哈哈
呃这个就是镜头位移啊
现在我已经把全部视频下载完毕了
我们看看如何制作动态视频
我们先点开剪映
好 新建一个
再导入 把前面 10 个视频导入进来
然后我这边已经做好了字幕
和音频也导入进来
我们听听看如何
没问题 但是大家会发现一个问题
什么问题呢
是没对齐
本来这第一个视频
应该对齐第一个字幕的
但是他是
5 秒嘛
他强制 5 秒了
所以说没对齐
拉的话是可以
但是拉的话就会把后面的动画给截掉
但扩展的话也不行
扩展的话呢
会卡住的
是不能推的
只能通过变速来调节
这边变速可以调节
真正的把它压缩到很短
或者拉到很长
但是这样会非常累
因为你一个个对齐
你少了还好
如果说你 200 个视频
100 个视频的话
就非常累了啊
我做了个更方便的工具
把它这个关掉
然后我们在小说 MJ 工具里
有一个剪映草稿
点进去有一个对齐字幕与视频(变速)
点击这个
然后导入剪映的这个
6 月 17 草稿文件
是这个文件啊
别搞错了
打开
然后再导出啊
导出好了
在这个地方 我们复制一下文件
把它复制进刚才剪映的那个草稿文件
视频里
粘贴
原来的这个文件啊
就不要了 删掉
好 把这个文件改名
后面的括号 41
不要了 还有空格
删掉 回车
然后我们再进入
哎 发现已经对齐好了
没问题 刚好 10 张图
我们来看一下啊
看一下这个效果
先把这个字幕改一下 有点白
稍微大一下
行间距调一下 哦字间距
好我们来看一下啊
看看这个 luma 的效果是如何
放大
好 已经结束了
大家会看到什么问题啊
这个问题我也总结了
因为我之前也玩过一下 luma
总结好了我们来看一下
这个问题就是
一个是人物形变
这个动物也会形变啊
会存在形变问题
这个问题还是没解决
还是会形变的
第二点呢
就是运动幅度
这个 Luma 的运动幅度确实得到了改善
比 Runway 大很多
但是呢动作幅度大会导致形变啊
也很多 非常多
幅度是大了
但是它的副作用也很明显
还有就是镜头的问题了
它会经常的平移镜头功能
镜头无法始终跟随画面主体
导致画面主体突然消失
或偏离中心的情况
主体啊会消失
比如说这里看
比如这里
主体会慢慢消失
人就没了
拉到镜头外面去了
他虽然移动很快
但是拉过去了
拉走了 这里也是
他把他主体拉走了
拉下面去了
这里也是
主体就消失了
你看变成了一个不知所云的东西
这里也是
拉掉了消失了
所以说 luma 就有这些问题
还有最重要的一个问题啊
就是它非常
贵 非常非常贵
目前的话
它的刷新一下
哦
它降价了呵
上个礼拜看它这个是 499 的
现在看它降价了一些
399 了
但是还是很贵啊
我们算一下它是多少
他这个没有无限量的
应该是不是无限量的 看一下
对没有无限量了
会导致他 就算用这个年计划便宜 20%也很贵
399 美金
除以 2000 加 30
这个吗
他一张要一块 4 啊
也很贵 之前他是一块 8
非常非常贵了
现在降了一点
但是我感觉也很贵
而且他没有无限制
这个有点困难
一张图片
我看起码要抽个三五次才行啊
这样的一张图片的成本实在太高了
一个视频的成本太高了
好呃
今天的分享就到此结束啊
说了一下 runway 和 luma 的一些区别吧
希望他们的后期
也能进行一个大幅度的改进
那视频就到这里啊
谢谢观看
24.6.11 目前图片生成可以不加入提示词