# Luma 做小说 AI 视频:梦幻效果还是白日梦?

# 视频

视频链接:https://www.bilibili.com/video/BV1eE421N7VF (opens new window)

# 视频文字版

大家好我是老陆

最近文生视频挺火的

竞争也比较激烈

runway、pika

快手的可灵

还有 luma

最近我也在使用 runway 做视频

在这里我分享一下我的制作流程

再测试下呢

最近很火的这个 luma AI

试试看它的效果到底是怎么样的

先看一下

我用 midjourney+runway 做的一个视频

感谢 B 站的推流啊

这个视频流量还是不错的

78 万

那我们来看一下大概是怎么样的效果

好 大概是这样子的

我先来分享一下 runway 的使用感受

第一点就是动漫人物的形变

动漫人物是特别容易形变的啊

因为我主要用的是

runway 的图生视频功能

我要保持人物的一致性

所以不能用文生视频的功能

我用的是图生视频

那这里动漫人物呢

会产生形变

特别是在快速运动时

人物就容易变形

效果很不自然

我们来看一下

找一个

这个

你看这个脸啊

脸就会变成另外一张脸了

所以说要大量的抽卡

才能保持不变

第二个就是运动幅度问题

它的幅度其实是比较小的

画面显得比较像静态那种图片

稍微有点动态特效

人物动作幅度

人物动作幅度

也比较小

缺乏真实感

然后我们看一下啊

这张

你看他人物就没怎么变

他背景有些特效

所以这种情况是非常多的

因为前两个因素

所以这个 Runway 需要大量的抽卡

才能完成

视频耗时也很长

效率也比较低

虽然我用的是无限制账号

他线程数量是 5 个(繁忙时只有 2 个)

做下来平均差不多 2 到 5 分钟一个

也需要很长的时间才能做完

那我针对这个情况开发了

自己的小插件

用 automa 开发的

我打开这个

automa 这个插件啊

然后点击一下

这里面我已经输入好了

输入好的是数据

这个数据的话就是图片的一些数据啊

图片的数据

然后这里直接运行就行

他就会自动的上传这个图片

然后进行跑图

但是有个问题啊

他这里因为 runway 的前端

变得非常的频繁

导致我的插件比较不稳定

而且有漏图的情况

所以我就给自己的这个网站的会员

因为他本来就是会员需求

我就给会员用一下

其他我就

我就不公开了

如果用插件的话最好是

有两个人认识的拼

或者是自己买单独的一个号

因为避免被别人抢线程

好我们直接进入主题

我们今天用这个 luma

来做我们的动态视频

看看它效果如何

这个 luma 是比较贵的

你看它这个价格啊

500 美金 2000 个视频

差不多一个视频生成的话还要 1.8

非常贵 那他叫撸吗

是问我们撸不撸是吧

我买不起

只能撸了

那我今天撸一个试试看(每月免费 30 次生成)

我们先进入我的这个工具网站(xiaoshuomj)

用一个文案

就用我当时做的文案好了

我们先按行分隔

这个软件具体的操作我就不演示了

大家请看之前的视频

好我们直接点入开始批量编辑

10 张图然后我们直接出词

这个年轻的女性

不是啊 因为是个男的

稍微改一下

其他的还可以啊

还可以差不多啊

这个不行 垂钓

啊可以了好

我们先看一下这个批量中翻英

把它翻译成英文

好了

我们在固定参数这里加一些参数

这里我加好了

这个参数

就是这张图片的垫图的风格图

然后--SW 50 --ar 4:3

然后 niji6

图片就是 不是这张

是这张

随便找了一张

好 我们直接导出表格就可以了

导出命令

然后我们去 midjourney 里跑下图

然后点开始跑图 这个地方

选一下

我们刚才导出的

然后给他一个参数选

选 10 啊刚好 10 张图嘛

选 10 开始跑图

然后我们快一点

好 稍等一下

好了 我们已经生图完成

我们去选一下图 到这个里面

工具里面

然后选择

选择图片

开始选图

我们导入 MJ 图片

把所有图片都导进去(ctrl+a)

打开 4 格挑图吧

好 我们选一下 第一张图

不悲反喜

随便选

自家水库

巨蟒

这个吧

吞噬系统 这个吧

哎都是蛇

深海巨蟒

哈 地狱蟒

地狱蟒这个吧

星空

这个吧

呃这个也是蛇

没什么区别啊

这个是小蛇

小蛇

然后我是在家垂钓

我们随便选一个

然后我们选择导出图片压缩包

好 导完了

那就是这 10 张图

解压一下

好 我们到 luma 里生成一下

luma 生成呢

分为两种

一种是文字生成

一种是传图生成

我们是用传图生成

第一套图

好 传上去

他这个不能直接点运行

他这个一定要提示词

那提示词其实很简单

我们就把这个提示词传

给他就好了啊

这提示词直接传给他就行了

那我们为了方便

我们先把这个固定参数给删了

删掉

因为我们不要固定参数

把这个命令勾掉

然后把这个序号也勾掉就可以了

复制 直接复制到 luma 中

然后每一张图我们都这样搞一下

这个速度确实有点慢

这个 luma 的速度真的慢

现在我们已经全部生成完毕了

我们看一下它的效果如何

我只跑了一遍啊

保证原汁原味

我们就不改它了

一遍过 来看看它效果到底如何

哎呦这个

这个人脸变了

直接变化了

看看这张

这个就是镜头移动啊

没什么太大效果

效果不明显

这是蛇

这个

呃变化了

但是后面的感觉还好吧

至少动作幅度是比较大的

比 runway 大一些啊

这就是定住了

没有什么变化

啊这是 奥哟

这什么 哈哈

有点意思

啊其他的都 哎

出来了一个新剧情

出来了新剧情

哇消失了这个

哎呦

哎呦这个有点机械化

这个不是很好看啊

哦这个

退下了 直接退下了是吗

哈哈

呃这个就是镜头位移啊

现在我已经把全部视频下载完毕了

我们看看如何制作动态视频

我们先点开剪映

好 新建一个

再导入 把前面 10 个视频导入进来

然后我这边已经做好了字幕

和音频也导入进来

我们听听看如何

没问题 但是大家会发现一个问题

什么问题呢

是没对齐

本来这第一个视频

应该对齐第一个字幕的

但是他是

5 秒嘛

他强制 5 秒了

所以说没对齐

拉的话是可以

但是拉的话就会把后面的动画给截掉

但扩展的话也不行

扩展的话呢

会卡住的

是不能推的

只能通过变速来调节

这边变速可以调节

真正的把它压缩到很短

或者拉到很长

但是这样会非常累

因为你一个个对齐

你少了还好

如果说你 200 个视频

100 个视频的话

就非常累了啊

我做了个更方便的工具

把它这个关掉

然后我们在小说 MJ 工具里

有一个剪映草稿

点进去有一个对齐字幕与视频(变速)

点击这个

然后导入剪映的这个

6 月 17 草稿文件

是这个文件啊

别搞错了

打开

然后再导出啊

导出好了

在这个地方 我们复制一下文件

把它复制进刚才剪映的那个草稿文件

视频里

粘贴

原来的这个文件啊

就不要了 删掉

好 把这个文件改名

后面的括号 41

不要了 还有空格

删掉 回车

然后我们再进入

哎 发现已经对齐好了

没问题 刚好 10 张图

我们来看一下啊

看一下这个效果

先把这个字幕改一下 有点白

稍微大一下

行间距调一下 哦字间距

好我们来看一下啊

看看这个 luma 的效果是如何

放大

好 已经结束了

大家会看到什么问题啊

这个问题我也总结了

因为我之前也玩过一下 luma

总结好了我们来看一下

这个问题就是

一个是人物形变

这个动物也会形变啊

会存在形变问题

这个问题还是没解决

还是会形变的

第二点呢

就是运动幅度

这个 Luma 的运动幅度确实得到了改善

比 Runway 大很多

但是呢动作幅度大会导致形变啊

也很多 非常多

幅度是大了

但是它的副作用也很明显

还有就是镜头的问题了

它会经常的平移镜头功能

镜头无法始终跟随画面主体

导致画面主体突然消失

或偏离中心的情况

主体啊会消失

比如说这里看

比如这里

主体会慢慢消失

人就没了

拉到镜头外面去了

他虽然移动很快

但是拉过去了

拉走了 这里也是

他把他主体拉走了

拉下面去了

这里也是

主体就消失了

你看变成了一个不知所云的东西

这里也是

拉掉了消失了

所以说 luma 就有这些问题

还有最重要的一个问题啊

就是它非常

贵 非常非常贵

目前的话

它的刷新一下

它降价了呵

上个礼拜看它这个是 499 的

现在看它降价了一些

399 了

但是还是很贵啊

我们算一下它是多少

他这个没有无限量的

应该是不是无限量的 看一下

对没有无限量了

会导致他 就算用这个年计划便宜 20%也很贵

399 美金

除以 2000 加 30

这个吗

他一张要一块 4 啊

也很贵 之前他是一块 8

非常非常贵了

现在降了一点

但是我感觉也很贵

而且他没有无限制

这个有点困难

一张图片

我看起码要抽个三五次才行啊

这样的一张图片的成本实在太高了

一个视频的成本太高了

好呃

今天的分享就到此结束啊

说了一下 runway 和 luma 的一些区别吧

希望他们的后期

也能进行一个大幅度的改进

那视频就到这里啊

谢谢观看

24.6.11 目前图片生成可以不加入提示词

Luma 做小说 AI 视频:梦幻效果还是白日梦?