Luma Dream Machine

4.3

Luma AI 的视频生成平台,自家 Ray 系列模型擅长电影感画面,可用关键帧控制镜头走向。

官网在新窗口打开。价格和功能以官网为准。

Luma Dream Machine官网首页截图
lumalabs.ai 首页截图

Luma Dream Machine是什么

Dream Machine 是 Luma AI 做的视频生成产品,海外创作者用得很多。现在官网把入口收进了名为 Luma 的创作平台,带智能体功能,视频模型是自家的 Ray 系列,页面上写到的有 Ray3.2 和 Ray3.14。

对做短剧的人来说,值得细看的是关键帧:按官网说明,Ray3.2 在图生视频和 Modify Video 里最多能放 16 个关键帧,原生片段是 5 秒或 10 秒。文生视频、图生视频出来的画面不带声音,对白、配乐、音效要另外做。Modify Video 则是拿已有视频改风格、改场景,同时保留原来的动作和表演,最长可处理 20 秒(24fps 时)。

除了自家模型,同一个账号里还能调用 Veo 3.1、Kling 3.0、Seedance 2.0 等第三方模型,不同模型的积分消耗和分辨率上限各不相同,以官网为准。

主要功能

  • 关键帧控制图生视频和 Modify Video 最多放 16 个关键帧,用来规定镜头从哪里起、往哪里走。
  • Modify Video对已有视频改风格、换场景,保留原动作和表演,输出为原生 1080p。
  • 多模型接入同账号可调用 Ray3.2、Ray3.14,以及 Veo 3.1、Kling 3.0 等第三方模型。
  • 主参考素材把角色、产品、Logo 设成固定参考,减少跨镜头走样。
  • 配音与口型工具平台内有配音、音效、配乐、字幕和口型同步工具,视频模型本身不出声。

在 AI 短剧里怎么用

先在图片工具里定好角色定妆照和场景图,把图当首帧放进来做图生视频;需要镜头衔接的段落,用关键帧规定起止画面。文生、图生的片段没有声音,对白可以交给 ElevenLabs 这类配音工具,再接口型工具对嘴,最后拿到剪映或 Premiere 里拼成一集。

用户怎么说

一位业余电影人说,他以前用动捕和时间线做 3D 动画,操作极难。图生视频出来后,Dream Machine 既好上手、画面又好看,先摆起始帧就像导演和摄影先定机位再喊开拍,只是放弃了时间轴上的精细控制。

— 来自 Hacker News 用户反馈

2024 年 10 月有网友评论,Luma 的 Dream Machine 相当不错,和 Kling、Minimax 一样能直接用,不过跟当时展示的 Sora 演示还不是一个级别,演示片段多半也是挑出来的。

— 来自 Hacker News 用户反馈

整理自公开平台上的用户反馈,已翻译改写,不代表 TVLab 观点。

适合谁,不适合谁

适合:追求电影感画面、愿意靠关键帧精细控制镜头的短剧创作者和小团队
要注意:积分消耗大,1080p 的 5 秒文生视频标价约 400 积分;文生、图生不带声音;国内需海外网络。

常见问题

Luma Dream Machine 免费吗?

官网定价页列的是 Plus、Pro、Ultra 三档付费订阅,Plus 每月 30 美元,含 10,000 积分,并写明包含商用权利。定价页没有提免费额度,首页有免费试用入口,具体以官网为准。

Ray3.2 生成的视频有声音吗?

文生视频和图生视频出的片段没有原生音频,配音、配乐、音效要另外加。Modify Video 处理已有视频时会保留原声,开启面部追踪时口型和对白节奏也会保留。

单段视频最长多久?

文生、图生的原生片段是 5 秒或 10 秒。Modify Video 在 24fps 下最长 20 秒,30fps 下 15 秒,60fps 下 7 秒。做长镜头要靠多段拼接。

同类工具

用过 Luma Dream Machine?

到 TVLab 社区说说你的用法、踩过的坑,或者问问别人怎么调参数。