Dream Machine 背后使用的是 Luma 的 Ray 系列视频模型。
最早版本在 2024 年 6 月开放。当时一个比较明显的区别是,普通用户可以直接注册生成,而不是只能看官方演示。
到后续 Ray、Ray2、Ray3 系列,视频质量、分辨率和控制能力又陆续扩展。
使用方式主要有三种。
第一种是文生视频,直接描述场景、人物动作和镜头运动。
第二种是图生视频。上传一张图片让它动起来,也可以同时给起始帧和结束帧,让 AI 补中间的变化。
第三种是 Modify Video,拿已有视频继续改,比如调整画面风格、替换或移除物体。
它比较突出的地方还是镜头运动。
Prompt 里可以写推镜、拉远、环绕、横移、航拍等镜头语言,生成结果会尝试按照这些方向运动,而不是固定机位让画面里的东西自己动。
还可以用人物照片做 Reference,减少同一个角色在不同镜头里反复变脸的问题。
不过单次生成依然以短镜头为主。
5–10 秒比较常见,后续虽然可以延长,但时间越长,人物和画面的一致性越难保持。
所以 Dream Machine 更适合生成镜头素材,再放进剪辑流程,而不是直接做完整长片。
评论(0)