Luma 发布 DIT 视频生成模型 Dream Machine 具有物理交互理解

Luma Dream Machine 基于 DIT 视频生成架构，能够快速从文本和图像生成高质量、逼真的视频。这款高效的变压器模型直接通过视频进行训练，能够生成物理准确、一致且充满事件的镜头。

1. 高质量视频生成

从文本和图像生成视频

• 速度与效率：Dream Machine能够在120秒内生成120帧视频，使创作者能够快速迭代和探索更多创意。这意味着Luma Dream Machine能够在120秒的时间内生成一个包含120帧（frames）的高质量视频。换句话说，生成一个120帧的视频只需要两分钟的时间。这个速度和效率使得创作者能够快速迭代和实验不同的创意，而不需要花费大量时间等待视频的生成。
• 高质量镜头：能根据文本、图像生成5秒钟的镜头，具备逼真的平滑运动、电影摄影和戏剧性效果。能够将静态图片转化为生动的故事片段。

2. 一致性与物理准确性

角色与场景的一致性

• 物理交互理解：Dream Machine了解人、动物和物体如何与物理世界互动，确保生成的视频角色和场景具有一致性和物理准确性。
• 持续性和事件感：该模型能够创建具有连续性和事件感的视频片段，使得视频内容更加连贯和引人入胜。

3. 动态摄像机移动

流畅且自然的摄像机运动

• 电影化效果：Dream Machine帮助用户实验各种流畅、电影化和自然的摄像机运动，确保摄像机运动能够匹配场景的情感和内容。
• 无限的摄像机移动选择：用户可以利用Dream Machine实验各种摄像机移动效果，从而创建出更加引人注目的视频作品。

示例应用

• 创意广告：快速生成高质量广告片段，展示产品的多角度视图和动态效果。
• 影视制作：为电影和电视剧生成逼真的预览片段，帮助创意团队快速验证和修改创意。
• 游戏开发：为游戏开发生成逼真的角色和场景动画，提高游戏的视觉效果和沉浸感。