本来应该是 SD3上头条的,看到了 SD3 开源的信息,调试好 ComfyUI环境,美滋滋地在群内发了几张图片,正等着小伙伴们来一波点赞了,没想到整个 AI 圈瞬间被 Luma 的 Dream Machine 刷屏了。

好家伙,可灵 AI 的风头还没过去,Luma 又来卷 AI 视频了。
Luma AI:视频生成界的新星,还是未来的王者?插图

看了 Luma 的官方宣传片,不由自主地闪过了一个念头:”还在等待 SORA?Luma AI** 视频技术已经让创意触手可及了”。

Luma 发布 DIT 视频生成模型 Dream Machine,生成的视频的表现相当惊艳,无论是画质、美学表现、运动幅度、概念组合等等,绝对是电影级表现。

1.Luma AI 介绍

Luma AI,这是一家成立于 2021 年 9 月的美国加州公司,专注于 3D 内容生成技术。该公司的核心技术是 NeRF(Neural Radiance Fields),这是一种三维重建技术,可以通过少量照片生成、着色和渲染逼真的 3D 模型。

Luma 推出的 Dream Machine 基于 DiT 视频生成架构,能够在 120 秒内生成一个包含 120 帧的高质量视频,实现快速创意迭代。它能理解物理交互,确保生成的视频角色和场景具有一致性和物理准确性。

Luma AI:视频生成界的新星,还是未来的王者?插图(1)

2.Luma AI 案例欣赏

下面的几组是使用 Luma AI 图生视频生成的,生成的视频画质、人像精度、镜头效果都是比较不错的。

3.Dream Machine 优势说明

Luma AI 支持文生视频、图生视频两种模式,生成 5 秒高质量视频:

特点 1:非常快,120 秒生成 120 帧

得益于帧率的巨大提升,视频更加丝滑顺畅

特点 2:动作非常逼真、连贯

可以实现电影级的运镜效果,画面随着镜头运动,仍然保持画面的流畅和自然。

特点 3:角色一致性极强,能够模拟物理世界

Dream Machine 的新架构,让它能理解人、动物、物体在物理世界的交互。对于镜头人物,不同角度的变换,也能更好的保持形象不变。

特点 4:运镜非常自然,完美匹配场景情感

能够生成流畅动态镜头,视觉体验大幅改善,AI 视频故事性表现力更强,打造影视级体验。

4.Luma AI 使用说明

官方体验地址:https://lumalabs.ai/dream-machine/creations

每个人每个月都可以获得 30 次免费生成额度(需要谷歌账号)。

付费用户:30 美元/120 次。

第一步:使用谷歌账号登录

使用谷歌账号一键登录,登陆后,会进入 My Videos 的创作页面:

Luma AI:视频生成界的新星,还是未来的王者?插图(2)

第二步:文、图生视频

进入 My Videos 的创作页面,可以选择文生视频,或图生视频。

文生视频:在输入框直接输入英文提示词。

图生视频:点击图片图标,在弹出的窗口中选择我们要生成视频的图片。

默认选中 Enhance prompt,意思是 AI 会自动完善你的提示词。

Luma AI:视频生成界的新星,还是未来的王者?插图(3)

第三步:等待生成视频(120 秒)

由于访问的用户量多,排队生成的时间较长,需要 3-10 分钟左右。

生成视频后,右键点击另存视频即可保存到本地电脑中。

Luma AI:视频生成界的新星,还是未来的王者?插图(4)

5.总结

Luma AI 使用图生视频的画质和连贯性都比较好,镜头效果都比较好,使用图生图没有出现明显的图片模糊,人物脸崩的情况。

但是在文生视频,提示词的理解方面和生成,感觉效果要差一些,文生视频出来的画面表现力不是很好,没有官方宣传的 AI 视频效果好,比如说电影感和镜头感。

总体来说,AI 视频离商业落地,又往前踏出了一大步。AI 视频技术的快速发展,让每个人都能成为“导演”。

写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
Luma AI:视频生成界的新星,还是未来的王者?插图(5)

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

Luma AI:视频生成界的新星,还是未来的王者?插图(6)

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

Luma AI:视频生成界的新星,还是未来的王者?插图(7)

Luma AI:视频生成界的新星,还是未来的王者?插图(8)

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
Luma AI:视频生成界的新星,还是未来的王者?插图(9)

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
Luma AI:视频生成界的新星,还是未来的王者?插图(10)
Luma AI:视频生成界的新星,还是未来的王者?插图(11)

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

Luma AI:视频生成界的新星,还是未来的王者?插图(12)

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
Luma AI:视频生成界的新星,还是未来的王者?插图(13)
Luma AI:视频生成界的新星,还是未来的王者?插图(5)

本站无任何商业行为
个人在线分享 » Luma AI:视频生成界的新星,还是未来的王者?
E-->