英伟达投的Sora竞品,服务器又双叒被挤爆了!

来自Luma AI的“下一代”文生视频模型Dream Machine,新功能一上线,网友们再次玩疯。

英伟达布局AI视频,Sora风头快被抢完了

经典表情包到瑞克摇的丝滑转场,这不第一时间就被安排上了(doge)。

具体来说,Dream Machine这次上新的是“关键帧控制”:

上传首尾两张图像,搭配简单文字说明,一些“奇奇怪怪”的新东西就嘭的诞生了。

新功能目前免费可玩,于是上线不到24h,网友们那叫一个脑洞大开。

玩到上头处,有网友已经忍不住想掏钱了:

伙计,我想你们这次已经拿到我的钱包了。

英伟达布局AI视频,Sora风头快被抢完了

更多效果和脑洞,接下来一睹为快。

网友:我有一个大胆的想法

先来看一组官方输出。

新功能主打一个“自然衔接”,尤其擅长处理延时摄影,无论是自然风光还是人文景色,都能生成电影级画面。

Prompt:A timelapse of a colorful sunset(日落时分的延时摄影)

<video controls="controls" preload="none" width="818" height="452"></video>

  1. 落日时刻

{"type":"video","tracklist":true,"tracknumbers":true,"images":true,"artists":true,"tracks":[{"src":"https:\/\/www.qbitai.com\/wp-content\/uploads\/2024\/06\/\u843d\u65e5\u65f6\u523b.mp4","type":"video\/mp4","title":"\u843d\u65e5\u65f6\u523b","caption":"","description":"","meta":{"length\_formatted":"0:05"},"dimensions":{"original":{"width":1302,"height":720},"resized":{"width":818,"height":452}},"image":{"src":"https:\/\/www.qbitai.com\/wp-includes\/images\/media\/video.png","width":48,"height":64},"thumb":{"src":"https:\/\/www.qbitai.com\/wp-includes\/images\/media\/video.png","width":48,"height":64}}]}

Prompt:A timelapse of the Eiffel tower from day to night(埃菲尔铁塔从白天到夜晚的延时摄影)

<video class="wp-video-shortcode" id="video-160834-1" width="720" height="1302" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/%E5%9F%83%E8%8F%B2%E5%B0%94%E9%93%81%E5%A1%94%E6%98%BC%E5%A4%9C.mp4?_=1">http://www.qbitai.com/wp-cont...埃菲尔铁塔昼夜.mp4</video>

人物角色的刻画,也自然流畅。

Prompt:figure with glowing eyes and wings slowly turns in misty forest as camera pans around(当镜头四处移动时,眼睛和翅膀发光的人物在迷雾森林中慢慢转动)

<video class="wp-video-shortcode" id="video-160834-2" width="840" height="355" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/7-Luma-AI-on-X_-_8.-%E2%80%9CA-swirling-tornado-of-teal-smoke-morphs-into-a-ballerina-spinning-in-golden-light-camera-pans-smoothly-from-wide-shot-to-medium-frame.%E2%80%9D-https___t.co_cPzt0DELLa_-_-X.mp4?_=2">http://www.qbitai.com/wp-cont...“A-swirling-tornado-of-teal-smoke-morphs-into-a-ballerina-spinning-in-golden-light-camera-pans-smoothly-from-wide-shot-to-medium-frame.”-https___t.co_cPzt0DELLa_-_-X.mp4</video>

在细节上也做得很好,比如控制烟雾效果:

A swirling tornado of teal smoke morphs into a ballerina spinning in golden light, camera pans smoothly from wide shot to medium frame(青色烟雾的漩涡龙卷风变成了在金色光芒中旋转的芭蕾舞演员,相机从广角镜头平稳地平移到中画幅)

<video class="wp-video-shortcode" id="video-160834-3" width="840" height="355" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/%E9%9D%92%E7%83%9F.mp4?_=3">http://www.qbitai.com/wp-cont...青烟.mp4</video>

不知道你有没有心动,网友们整活儿的心反正是挡不住了。

枪战片,get:

英伟达布局AI视频,Sora风头快被抢完了

△𝕏@Craftian\_BK

二刺猿也第一时间到达现场:忍者,变身!

英伟达布局AI视频,Sora风头快被抢完了

△𝕏@sangunshixx

苹果宣传片,也有人整出来了(doge):

英伟达布局AI视频,Sora风头快被抢完了

△𝕏@Pierrick Chevallier

上手实测

看完这些惊艳众人的例子,那我们还不得赶紧上手试试~

直接访问Luma AI官网,在页面中央输入框的顶部上传首尾帧图像。

英伟达布局AI视频,Sora风头快被抢完了

由于昨天刚好是马斯克53岁生日,我们借老马自己放出的30年前旧照浅试了一下。

The transformation of a person over 30 years.(体现一个人30年的变化)

英伟达布局AI视频,Sora风头快被抢完了

不过也有一些“翻车”的例子。

Prompt:The young man goes upstairs, and the old man starts to enjoy eating watermelon cheerfully.(年轻男子上楼了,大爷开始愉快吃瓜)

结果看起来有点令人啼笑皆非,果然prompt是个技术活儿。(doge)

注意,由于涌入的网友过多,官方限制了每日生成次数。(每人每天5次)

英伟达布局AI视频,Sora风头快被抢完了

关于Luma AI,据TechCrunch消息,截至今年1月份,该公司已融资超7000万美元。两轮融资中都有英伟达参投的身影。

One More Thing

有点巧的是,这边Luma刚上新,Runway版Sora(Gen-3)也对CPP(Creative Partners Program)创作者们开放了测试。

一大波实测视频正在刷屏中,效果be like:

英伟达布局AI视频,Sora风头快被抢完了

英伟达布局AI视频,Sora风头快被抢完了

(以上来自𝕏@arohaAIX)

据透露,目前开放的文生视频功能,单次最长可生成10s的视频。

看这样子,视频生成是真卷起来了,你觉得谁更有希望杀死比赛?

参考链接: [1]https://x.com/LumaLabsAI/stat... [2]https://x.com/dr\_cintas/status/1806686604649459814 [3]https://x.com/arohaAIX/status...


量子位
10 声望1 粉丝

一家专注于人工智能与前沿科技领域的产业服务平台。