英伟达投的Sora竞品,服务器又双叒被挤爆了!
来自Luma AI的“下一代”文生视频模型Dream Machine,新功能一上线,网友们再次玩疯。
经典表情包到瑞克摇的丝滑转场,这不第一时间就被安排上了(doge)。
具体来说,Dream Machine这次上新的是“关键帧控制”:
上传首尾两张图像,搭配简单文字说明,一些“奇奇怪怪”的新东西就嘭的诞生了。
新功能目前免费可玩,于是上线不到24h,网友们那叫一个脑洞大开。
玩到上头处,有网友已经忍不住想掏钱了:
伙计,我想你们这次已经拿到我的钱包了。
更多效果和脑洞,接下来一睹为快。
网友:我有一个大胆的想法
先来看一组官方输出。
新功能主打一个“自然衔接”,尤其擅长处理延时摄影,无论是自然风光还是人文景色,都能生成电影级画面。
Prompt:A timelapse of a colorful sunset(日落时分的延时摄影)
<video controls="controls" preload="none" width="818" height="452"></video>
{"type":"video","tracklist":true,"tracknumbers":true,"images":true,"artists":true,"tracks":[{"src":"https:\/\/www.qbitai.com\/wp-content\/uploads\/2024\/06\/\u843d\u65e5\u65f6\u523b.mp4","type":"video\/mp4","title":"\u843d\u65e5\u65f6\u523b","caption":"","description":"","meta":{"length\_formatted":"0:05"},"dimensions":{"original":{"width":1302,"height":720},"resized":{"width":818,"height":452}},"image":{"src":"https:\/\/www.qbitai.com\/wp-includes\/images\/media\/video.png","width":48,"height":64},"thumb":{"src":"https:\/\/www.qbitai.com\/wp-includes\/images\/media\/video.png","width":48,"height":64}}]}
Prompt:A timelapse of the Eiffel tower from day to night(埃菲尔铁塔从白天到夜晚的延时摄影)
<video class="wp-video-shortcode" id="video-160834-1" width="720" height="1302" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/%E5%9F%83%E8%8F%B2%E5%B0%94%E9%93%81%E5%A1%94%E6%98%BC%E5%A4%9C.mp4?_=1">http://www.qbitai.com/wp-cont...埃菲尔铁塔昼夜.mp4</video>
人物角色的刻画,也自然流畅。
Prompt:figure with glowing eyes and wings slowly turns in misty forest as camera pans around(当镜头四处移动时,眼睛和翅膀发光的人物在迷雾森林中慢慢转动)
<video class="wp-video-shortcode" id="video-160834-2" width="840" height="355" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/7-Luma-AI-on-X_-_8.-%E2%80%9CA-swirling-tornado-of-teal-smoke-morphs-into-a-ballerina-spinning-in-golden-light-camera-pans-smoothly-from-wide-shot-to-medium-frame.%E2%80%9D-https___t.co_cPzt0DELLa_-_-X.mp4?_=2">http://www.qbitai.com/wp-cont...“A-swirling-tornado-of-teal-smoke-morphs-into-a-ballerina-spinning-in-golden-light-camera-pans-smoothly-from-wide-shot-to-medium-frame.”-https___t.co_cPzt0DELLa_-_-X.mp4</video>
在细节上也做得很好,比如控制烟雾效果:
A swirling tornado of teal smoke morphs into a ballerina spinning in golden light, camera pans smoothly from wide shot to medium frame(青色烟雾的漩涡龙卷风变成了在金色光芒中旋转的芭蕾舞演员,相机从广角镜头平稳地平移到中画幅)
<video class="wp-video-shortcode" id="video-160834-3" width="840" height="355" preload="metadata" controls="controls"><source type="video/mp4" src="http://www.qbitai.com/wp-content/uploads/2024/06/%E9%9D%92%E7%83%9F.mp4?_=3">http://www.qbitai.com/wp-cont...青烟.mp4</video>
不知道你有没有心动,网友们整活儿的心反正是挡不住了。
枪战片,get:
△𝕏@Craftian\_BK
二刺猿也第一时间到达现场:忍者,变身!
△𝕏@sangunshixx
苹果宣传片,也有人整出来了(doge):
△𝕏@Pierrick Chevallier
上手实测
看完这些惊艳众人的例子,那我们还不得赶紧上手试试~
直接访问Luma AI官网,在页面中央输入框的顶部上传首尾帧图像。
由于昨天刚好是马斯克53岁生日,我们借老马自己放出的30年前旧照浅试了一下。
The transformation of a person over 30 years.(体现一个人30年的变化)
不过也有一些“翻车”的例子。
Prompt:The young man goes upstairs, and the old man starts to enjoy eating watermelon cheerfully.(年轻男子上楼了,大爷开始愉快吃瓜)
结果看起来有点令人啼笑皆非,果然prompt是个技术活儿。(doge)
注意,由于涌入的网友过多,官方限制了每日生成次数。(每人每天5次)
关于Luma AI,据TechCrunch消息,截至今年1月份,该公司已融资超7000万美元。两轮融资中都有英伟达参投的身影。
One More Thing
有点巧的是,这边Luma刚上新,Runway版Sora(Gen-3)也对CPP(Creative Partners Program)创作者们开放了测试。
一大波实测视频正在刷屏中,效果be like:
(以上来自𝕏@arohaAIX)
据透露,目前开放的文生视频功能,单次最长可生成10s的视频。
看这样子,视频生成是真卷起来了,你觉得谁更有希望杀死比赛?
参考链接: [1]https://x.com/LumaLabsAI/stat... [2]https://x.com/dr\_cintas/status/1806686604649459814 [3]https://x.com/arohaAIX/status...
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。