鱼羊一水发自凹非寺
量子位|公众号QbitAI
英伟达投的Sora竞品,服务器又双叒被挤爆了!
来自LumaAI的“下一代”文生视频模型DreamMachine,新功能一上线,网友们再次玩疯。
经典表情包到瑞克摇的丝滑转场,这不第一时间就被安排上了(doge):
△𝕏@Proper
具体来说,DreamMachine这次上新的是“关键帧控制”:
上传首尾两张图像,搭配简单文字说明,一些“奇奇怪怪”的新东西就嘭的诞生了。
新功能目前免费可玩,于是上线不到24h,网友们那叫一个脑洞大开。
玩到上头处,有网友已经忍不住想掏钱了:
伙计,我想你们这次已经拿到我的钱包了。
更多效果和脑洞,接下来一睹为快。
网友:我有一个大胆的想法
先来看一组官方输出。
新功能主打一个“自然衔接”,尤其擅长处理延时摄影,无论是自然风光还是人文景色,英伟达布局视频,风头快被抢完了都能生成电影级画面。
Prompt:Atimelapseofacolorfulsunset(日落时分的延时摄影)
Prompt:AtimelapseoftheEiffeltowerfromdaytonight(埃菲尔铁塔从白天到夜晚的延时摄影)
人物角色的刻画,也自然流畅。
Prompt:figurewithglowingeyesandwingsslowlyturnsinmistyforestascamerapansaround(当镜头四处移动时,眼睛和翅膀发光的人物在迷雾森林中慢慢转动)
在细节上也做得很好,比如控制烟雾效果:
Aswirlingtornadooftealsmokemorphsintoaballerinaspinningingoldenlight,camerapanssmoothlyfromwideshottomediumframe(青色烟雾的漩涡龙卷风变成了在金色光芒中旋转的芭蕾舞演员,相机从广角镜头平稳地平移到中画幅)
不知道你有没有心动,网友们整活儿的心反正是挡不住了。
枪战片,get:
△𝕏@Craftian_BK
二刺猿也第一时间到达现场:忍者,变身!
△𝕏@sangunshixx
还有大佬结合ElevenLabs的语音生成能力,用DreamMachine的这个新功能直接整出了“狼人变身”的大片效果。
△𝕏@Uncanny_Harry
苹果宣传片,也有人整出来了(doge):
△𝕏@PierrickChevallier上手实测
看完这些惊艳众人的例子,那我们还不得赶紧上手试试~
一开始,我们用AI生成了带有量子位LOGO的图像,然后再用Luma生成电影片段。
直接访问LumaAI官网,在页面中央输入框的顶部上传首尾帧图像。
然后根据自己想象的画面输入提示词:
Inacoolsci-fiblockbuster,thecharacterslowlywalksintothedarkness,withthelightsgraduallygoingout.(一部酷炫的科幻大片,角色慢慢走进暗处,最后灯光熄灭)
最后静待生成,下面这个视频实测用时15分钟。
另外,由于昨天刚好是马斯克53岁生日,我们也借老马自己放出的30年前旧照浅试了一下。
Thetransformationofapersonover30years.(体现一个人30年的变化)
不过也有一些“翻车”的例子。
Prompt:Theyoungmangoesupstairs,andtheoldmanstartstoenjoyeatingwatermeloncheerfully.(年轻男子上楼了,大爷开始愉快吃瓜)
结果看起来有点令人啼笑皆非,果然prompt是个技术活儿。(doge)
注意,由于涌入的网友过多,官方限制了每日生成次数。(每人每天5次)
关于LumaAI,据TechCrunch消息,截至今年1月份,该公司已融资超7000万美元。两轮融资中都有英伟达参投的身影。
OneMoreThing
有点巧的是,这边Luma刚上新,Runway版Sora(Gen-3)也对CPP(CreativePartnersProgram)创作者们开放了测试。
一大波实测视频正在刷屏中,效果belike:
(以上来自𝕏@arohaAIX)
据透露,目前开放的文生视频功能,单次最长可生成10s的视频。
看这样子,视频生成是真卷起来了,你觉得谁更有希望杀死比赛?
参考链接:
[1]https://x.com/LumaLabsAI/status/1806435502096310656
[2]https://x.com/dr_cintas/status/1806686604649459814
[3]https://x.com/arohaAIX/status/1806831217503080940
—完—
量子位年度AI主题策划正在征集中!
欢迎投稿专题一千零一个AI应用,365行AI落地方案
或与我们分享你在寻找的AI产品,或发现的AI新动向
点这里👇关注我,记得标星哦~
一键三连「分享」、「点赞」和「在看」
科技前沿进展日日相见~