AI視頻兩巨頭開戰!Runway秒生現實大片,Luma動嘴創作電影

新智元報道

編輯:編輯部 HYZ

【新智元導讀】半小時內,兩大巨頭前後腳放出兩大重磅更新,AI視頻真是卷瘋了!Runway放出生圖模型Frames,一鍵讓你擁有特定風格的世界。Luma則把文字、圖像、視頻全融合,只用自然交互就讓腦海中畫面成真。

幾乎同一時間,AI視頻再迎來兩大重磅更新,這一領域果然是捲到冒煙了。

Runway剛放出圖像生成基礎模型Frames,讓AI生圖的質量又提升了一大截。

緊接着還不到半小時,另一巨頭Luma也出手了!它彷彿早已蓄勢待發,立即亮出了全新的DreamMachine。

這一幕堪比谷歌與OpenAI的精彩對決。

先看Runway的Frames,它不僅在風格控制和視覺真實度方面實現了重大突破,甚至還能在保持風格一致性的同時,支持廣泛的創意探索。

藉助Frames,任何人都可以爲自己的項目確立獨特的視覺風格、穩定生成符合審美的各種變體,最終精確地設計出所要創造的世界的外觀、質感和氛圍了。

目前,Runway正逐步在Gen-3 Alpha中開放Frames的訪問權限

而Luma緊接着上線的這套交互流程,更是讓業內人士直呼太牛了。

從此,文字、圖像、視頻都融合到了一個流程中,全部爲你的創意服務。

再也不需要專業的提示工程,只用自然交互,DreamMachine就能讓腦中所想的畫面再現。

你腦海中的所有想法,可以立即變爲現實,創意瞬間成真,而且已經上線可用。

眼看這邊Runway和Luma都打到白熱化了,每日一問OpenAI:Sora何時上線?

左:Runway CEO Cristobal Valenzuela 右:Luma AI CEO Amit Jain

Runway Frames:創造屬於你自己的世界

下面,我們先來探索一波Frames可以創造的世界吧。

世界 1089

電影場景藝術 (Mise-en-scène)

通過經典電影的視覺語言重新詮釋數字肖像,每幅圖像都完美捕捉了標誌性構圖風格的精髓。主體在精心編排的光與影中徐徐展現。

左右滑動查看

世界 3190

1980 年代特效化妝

潛入80年代特效的世界,重現那個實踐特效的黃金時代——當時的怪物是用乳膠和顏料而非數字像素打造的。

每件作品都向那個充滿匠心獨運的年代致敬,展現手工製作的怪物和特效的獨特魅力。

左右滑動查看

世界 3204

1970年代專輯封面

誇張的動物與戲劇性的攝影,結合實驗性字體和飽和度極高的色彩。

每幅設計都重新演繹了新音樂專輯的大膽風格,展現了那個兇猛生物與醒目肖像主宰黑膠唱片藝術的年代。

左右滑動查看

世界 4027

日本小刊物(Zine)

復古動漫美學與夢幻科幻在花朵和飛碟的奇幻色彩中交織。

呈現70年代漫畫的獨特韻味——粗獷的線條、浩瀚的宇宙背景,以及浪漫與超現實主義的絕妙融合。

左右滑動查看

世界 7621

數字影像風格

當代肖像藝術與對稱性建築和電影級色彩的完美結合。

每幅圖都捕捉到了獨特的電影藝術風格——中性色調、決定性瞬間,以及主體與空間渾然一體的精妙構圖。——中性色調、決定性瞬間,以及主體與空間渾然一體的精妙構圖。

左右滑動查看

世界 0981

動態範圍風景

大自然完整的光譜在鮮明的細節中徐徐展開——從遠峰的深邃陰影到礦物構造的璀璨紋理,從晶瑩剔透的鹽灘到氣勢磅礴的山脈。

豐富的色調和細節,完美地呈現出了地與天的交響。

左右滑動查看

世界 8421

一次性相機

老式閃光燈與真實瞬間的邂逅,展現顆粒感和漏光的獨特魅力。典型的35毫米膠片風格——過曝的高光、跳躍的色彩,以及隨手拍攝時所流露的真實活力。

左右滑動查看

世界 1009

靜物

日常物品通過精心構圖和自然光線展現出靜謐的詩意。

每幅作品都將平凡轉化爲迷人之物——在纏繞的電線、破舊的筆記本,等熟悉的物件上流轉的細膩光影裡發現美。

左右滑動查看

世界 8862

雜誌拼貼

復古剪報與波普藝術在超現實的新敘事中激情碰撞。每件作品都將撕裂的照片、醒目的字體和出人意料的並置組合在一起,創造出遊走於幽默與不安之間的富有衝擊力的構圖。

左右滑動查看

世界 3107

運動中的物體

日常物品在醒目的單色背景下,展現出精心編排的有序混沌。

每幅構圖都定格了一個受控的破壞瞬間,將簡單的物體昇華爲富有動態與能量的雕塑。

左右滑動查看

Runway研究員Nicolas Neubert放出了更多關於Frames生成的圖片,每一幀都是電影級質感。

左右滑動查看

Frames就像一個神奇的紐帶,將所有創意工具無縫連接, 完美串聯起了Runway平臺上的各種創作環節。

通過它,我們可以大膽展開想象,探索故事世界的雛形。

在意外闖入世界8479之後,或許你也會發出同樣的感慨:自己的世界被徹底顛覆了!

左右滑動查看

Luma DreamMachine:想法即成現實

這邊Luma放出的更新,也讓人驚歎:AI視頻的交互,居然已經絲滑到了這個程度?

與Runway追求的精確控制不同,全新進化的DreamMachine更強調的是創意的自然流暢。

無需複雜的提示工程,只要用最自然的方式與Dream Machine對話,便能輕鬆自如地探索、創作和修改作品。

當然,最爲重要的是,它能夠將你的一切想法變爲現實。

比如,你說一句,「我可以把花放在生態玻璃中嗎?」,DreamMachine就會立即變出多種多樣的玻璃花園。

甚至,還可以讓它長在沙園、懸掛式花盆、共生裝置等任何地方,只有你想不到,沒有它做不到。

我能讓這片沙漠下雨嗎?Dream Machine瞬間讓雨降落。

這是基於Luma Photon模型所打造,被稱之爲當今最富創造力、最智能、最快速圖像AI模型。

它能夠以其他同類模型8倍的效率和速度生成高分辨率、高精細度、創意合成的圖像。

左右滑動查看

左右滑動查看

不論是創意者、設計師,還是視覺創作者,它能幫助你創作震撼的視覺作品——無論是製作電影級視覺故事,還是革新產品創意。

另外,Dream Machine還支持圖像自由參考,隨心重組。通過導入專屬圖像、風格和角色,就能讓創意完美呈現,分毫不差。

一隻鳥和戴珍珠耳環少女的結合,完美復刻了原圖的風格。

不僅如此,在Dream Machine中首次實現了角色一致性的開創性突破。

只需一張圖片,即可通過角色參考功能創建專屬角色,讓其在圖片和視頻中栩栩如生。

通過運用強大的DM 1.6視頻模型,再配上配合鏡頭動作和起止幀設置,能夠讓你精確編排每個鏡頭,打造完美視頻。

若想延長視頻時長,簡單說聲「循環」,即可創建循環效果。

靈感枯竭?也是不存在的。

令人驚豔的Brainstorm功能,將爲你開啓無限創意之門。它能夠爲你迸發出無限創意方向,爲你點亮靈感之光。

在Luma的留言區,網友表示,自己已經測試Dream Machine好幾天了,感受就是一個字——絕!

你可以混合任何元素,基於它構建自己的創作。

「每當我覺得Luma團隊已經到頭的時候,你們就會再次證明:我錯了!」

手快的網友已經試用起來了。

參考資料:

https://runwayml.com/research/introducing-frames

https://lumalabs.ai/dream-machine