AI視頻兩巨頭開戰!Runway秒生現實大片,Luma動嘴創作電影
新智元報道
編輯:編輯部 HYZ
【新智元導讀】半小時內,兩大巨頭前後腳放出兩大重磅更新,AI視頻真是卷瘋了!Runway放出生圖模型Frames,一鍵讓你擁有特定風格的世界。Luma則把文字、圖像、視頻全融合,只用自然交互就讓腦海中畫面成真。
幾乎同一時間,AI視頻再迎來兩大重磅更新,這一領域果然是捲到冒煙了。
Runway剛放出圖像生成基礎模型Frames,讓AI生圖的質量又提升了一大截。
緊接着還不到半小時,另一巨頭Luma也出手了!它彷彿早已蓄勢待發,立即亮出了全新的DreamMachine。
這一幕堪比谷歌與OpenAI的精彩對決。
先看Runway的Frames,它不僅在風格控制和視覺真實度方面實現了重大突破,甚至還能在保持風格一致性的同時,支持廣泛的創意探索。
藉助Frames,任何人都可以爲自己的項目確立獨特的視覺風格、穩定生成符合審美的各種變體,最終精確地設計出所要創造的世界的外觀、質感和氛圍了。
目前,Runway正逐步在Gen-3 Alpha中開放Frames的訪問權限
而Luma緊接着上線的這套交互流程,更是讓業內人士直呼太牛了。
從此,文字、圖像、視頻都融合到了一個流程中,全部爲你的創意服務。
再也不需要專業的提示工程,只用自然交互,DreamMachine就能讓腦中所想的畫面再現。
你腦海中的所有想法,可以立即變爲現實,創意瞬間成真,而且已經上線可用。
眼看這邊Runway和Luma都打到白熱化了,每日一問OpenAI:Sora何時上線?
左:Runway CEO Cristobal Valenzuela 右:Luma AI CEO Amit Jain
Runway Frames:創造屬於你自己的世界
下面,我們先來探索一波Frames可以創造的世界吧。
世界 1089
電影場景藝術 (Mise-en-scène)
通過經典電影的視覺語言重新詮釋數字肖像,每幅圖像都完美捕捉了標誌性構圖風格的精髓。主體在精心編排的光與影中徐徐展現。
左右滑動查看
世界 3190
1980 年代特效化妝
潛入80年代特效的世界,重現那個實踐特效的黃金時代——當時的怪物是用乳膠和顏料而非數字像素打造的。
每件作品都向那個充滿匠心獨運的年代致敬,展現手工製作的怪物和特效的獨特魅力。
左右滑動查看
世界 3204
1970年代專輯封面
誇張的動物與戲劇性的攝影,結合實驗性字體和飽和度極高的色彩。
每幅設計都重新演繹了新音樂專輯的大膽風格,展現了那個兇猛生物與醒目肖像主宰黑膠唱片藝術的年代。
左右滑動查看
世界 4027
日本小刊物(Zine)
復古動漫美學與夢幻科幻在花朵和飛碟的奇幻色彩中交織。
呈現70年代漫畫的獨特韻味——粗獷的線條、浩瀚的宇宙背景,以及浪漫與超現實主義的絕妙融合。
左右滑動查看
世界 7621
數字影像風格
當代肖像藝術與對稱性建築和電影級色彩的完美結合。
每幅圖都捕捉到了獨特的電影藝術風格——中性色調、決定性瞬間,以及主體與空間渾然一體的精妙構圖。——中性色調、決定性瞬間,以及主體與空間渾然一體的精妙構圖。
左右滑動查看
世界 0981
動態範圍風景
大自然完整的光譜在鮮明的細節中徐徐展開——從遠峰的深邃陰影到礦物構造的璀璨紋理,從晶瑩剔透的鹽灘到氣勢磅礴的山脈。
豐富的色調和細節,完美地呈現出了地與天的交響。
左右滑動查看
世界 8421
一次性相機
老式閃光燈與真實瞬間的邂逅,展現顆粒感和漏光的獨特魅力。典型的35毫米膠片風格——過曝的高光、跳躍的色彩,以及隨手拍攝時所流露的真實活力。
左右滑動查看
世界 1009
靜物
日常物品通過精心構圖和自然光線展現出靜謐的詩意。
每幅作品都將平凡轉化爲迷人之物——在纏繞的電線、破舊的筆記本,等熟悉的物件上流轉的細膩光影裡發現美。
左右滑動查看
世界 8862
雜誌拼貼
復古剪報與波普藝術在超現實的新敘事中激情碰撞。每件作品都將撕裂的照片、醒目的字體和出人意料的並置組合在一起,創造出遊走於幽默與不安之間的富有衝擊力的構圖。
左右滑動查看
世界 3107
運動中的物體
日常物品在醒目的單色背景下,展現出精心編排的有序混沌。
每幅構圖都定格了一個受控的破壞瞬間,將簡單的物體昇華爲富有動態與能量的雕塑。
左右滑動查看
Runway研究員Nicolas Neubert放出了更多關於Frames生成的圖片,每一幀都是電影級質感。
左右滑動查看
Frames就像一個神奇的紐帶,將所有創意工具無縫連接, 完美串聯起了Runway平臺上的各種創作環節。
通過它,我們可以大膽展開想象,探索故事世界的雛形。
在意外闖入世界8479之後,或許你也會發出同樣的感慨:自己的世界被徹底顛覆了!
左右滑動查看
Luma DreamMachine:想法即成現實
這邊Luma放出的更新,也讓人驚歎:AI視頻的交互,居然已經絲滑到了這個程度?
與Runway追求的精確控制不同,全新進化的DreamMachine更強調的是創意的自然流暢。
無需複雜的提示工程,只要用最自然的方式與Dream Machine對話,便能輕鬆自如地探索、創作和修改作品。
當然,最爲重要的是,它能夠將你的一切想法變爲現實。
比如,你說一句,「我可以把花放在生態玻璃中嗎?」,DreamMachine就會立即變出多種多樣的玻璃花園。
甚至,還可以讓它長在沙園、懸掛式花盆、共生裝置等任何地方,只有你想不到,沒有它做不到。
我能讓這片沙漠下雨嗎?Dream Machine瞬間讓雨降落。
這是基於Luma Photon模型所打造,被稱之爲當今最富創造力、最智能、最快速圖像AI模型。
它能夠以其他同類模型8倍的效率和速度生成高分辨率、高精細度、創意合成的圖像。
左右滑動查看
左右滑動查看
不論是創意者、設計師,還是視覺創作者,它能幫助你創作震撼的視覺作品——無論是製作電影級視覺故事,還是革新產品創意。
另外,Dream Machine還支持圖像自由參考,隨心重組。通過導入專屬圖像、風格和角色,就能讓創意完美呈現,分毫不差。
一隻鳥和戴珍珠耳環少女的結合,完美復刻了原圖的風格。
不僅如此,在Dream Machine中首次實現了角色一致性的開創性突破。
只需一張圖片,即可通過角色參考功能創建專屬角色,讓其在圖片和視頻中栩栩如生。
通過運用強大的DM 1.6視頻模型,再配上配合鏡頭動作和起止幀設置,能夠讓你精確編排每個鏡頭,打造完美視頻。
若想延長視頻時長,簡單說聲「循環」,即可創建循環效果。
靈感枯竭?也是不存在的。
令人驚豔的Brainstorm功能,將爲你開啓無限創意之門。它能夠爲你迸發出無限創意方向,爲你點亮靈感之光。
在Luma的留言區,網友表示,自己已經測試Dream Machine好幾天了,感受就是一個字——絕!
你可以混合任何元素,基於它構建自己的創作。
「每當我覺得Luma團隊已經到頭的時候,你們就會再次證明:我錯了!」
手快的網友已經試用起來了。
參考資料:
https://runwayml.com/research/introducing-frames
https://lumalabs.ai/dream-machine