AI好好用報道
編輯:楊文
Runway三天更新兩次,Luma全力狙擊,AI視頻圈狼煙再起。
Runway 和 Luma 這倆「死對頭」,又開始暗暗較勁。
從上周六開始,Runway 僅三天就上新了兩次。
一次是推出視頻擴展(Expand Video)功能,一次是發(fā)布了圖像生成模型 Frames。
Luma 也不甘示弱,昨晚幾乎與 Runway 同時,推出了全新的 Dream Machine,其中也包括 AI 生圖功能。
這兩大 AI 視頻「扛把子」,都心照不宣地盯上了 AI 生圖這塊蛋糕,這下子壓力給到 Midjourney、Stable Diffusion 和 DaLL?E 了。
Runway 鏈接:
https://runwayml.com/
Luma 鏈接:
https://lumalabs.ai/dream-machine
Runway難道沒有創(chuàng)新瓶頸?
Runway 總有新點子。
去年被玩壞的 AI 擴圖,Runway 靈機一動把它用在了視頻上。
上周六,Runway 推出了視頻擴展(Expand Video)功能,并已開始逐步推出,很快就會向所有人開放。
它可以在原始畫面周圍生成額外內(nèi)容,靈活調(diào)整視頻比例,讓橫屏變豎屏,反之亦然。
在保持視覺一致性的同時,無縫擴展畫面,用新構(gòu)圖創(chuàng)造新故事。
和 AI 擴圖一樣,它也能根據(jù)文本提示,擴展出讓人意想不到的鏡頭。
此外,將多個擴展鏡頭連接在一起,我們還可以創(chuàng)建出電影般的運鏡效果。
僅隔一天時間,Runway 昨晚再次上新,推出了圖像生成模型 ——Frames,在風格控制和視覺保真度方面表現(xiàn)出色。
用官方的話來說,「有了 Frames,你可以構(gòu)建代表非常特定觀點和審美特征的世界,精確設(shè)計你想要創(chuàng)造的世界的外觀、感覺和氛圍。」
世界 1089:場景布置(Mise-en-scène)
場景布置通過經(jīng)典電影的視覺語言重新想象數(shù)字肖像畫,每幅圖像都捕捉到了標志性構(gòu)圖風格的精髓。在光影精心編排的場景中,主體浮現(xiàn)出來。
世界 3190:1980 年代特效化妝(1980s SFX Makeup)
這是一個復(fù)興實用特效時代的世界,那時生物是由乳膠和油漆而非像素創(chuàng)造的。
每一件作品都致敬了那些手工制作的怪物和血腥場景,它們定義了一個真正實用創(chuàng)新的年代。
世界 3204:1970 年代專輯藝術(shù)(1970s Album Art)
兇猛的動物、戲劇性的攝影與實驗性字體和飽和色彩相結(jié)合。
每一款設(shè)計都是對新興音樂專輯大膽美學(xué)的重新想象,當時兇猛的生物和引人注目的肖像統(tǒng)治了黑膠唱片藝術(shù)。
世界 4027:日本雜志(Japanese Zine)
復(fù)古動漫美學(xué)與夢幻般的科幻相遇,在五彩繽紛的花朵和飛碟中爆發(fā)。
那種獨特的 70 年代漫畫感覺——大膽的線條、宇宙背景,以及浪漫與超現(xiàn)實主義的不可抗拒的混合。
世界 7621:數(shù)字圖片配置文件(Digital Picture Profiles)
當代肖像畫與建筑對稱性和電影色彩分級相結(jié)合。
Frames 捕捉到了那種獨特的藝術(shù)院線氣質(zhì)——中性調(diào)色板、決定性瞬間和精心考慮的構(gòu)圖,讓主體和空間合二為一。
世界 0981:動態(tài)范圍景觀 (Dynamic Range Landscapes)
大自然全光譜的色彩以生動的細節(jié)展開。
從遙遠山峰的深邃陰影到礦物形成的絢麗紋理,從晶瑩剔透的鹽田到陰郁的山脈,大地與天空的交織,呈現(xiàn)出廣闊的色調(diào)細節(jié)。
世界 8421:一次性用品(Disposables)
未經(jīng)修飾的閃光照相機與真實的瞬間相遇,展現(xiàn)了所有顆粒感十足、光線泄露的輝煌。
無可挑剔的35毫米膠片魅力——過曝的高光、鮮艷的色彩變化,以及不經(jīng)意間捕捉到的照片中那種原始活力。
世界 1009:靜物 (Still Life)
日常物品通過構(gòu)圖和自然光展現(xiàn)出它們的靜謐詩意,每一幅圖像都將平凡之物轉(zhuǎn)變?yōu)槊匀酥啊?/p>
世界 8862:雜志拼貼 (Magazine Collage)
復(fù)古剪貼畫和波普藝術(shù)在超現(xiàn)實的新敘事中碰撞。
每件作品都疊加了撕破的照片、大膽的排版和出人意料的并置,創(chuàng)造出模糊幽默與不安之間界限的構(gòu)圖。
世界 3107:運動中的物體(Objects in Motion)
每個構(gòu)圖都定格了一個受控破壞的瞬間,將簡單物品轉(zhuǎn)變?yōu)閯討B(tài)雕塑。
Luma 半路狙擊
就在 Runway 推出新模型半小時后,Luma 也于昨晚發(fā)布了全新的 Dream Machine。
全新到什么程度呢?
首先,直觀的交互設(shè)計。我們可以用自然語言描述想法,或上傳參考圖像來指導(dǎo)輸出,無需復(fù)雜的提示工程。
其次,Luma 現(xiàn)在不僅可以生成視頻,還可以生成視覺效果絕佳的圖像。
這是由 Luma Photon 提供支持,一個號稱「最具創(chuàng)造力、最智能、最快的圖像 AI 模型」。
此外,它還推出了不少功能。
參考重繪功能:用戶可以將單一圖片轉(zhuǎn)化為動態(tài)角色,并在多種場景中使用,甚至可以將一張照片與另一張照片融合,創(chuàng)造出獨特的角色。
首次實現(xiàn)一致性角色:用戶可以用來自單個圖像的一致角色制作動畫故事情節(jié),這種一致性在視頻創(chuàng)作中是前所未有的。
視頻創(chuàng)作工具:使用強大的 DM 1.6 視頻模型,通過攝像 Dream Machine 提供「鏡頭運動」、「起始與結(jié)束幀」和循環(huán)功能。
頭腦風暴功能:對于缺乏靈感的用戶,Dream Machine 的頭腦風暴功能可以提供各種創(chuàng)意點子,幫助他們找到創(chuàng)作方向。
一手實測
與 Runway 的逐步開放不同,Luma 新功能現(xiàn)在就可以直接在 iOS 和 Web 上免費試用。
其玩法也很簡單。Luma 為此還出了個官方教程。
接下來,我們就實測一下。
我們先輸入一段提示詞:A fashionable girl was holding a bouquet of flowers,16:9(一個時髦的女孩手捧一束鮮花。)
接著讓它按照上面第一幅圖的風格,繼續(xù)生成。
然后選取其中兩張圖片作為關(guān)鍵幀,生成一段 5 秒視頻:
X 博主 @NimrodEshed 分享了他整個創(chuàng)作過程。
輸入提示詞:
imdb13000film photography of a more real hot air balloon shaped like a giant sushi roll floating in the sky of Singapore
among the skyscrapers. The balloon's body is wrapped in shiny black nori with bright green avocado, orange salmon, and
white rice accents. The basket below mimics chopsticks, adding a whimsical touch to this sushi-inspired balloon soaring above Singapore's cityscape.
中文版:
在新加坡的摩天大樓天空中,一個更真實的熱氣球,形狀像一個巨大的壽司卷,正在漂浮。氣球的表面包裹著閃亮的黑色海苔,上面點綴著鮮綠色的牛油果、橘色的三文魚和白色的米粒。下面的籃子模仿著筷子,為這個以壽司為靈感的氣球增添了一抹奇思妙想,它在新加坡的城市景觀上方翱翔。
從中選出一張圖片,以此為參考,讓它生成一段視頻。
X 博主 max cas 則用 Luma 生成了一些小怪物。
并將其制作成視頻:
Runway鏈接:
https://runwayml.com/
Luma鏈接:
https://lumalabs.ai/dream-machine
https://x.com/runwayml
https://x.com/LumaLabsAI
https://runwayml.com/research/introducing-frames
https://x.com/minchoi/status/1861123346923941889
以后我們會帶來更多好玩的AI應(yīng)用,也歡迎大家進群交流。
? THE END
轉(zhuǎn)載請聯(lián)系本公眾號獲得授權(quán)
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.