激情六月丁香婷婷|亚洲色图AV二区|丝袜AV日韩AV|久草视频在线分类|伊人九九精品视频|国产精品一级电影|久草视频在线99|在线看的av网址|伊人99精品无码|午夜无码视频在线

Runway發(fā)布新視頻模型:Gen-3 Alpha超級香,讓你細品細品

發(fā)布時間:2024-08-16 20:44:11 瀏覽量:140次

自從OpenAI公布了Sora,視頻生成領域正式按下了行業(yè)加速鍵,許多國內外企業(yè)紛紛發(fā)力,不僅研究發(fā)布專門用于視頻生成的垂直大模型,還將手里的技術封裝成一個個人人能用的AIGC產品。

隨著新玩家數(shù)量的劇增,這場視頻生成領域的戰(zhàn)爭愈演愈烈,其中受到沖擊最大的自然是老牌同類競品模型,比如Pika、SDV、谷歌、Meta,還有在昨天發(fā)布了第三代視頻生成模型Gen-3 Alpha的Runway。

Gen-3很香,但你暫時用不了

Runway深夜發(fā)布的各種演示視頻展示出了電影級的畫面細節(jié),直接震驚了全體網友。Gen-3與之前的旗艦視頻模型Gen-2相比,在模型生產速度和保真度方面有了重大提升,同時對生成視頻的結構、風格和運動提供了細粒度的控制。

Runway表示,Gen-3 Alpha具有高保真視頻、精細動作控制、逼真人物生成、多模態(tài)輸入、專業(yè)創(chuàng)作工具、增強安全、高質量訓練等特點。在這次模型的訓練過程中,匯集了研究者、工程師和藝術家的集體智慧和努力。正是這種跨學科的協(xié)作精神,使得Gen-3 Alpha模型能夠理解和表達多種風格和電影概念。

官方展示視頻時長為10秒,人物生成中的人物面部細節(jié)和情感營造方面比較細膩,場景、風景生成中的元素、光影沒有太大的違和感。友情提示,以下展示內容因為要轉換為GIF,所以畫質均有不同程度壓縮,想看原視頻的朋友可以去Runway官網復習下。

圖源:Runway

男子似乎在類似電影院的昏暗地方觀看影視作品,雙眼微紅、眼球轉動、眨眼以及嘴部輕微抽動等細節(jié)還原度非常高。

圖源:Runway

一間破舊的屋子,地面被魔法轉化成植物門,植物在陽光下隨風飄揚,隨著鏡頭向前推進展現(xiàn)更多細節(jié)。

圖源:Runway

一團火焰漂浮半空,在街道游蕩,火焰細節(jié)明顯比其他元素要難掌握,邊緣有些飄忽,加上虛化背景上的人們也有滑行的動作。

圖源:Runway

接下來是本人最喜歡的一個視頻,電影級別的鏡頭推進仿佛一下就將人們帶進了宏大的異世界,如果小雷沒有記錯的話,侏羅紀公園、金剛等電影經常用這種鏡頭。鏡頭背景太廣,因此也不奢望能展示多少細節(jié),至少大體看上去沒發(fā)現(xiàn)什么瑕疵。

圖源:Runway

盡管大家看到基于Gen-3生成的短視頻都很激動,但還是得稍微冷靜冷靜,因為Runway暫時不提供Gen-3的使用。預計還要再過幾天,它才會向Runway訂閱用戶開放,包括企業(yè)客戶和Runway創(chuàng)意合作伙伴計劃中的創(chuàng)作者。

也就是說,普通用戶短時間內還是無法使用Gen-3,只能用Gen-2解解饞。說起來,小雷還沒體驗過Runway的視頻生成模型,Gen-2就Gen-2吧,通過對比看看Gen-3的升級幅度是不是真有那么大。

體驗完Gen-2,我才明白Gen-3升級力度有多大

進入生成界面,小雷立馬感受到了Runway與視頻生成產品的不同。用戶不僅可以采用“傻瓜式”一鍵輸入關鍵詞生成,還能對主體運動強度、相機控制、運動軌跡等細節(jié)進行微調,至于風格、縱橫比、清晰度也是標配了。

圖源:Runway

但也有要強烈吐槽的地方,那就是視頻生成需要排隊,用戶要么等待,要么只能選擇升級訂閱套餐,也就是付費。小雷體驗過這么多國內外視頻生成大模型應用,這是我第一次遇到這種情況。

圖源:Runway

這是小雷生成的第一個視頻,生成4s的視頻花了大概2分鐘,原本想生成一個CGI風格的荒原視頻,但這效果直接給我來了一記重擊。看這個視頻時直接讓我想起了CS畫風,草叢“蠕動”異常難看,視頻中所有房子的屋頂均有不同程度的頻閃,給人一種置身異次元空間的感覺。

圖源:Runway

第二個視頻的關鍵詞是“臉上有雀斑的紅發(fā)年輕人注視窗外”,最終呈現(xiàn)結果大家看看就好,能感覺Gen-2在努力營造光線在人物面部漸變的層次感,然而效果并不自然,人物臉上的雀斑沒識別到,脖子被胡須侵襲成了蛇皮狀,人物想眨眼又眨不了的樣子一言難盡。

圖源:Runway

生成了兩個視頻后,小雷實在體驗不下去了,感覺Gen-2的水平還停留在2024年視頻生成模型剛出來的階段,與現(xiàn)在市面上其他視頻生成模型完全不在一個檔次上。無論是人物還是風景,基于Gen-2生成視頻給人的最大感受就是不真實,也難怪Runway對Gen-3的描述是“巨大提升”。

體驗完Gen-2這個上代旗艦,小雷才真正感受到Gen-3的強大。不與其他視頻生成模型比較,Runway在超越自己這件事上就已經贏了。

小雷注意到不少網友可能是拿到了內測資格,在網上分享自己的試用作品,視頻效果與官方展示視頻大體相同,因此大家也不用擔心未來Gen-3公開版本“縮水”的情況。不過在Gen-3真正上線前,大家還是得耐心等待。

視頻生成模型競爭,進入加速階段

Runway成立于2018年,是一家專注在線視頻剪輯制作的網站。團隊致力于將AI技術運用到視頻處理中,開發(fā)了根據文本生成圖像、根據圖像生成風格化變體、圖像延展外繪等功能,為后續(xù)的視頻生成技術奠定了基礎。

Runway本次發(fā)布的第三代視頻生成模型Gen-3 Alpha展示效果驚艷,已經超越了Sora。而Sora自發(fā)布以來一直未能公開使用,為其他視頻生成模型留下了發(fā)展空間。

視頻生成技術的競爭進入加速階段,市場預測顯示,人工智能將主導數(shù)字內容創(chuàng)作,AI生成內容的市場規(guī)模也將大幅增長。未來,視頻生成領域的競爭將更加激烈,重點將圍繞落地應用和商業(yè)化展開。

行業(yè)中的變革與競爭共同推動著視頻生成領域的發(fā)展,讓我們拭目以待,期待更多創(chuàng)新技術的涌現(xiàn)。

熱門課程推薦

熱門資訊

請綁定手機號

x

同學您好!

您已成功報名0元試學活動,老師會在第一時間與您取得聯(lián)系,請保持電話暢通!
確定