文|獵云網(wǎng) 王非
AIGC邁入視頻時(shí)代。
正如互聯(lián)網(wǎng)內(nèi)容從圖文向視頻升維一樣，AIGC時(shí)代，文生文、文生圖、文生音視頻的升級(jí)，也在快速推進(jìn)中。
國(guó)內(nèi)有百度的CreateLab，阿里達(dá)摩院的“文本生成視頻大模型”，國(guó)外則有谷歌的Imagen和Meta的做個(gè)視頻（Make-A-Video）。
近日，被譽(yù)為視頻版Midjourney的Runway，其開(kāi)發(fā)的AI視頻編輯工具Gen，也已經(jīng)從2月份的第一代升級(jí)到了第二代，并且從內(nèi)測(cè)轉(zhuǎn)為正式發(fā)布。
最重要的是，Gen-2可以免費(fèi)試用。
來(lái)源：Runway
根據(jù)Runway官方調(diào)研數(shù)據(jù)，Gen-2的用戶得分比Stable Diffusion 1.5要高73.53%，比Text2Live則高上了88.24%。
值得一提的是，就在Runway收獲一水好評(píng)的同時(shí)，與其頗有淵源的競(jìng)對(duì)Stability AI，卻遭遇“暴力拆解”。福布斯羅列出了后者的九大罪狀，包括“竊取”源代碼、創(chuàng)始人學(xué)歷造假、拖欠工資等。
隨后，Stability AI創(chuàng)始人火速回應(yīng)，基本進(jìn)行了一一回應(yīng)。但是，部分網(wǎng)友并不買賬，直言其沒(méi)有澄清一些很關(guān)鍵的點(diǎn)。
一句話拍小電影，可免費(fèi)體驗(yàn)105秒
Runway成立于2018年，是一家美國(guó)圖片和視頻AI編輯軟件提供商，為設(shè)計(jì)師、藝術(shù)家和開(kāi)發(fā)人員提供一系列的工具和平臺(tái)，幫助他們利用人工智能技術(shù)創(chuàng)建作品。
據(jù)稱，斯蒂芬-科爾伯特主持的《深夜秀》的制作人使用Runway軟件來(lái)編輯節(jié)目畫(huà)面；電影《瞬息全宇宙》的視覺(jué)效果團(tuán)隊(duì)利用Runway公司的技術(shù)創(chuàng)建了一些場(chǎng)景。
今年2月，Runway發(fā)布了名為Gen-1的人工智能模型，可以通過(guò)應(yīng)用文本提示或者參考圖像所指定的任意風(fēng)格，將現(xiàn)有視頻轉(zhuǎn)換為新視頻。
僅僅隔了一個(gè)多月，Runway于3月20日正式發(fā)布了更加強(qiáng)大的Gen-2，完成了從“編輯已有視頻”，到“文生視頻“的轉(zhuǎn)變，并且提供文本+參考圖像生視頻、靜態(tài)圖片轉(zhuǎn)視頻、視頻風(fēng)格遷移等多個(gè)功能。
來(lái)源：Runway
官方的宣傳視頻是這樣的：
來(lái)源：Runway
目前，可以在Runway網(wǎng)頁(yè)端和其iOS版本上免費(fèi)體驗(yàn)Gen-2。
Gen-2每次生成的視頻限定為4秒鐘，Runway提供有105秒的免費(fèi)試用額度，用戶最終可免費(fèi)生成約26個(gè)視頻。
如果想要繼續(xù)使用Gen-2，用戶需要購(gòu)買會(huì)員，Runway還將提供去除水印、提升分辨率等功能。
定價(jià)方面，標(biāo)準(zhǔn)版會(huì)員15美元/月，Pro版會(huì)員35美元/月，年費(fèi)會(huì)員可以打8折。
據(jù)報(bào)道，推特網(wǎng)友Steve Mills已經(jīng)在Gen-2測(cè)試版中體驗(yàn)了它的潛在能力——生成MV。這名用戶總共生成了大約500秒的視頻，并最終剪輯成了140秒的MV。
該作者估計(jì)，如果按公開(kāi)版的價(jià)格，整個(gè)制作下來(lái)至少要花費(fèi)30美元。再加上之前的學(xué)習(xí)和摸索階段，這個(gè)價(jià)格還會(huì)更高。
Runway CEO兼聯(lián)合創(chuàng)始人Cristóbal Valenzuela在Gen-1發(fā)布時(shí)就曾表示：“我們?cè)?jiàn)證過(guò)圖像生成模型的大爆發(fā)，我堅(jiān)信2023年會(huì)是屬于視頻生成模型的一年?！?/p>
正如Runway的Slogan，已經(jīng)從“say it，see it”，轉(zhuǎn)變?yōu)榱耍篒f you can imagine it ,you can generate it.
在用戶登錄界面，Runway則寫(xiě)道：“Everything you need to make anything you want”，你想要的（工具），我都有。
過(guò)去幾年里，Runway從包括Felicis、Coatue、Amplify、Lux和Compound在內(nèi)的頂級(jí)投資者那里籌集了資金。
就在本月初，有兩名知情人士透露，谷歌對(duì)Runway進(jìn)行了投資，包括這筆新資金在內(nèi)，該公司的估值達(dá)到了15億美元。
與Runway頗有淵源的競(jìng)對(duì)，剛剛遭福布斯“暴力拆解”
就在Runway一切順風(fēng)順?biāo)l(fā)展的同時(shí)，與其頗有淵源，且同為AIGC獨(dú)角獸的Stability AI，卻是諸事不順。
比如在融資層面，2022年10月，Stability AI完成了1.01億美元融資，躋身獨(dú)角獸行列。
隨后，Stability AI創(chuàng)始人Emad Mostaque（伊瑪?shù)隆つ顾耍┮恢痹谂ο胍源蠹s40億美元的估值再融資數(shù)億美元，但是進(jìn)展不順。
就在近日，福布斯發(fā)布一則長(zhǎng)新聞“暴力拆解”Stability AI，通過(guò)30多位前員工+投資人現(xiàn)身說(shuō)法，細(xì)數(shù)該公司及其創(chuàng)始人伊瑪?shù)碌木糯笞镒C。
除了融資困難遭投資人懷疑，還包括：“竊取”源代碼、拖欠工資且不交稅、創(chuàng)始人學(xué)歷造假、創(chuàng)始人工作經(jīng)歷造假、夸大公司收入、夸大與亞馬遜的合作、碰瓷世衛(wèi)組織及世界銀行等機(jī)構(gòu)、涉及版權(quán)官司。
針對(duì)福布斯羅列的九大罪狀，伊瑪?shù)禄鹚龠M(jìn)行了相關(guān)回應(yīng)，但是部分網(wǎng)友仍不認(rèn)可，直言他并未完全澄清。
下面，以“竊取”源代碼為例，看看福布斯筆下Stability AI的真實(shí)模樣：
Stability AI曾因推出AI圖像生成器Stable Diffusion，獲得廣泛關(guān)注。
據(jù)悉，這一模型的核心代碼是由慕尼黑大學(xué)、海德堡大學(xué)和Runway的一組研究人員共同完成，最初被命名為L(zhǎng)atent Diffusion，僅使用了幾十個(gè)英偉達(dá)GPU進(jìn)行了相關(guān)訓(xùn)練。
2022年6月，伊瑪?shù)绿岢鱿蜻@群學(xué)者提供Stability的超級(jí)計(jì)算機(jī)，給他們訓(xùn)練模型。僅僅兩個(gè)月后，被改進(jìn)后的新模型Stable Diffusion正式推出。
在Stability AI發(fā)布的新聞稿中，將伊瑪?shù)路Q為“有史以來(lái)最受歡迎的開(kāi)源軟件”的首席布道者。隨后，該公司還在籌款平臺(tái)中表示，“Stability AI是Stable Diffusion背后的公司”、“它是我們的模型”，根本沒(méi)有提到Runway等作者。
領(lǐng)導(dǎo)這一研究的教授Bj rn Ommer表示，本來(lái)他是希望借此可以宣傳他實(shí)驗(yàn)室所做的工作，只是在Stable Diffusion對(duì)外發(fā)布時(shí)，他所在大學(xué)的整個(gè)新聞部門都在休假。
針對(duì)這一質(zhì)疑，伊瑪?shù)抡J(rèn)為“其實(shí)不需要做過(guò)多的解釋”，因?yàn)楣疽呀?jīng)多次公開(kāi)聲明，Stability AI與慕尼黑大學(xué)、Runway的計(jì)算機(jī)和視覺(jué)學(xué)習(xí)小組一起開(kāi)發(fā)了Stable Diffusion的第一個(gè)版本。自Stable Diffusion發(fā)布以來(lái)，這一合作的細(xì)節(jié)一直在CompVis下的GitHub和Stability AI的網(wǎng)站上公開(kāi)分享。
不過(guò)，Stability AI的聲明中似乎忽略了海德堡大學(xué)。
此外，Latent Diffusion&Stable Diffusion的五位作者中，有三位現(xiàn)在在Stability AI工作，其中兩位是共同第一作者。
值得一提的是，Runway在2022年的10月份，緊隨其后發(fā)布了新版本的Stable Diffusion。
得悉此事的Stability AI聲稱Runway竊取了自己的知識(shí)產(chǎn)權(quán)，而這也引發(fā)后者創(chuàng)始人Cristóbal Valenzuela回懟：“這項(xiàng)技術(shù)是開(kāi)源的，根本不存在侵犯版權(quán)的可能?！?/p>
來(lái)源：量子位
隨后，伊瑪?shù)鲁坊亓酥缚兀?duì)福布斯編輯解釋道，自己其實(shí)是擔(dān)心Runway的模型版本缺乏護(hù)欄。
目前，Bj rn Ommer的實(shí)驗(yàn)室和Runway都停止了與Stability AI的合作。
此外，伊瑪?shù)略谌ツ甑耐顿Y者介紹中，更是將Midjourney描述為Stability AI“生態(tài)系統(tǒng)”的一部分：“共同創(chuàng)造”了該產(chǎn)品并“組織”了其用戶社區(qū)。
但Midjourney創(chuàng)始人告訴福布斯，伊瑪?shù)轮皇翘峁┝恕胺浅Ｐ 钡囊徊糠重?cái)務(wù)捐贈(zèng)，除此之外與Midjourney沒(méi)有任何關(guān)系。
兩家昔日競(jìng)對(duì)，發(fā)展到如今局面，確實(shí)令人唏噓，后續(xù)我們也將密切關(guān)注兩家的最新進(jìn)展。