Adobe重磅官宣:OpenAI視頻模型Sora與Premiere Pro合體,剪輯師喜獲最強(qiáng)AI工具
重磅!今年最令人矚目的視頻大模型Sora終于來了。
沒等到OpenAI官宣上線,卻迎來了Adobe官宣合作。
4月16日,Adobe官方發(fā)文稱,包括Adobe Firefly自研模型,以及OpenAI Sora、Runway Gen-2、Pika一系列的第三方視頻模型,都將在剪輯師們必備的Adobe Premiere Pro剪輯軟件上推出。
一大批網(wǎng)友激動(dòng)表示:終于可以用上Sora了,而且是在最熟悉的工作流當(dāng)中。
根據(jù)官方發(fā)布的演示視頻,借助一系列的AI視頻模型,可以在Adobe Premiere Pro內(nèi)實(shí)現(xiàn)諸多的視頻生成能力。
這也意味著,廣大的剪輯師無需重新學(xué)習(xí)構(gòu)建新的工作流,可以輕松在Adobe的生態(tài)內(nèi)繼續(xù)創(chuàng)作。
也不用擔(dān)心丟失既有的技能與工作崗位,實(shí)屬超級(jí)福音!
下邊讓我們看一下AI介入Pr視頻剪輯的實(shí)戰(zhàn)案例:
在剪輯工作臺(tái)窗口內(nèi),用鼠標(biāo)拉出一段留白片段。然后在Model下拉選項(xiàng)卡選擇「OpenAI」的模型。再輸入提示詞:「一位男子走向窗前,正在看整座城市的夜景」。
Sora出戰(zhàn)后,Duang的一下——立即根據(jù)文本生成了一段“雨夜城市”的視頻。
下邊我們換成Runwa的Gen-2模型,依樣畫葫蘆,可以輕松一鍵生成以駕駛員視角在車內(nèi)觀望雨夜的視頻片段。
我們?cè)谶^去的經(jīng)驗(yàn)里邊知道,Pika的視頻模型更擅長(zhǎng)生成人物表情神態(tài)。
那我再借助Pika生成一段男主的特寫鏡頭視頻,鏡頭劇本轉(zhuǎn)場(chǎng)非常絲滑。
Adobe為我們演示了如何通過多個(gè)AI視頻模型搭配創(chuàng)作,完成一段有劇情的AI視頻。
當(dāng)視頻生產(chǎn)力工具大廠與AI大模型研發(fā)公司強(qiáng)強(qiáng)聯(lián)手,將為萬千視頻內(nèi)容創(chuàng)作者帶來無窮的樂子!
此外,除了內(nèi)置第三方的AI視頻模型生成工具之外,Adobe還發(fā)布了一系列針對(duì)Premiere Pro的AI新功能。
比如AI自動(dòng)添加對(duì)象、AI移除指定對(duì)象,以及視頻內(nèi)容AI自動(dòng)創(chuàng)意擴(kuò)展長(zhǎng)度的能力。這些能力可基于Adobe自研的Firefly模型實(shí)現(xiàn)。
比如下圖所示,將女主的打底衫顏色由深色變?yōu)榘咨?/p>
為男主的白襯衫加上一條精致的領(lǐng)帶;將手表?yè)Q一個(gè)款式等等。
再比如,鼠標(biāo)選定一個(gè)區(qū)域,將稀稀拉拉的鉆石,一鍵變成滿滿的一箱子寶石。
或者快速移除視頻內(nèi)多余的物體,就像移除照片路人甲一樣簡(jiǎn)單。
還有更離譜的“懶人”玩法,為視頻原片自動(dòng)延長(zhǎng)幾秒鐘的片段。
Adobe為我們展示了下一代AI視頻創(chuàng)作工具的工作流形態(tài)。
根據(jù)官方的數(shù)字,目前Premiere Pro在全球有3300萬的付費(fèi)用戶,將對(duì)數(shù)字視頻產(chǎn)業(yè)帶來全面性與革命性的變化。
看到這里不得不潑一盆冷水。
盡管Adobe官宣與各大AI視頻工具開發(fā)商達(dá)成戰(zhàn)略級(jí)合作,但是第三方的AI視頻模型何時(shí)集成到Premiere Pro,具體時(shí)間表還未知。
根據(jù)此前OpenAI CTO穆拉蒂接受《華爾街日?qǐng)?bào)》專訪時(shí)透露的訊息,該公司有意避開美國(guó)總統(tǒng)大選的周期,因此很可能會(huì)拖延到今年年底推出Sora。
Adobe官方表示,嵌入第三方AI視頻工具是為了給廣大Premiere Pro用戶提供更多的個(gè)性化選擇。幫助剪輯師為項(xiàng)目生成B-roll輔助性空鏡時(shí),可以很輕松地獲得片段素材。
前谷歌產(chǎn)品經(jīng)理Bilawal Sidhu對(duì)此表示,強(qiáng)強(qiáng)聯(lián)手對(duì)創(chuàng)作者來說非常棒,真正想更好地利用AI視頻模型做出杰作,就需要將它們引入一款熟悉的視頻編輯工具。
大概在上周,網(wǎng)上突然爆出Adobe的“丑聞”,該公司的Firefly大模型是在Midjourney生成的圖像上完成訓(xùn)練的。
為此,Adobe宣布,將以3美元/分鐘的價(jià)格向Midjourney采購(gòu)AI視頻片段,用于訓(xùn)練下一代的AI視頻模型。
Adobe方面希望能訓(xùn)練出媲美Sora的視頻模型,可以通過提示詞生成長(zhǎng)達(dá)60秒的片段。為此,該公司還向廣大藝術(shù)家線上公開征集素材,每條采納的視頻支付120美元的報(bào)酬。
在去年,Adobe曾向藝術(shù)家們采購(gòu)圖像素材,每張照片支付大約6~16美分,用于訓(xùn)練AI文生圖模型。
未來,向大廠出售大模型訓(xùn)練數(shù)據(jù)集,或許也會(huì)成為一個(gè)內(nèi)卷的買賣。