2024-01-19 17:50
AI視頻可控性里程碑：Runway Gen-2上線「多重運(yùn)動(dòng)筆刷」大量實(shí)戰(zhàn)案例：一鍵可讓五個(gè)物體以不同形式運(yùn)動(dòng)
今年，2024年，真的是妥妥的AI視頻爭(zhēng)霸賽了。
當(dāng)?shù)貢r(shí)間1月18日，Runway上線了它的新功能：多重運(yùn)動(dòng)筆刷，這個(gè)功能可以單獨(dú)控制最多五個(gè)筆刷選定的區(qū)域。
這個(gè)功能乍看起來(lái)仿佛平平無(wú)奇，似乎只是針對(duì)之前的運(yùn)動(dòng)筆刷做了個(gè)升級(jí)。但是經(jīng)常玩AI視頻的童鞋其實(shí)都知道，這解決了一個(gè)超級(jí)大痛點(diǎn)！
大家都知道，幾乎等同于AI繪畫里的ControlNet！之前的運(yùn)動(dòng)筆刷雖然好，但是大家都知道，真實(shí)的場(chǎng)景是不會(huì)只有一個(gè)運(yùn)動(dòng)方向的，這樣做出來(lái)的視頻僵硬且假。但是運(yùn)動(dòng)筆刷是基于圖片生成視頻的，無(wú)法針對(duì)生成的視頻再次進(jìn)行局部運(yùn)動(dòng)調(diào)整。這次的更新解決了很大的一部分需求。
有哪些玩法呢？我挖掘了一下，大概有如下幾種：
我們先來(lái)看一下他們的官方宣傳視頻：
在這個(gè)新的操作界面五個(gè)筆刷用五種不同的顏色表示，每個(gè)筆刷都可以單獨(dú)調(diào)整運(yùn)動(dòng)的方向和性質(zhì)。在定向運(yùn)動(dòng)里我發(fā)現(xiàn)還有個(gè)小功能之前沒(méi)有的，就是加了個(gè)環(huán)境噪音，應(yīng)該就是添加一些隨機(jī)的運(yùn)動(dòng)。
多重運(yùn)動(dòng)筆刷應(yīng)該怎么用？
我找了下面這些實(shí)際案例。
有人通過(guò)分別控制物體的運(yùn)動(dòng)方向來(lái)實(shí)現(xiàn)更加逼真的子彈時(shí)間。
通過(guò)控制幾股不同的水流方向，來(lái)實(shí)現(xiàn)逼真的溺水效果。
控制背景的區(qū)域運(yùn)動(dòng)來(lái)實(shí)現(xiàn)鏡頭景深空間效果。
甚至可以通過(guò)分別控制面部的運(yùn)動(dòng)方向來(lái)實(shí)現(xiàn)一些表情動(dòng)畫。
這個(gè)真的太棒了，在此之前有人借助ComfyUI+AnimateDiff實(shí)現(xiàn)PromptTravel（人物頭部表情控制微調(diào)模型）來(lái)控制人物表情動(dòng)作，但是效果遠(yuǎn)沒(méi)有這個(gè)好。
不僅可以控制面部運(yùn)動(dòng)，還可以控制肢體運(yùn)動(dòng)。
讓一只快樂(lè)的草原小狗動(dòng)起來(lái)的動(dòng)畫。
當(dāng)人物大于等于兩個(gè)的時(shí)候，就可以摁頭Kiss啦。
來(lái)欣賞這位作者的作品：
當(dāng)有多個(gè)動(dòng)物的頭像需要運(yùn)動(dòng)的時(shí)候，可以營(yíng)造出輕松熱鬧的場(chǎng)景。
相信未來(lái)還會(huì)有諸多更牛的玩法有待解鎖，歡迎大家在評(píng)論區(qū)指出。
相關(guān)文章
Kardashian
Altman
