美圖公司上架AI數(shù)字人生成工具DreamAvatar:任意替換數(shù)字人角色,一鍵生成10秒短視頻
近日,美圖公司旗下AI數(shù)字人生成工具DreamAvatar上線,第一版推出“AI演員”數(shù)字人生成服務(wù)。以AI驅(qū)動(dòng)為核心,服務(wù)于視頻內(nèi)容創(chuàng)作、影視處理與剪輯等生產(chǎn)力場(chǎng)景。雖然DreamAvatar的“AI演員”功能是美圖在影視行業(yè)的初次嘗試,但是在影視行業(yè),數(shù)字人的應(yīng)用已經(jīng)相當(dāng)普遍,且都是剛需。
DreamAvatar — 美圖
美圖公司打造的AI數(shù)字人生成工具 ,通過數(shù)字人技術(shù)應(yīng)用幫助內(nèi)容生產(chǎn)者創(chuàng)作更高效,更有趣。
數(shù)字人主要用于代替或者輔助真人演員,實(shí)現(xiàn)變臉、變形等一些難以或者無(wú)法用真人完成的效果。比如在電影《復(fù)仇者聯(lián)盟4:終局之戰(zhàn)》中,鋼鐵俠的數(shù)字人替代了真人演員在太空中的戲份。
當(dāng)下,數(shù)字人的生成分為CG和AI兩條技術(shù)路線,但CG技術(shù)生成的數(shù)字人比AI技術(shù)生成的數(shù)字人成本更高。根據(jù)公開資料顯示,傳統(tǒng)的CG影視做特效人物,不僅需要專業(yè)的設(shè)備投入,還需要花費(fèi)大量的時(shí)間和預(yù)算。如一個(gè)普通的機(jī)器人、怪獸特效,往往需要幾周甚至幾個(gè)月的時(shí)間,花費(fèi)高達(dá)幾萬(wàn)到幾十萬(wàn)美元不等的費(fèi)用。而AI技術(shù)利用深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò),無(wú)需人工參與和干預(yù),可以自動(dòng)化生成高質(zhì)量和多樣化的數(shù)字人,從而節(jié)省了人力和時(shí)間成本。
DreamAvatar“AI演員”數(shù)字人的生成,不需要專業(yè)設(shè)備,一臺(tái)手機(jī)就能輕松搞定。用戶只需要將拍攝好的視頻素材導(dǎo)入,并指定視頻里的人物,剩下的一切都交給AI來(lái)操作。AI會(huì)進(jìn)行人體檢測(cè)、跟蹤、擦除、替換,以及背景修復(fù),自動(dòng)把真人替換成數(shù)字人。
利用3D人體姿態(tài)估計(jì)和驅(qū)動(dòng)算法,DreamAvatar的AI演員能夠做到動(dòng)作與真人完美同步;AI還會(huì)并行通過相機(jī)姿態(tài)估計(jì)和跟蹤,以及光照估計(jì)算法,讓數(shù)字人和環(huán)境自然融合,更具真實(shí)感。
最后,將前面這一系列AI的處理,匯總到3D渲染并輸出,AI演員的特效大片就誕生了。
目前,DreamAvatar“AI演員”已經(jīng)在蘋果App Store與國(guó)內(nèi)安卓手機(jī)廠商各大應(yīng)用商店上架。App支持最長(zhǎng)10秒視頻的轉(zhuǎn)化,共推出了機(jī)器人、獸人、類人三大題材共計(jì)11個(gè)不同風(fēng)格的數(shù)字人形象,每個(gè)題材從造型風(fēng)格、渲染風(fēng)格都做了不同方向的細(xì)化,以給到用戶多樣性的體驗(yàn)和選擇。
DreamAvatar“AI演員”的功能極大提高視頻創(chuàng)作的效率,將原本以天為單位的制作周期,縮減到小時(shí)級(jí),同時(shí)省去了專業(yè)設(shè)備成本和建模渲染等人力成本,提高生產(chǎn)運(yùn)營(yíng)效率的同時(shí),做到降本增效。不止是專業(yè)用戶,大眾用戶也能借助DreamAvatar的“AI 演員”功能輕松創(chuàng)作數(shù)字人的視頻大片。
未來(lái),DreamAvatar會(huì)繼續(xù)探索數(shù)字人+AIGC的落地場(chǎng)景,拓展使用場(chǎng)景,服務(wù)更多的行業(yè)。
作者簡(jiǎn)介
關(guān)注我,學(xué)習(xí)更多AIGC視覺創(chuàng)作
美圖飲水機(jī)看守員
好的工具,自己會(huì)說話