在最近新上線的controlnet模型中，除了我們之前測試過的一眾適配sdxl的模型以外，還增加了一款名為Recolor的新模型，它的作用是可以將黑白的圖片進(jìn)行重新上色。
看到這個功能，我首先想到的就是可以用它來修復(fù)那些已經(jīng)年代久遠(yuǎn)的老照片。畢竟在以前那個年代，沒有現(xiàn)在這種可以永遠(yuǎn)保存的數(shù)碼拍照技術(shù)，很多洗出來的照片也都隨著歲月的流逝而褪去了色彩。如果能用AI技術(shù)恢復(fù)這些往日的時光，也許能喚醒我們心底的一些溫暖。
于是，我聯(lián)系爸媽幫我找來了一些他們珍存的照片。他們也很熱心于這件事情，立馬給我發(fā)來了一大堆照片，其中有很多我也沒見過的他們年輕的時候的樣子，還包括我爺爺奶奶外公外婆那一輩的回憶。雖然很多照片都是黑白的，但是仍然能感受到那個時候的陽光和清風(fēng)。
這是我的奶奶，她離開已經(jīng)有十幾年了，年輕時候留下的照片不多，這一張算是保存得很好的了，那個年代的人物照片總能讓人感受到一種獨(dú)特的氣質(zhì)。
既然是人物照片的還原，我這里就選擇了realisian的寫實(shí)大模型。提示詞直接描述顏色和對應(yīng)的內(nèi)容。比如黑色的頭發(fā)、黃色的皮膚、深藍(lán)色的衣服、淺藍(lán)色的背景。因?yàn)楹诎渍掌?，顏色無從判斷，所以有些只能靠猜測了。
ControlNet這里選擇Recolor，預(yù)處理器有兩個，經(jīng)過我的測試，選擇“recolor_luminance”的效果會更好一些。
但是僅僅這樣是不夠的，從渲染的結(jié)果上我發(fā)現(xiàn)，顏色并不是精準(zhǔn)地出現(xiàn)在我們想要的位置上的，提示詞之間會出現(xiàn)相互的污染。而且由于照片上斑駁的痕跡，即使是背景也不能夠做到完全統(tǒng)一，看來事情并沒有我想象的那么簡單。
為了做到顏色與內(nèi)容的統(tǒng)一，我啟用了之前講到過的一款cutoff插件來進(jìn)行控制，依次按順序設(shè)置好顏色提示詞，
終于得到了一張配色正確的照片，但是還沒有完，由于以前的照片像素比較低，接下來我準(zhǔn)備將它變得更高清一點(diǎn)。
將照片放入到后期處理中，使用GFPGAN算法將人臉變清晰
這個步驟，可以將我們的五官進(jìn)行重繪，但是卻沒有辦法將照片中的頭發(fā)、衣服等其他元素變清晰。
所以，接下來我將圖片再發(fā)送到圖生圖當(dāng)中，打開stableSR腳本，放大兩倍。這個放大插件是所有插件中對原圖還原最精準(zhǔn)的，也是重繪效果最好的，
切換到sd2.1的模型進(jìn)行修復(fù)，vae選擇vqgan，提示詞可以什么都不寫，以免對原圖產(chǎn)生干擾。
啟用MutiDiffusion插件，不開放大倍數(shù)，僅使用分塊渲染的功能，能幫助我們在顯存不夠的情況下，將圖片放大到足夠的倍數(shù)。
好了，經(jīng)過一頓操作，我們就將這張圖片處理完成了。
對比一下看看，之前的黑白照片和經(jīng)過上色高清化完成之后效果。
同樣的步驟，又還原了一張我媽媽的照片。在問到她當(dāng)時穿的什么顏色衣服的時候，她記得可清楚了，想都沒想就告訴我說是綠色的。
比如這一張，是我外公外婆帶著我媽和我舅舅。外公走得更早，我甚至都沒見過一面，只有這些照片還記錄著他存在的痕跡。而這張照片也有些年頭了，一直被外婆好好保存著。人物多、場景復(fù)雜，像素非常的低，使得這張照片處理起來難度很大。
我首先在ps里面進(jìn)行了一下角度的調(diào)整和照片的裁切，然后使用剛才的步驟進(jìn)行上色，但是直接上色的結(jié)果有點(diǎn)像是加了一層黃色濾鏡，有顏色但是年代感還是太強(qiáng)了。
而太具體的顏色指定，又容易讓畫面污染嚴(yán)重，因?yàn)閮?nèi)容實(shí)在太多了，光是指定衣服就得十來個顏色提示詞，AI能分辨得清才怪。
所以我決定放棄人物服裝的顏色指定，只給一個場景方向，剩下的交給AI去自行決定。于是，我從網(wǎng)上找到了一張仙人洞的照片，讓AI去幫我匹配色調(diào)。
加入第二個controlnet來控制顏色，使用的是t2ia_color的模型。
關(guān)鍵詞只給了：藍(lán)天、綠樹、灰石磚這么簡單的幾個詞。
顏色終于正常了，最后經(jīng)過臉部的修復(fù)和放大，得到了最終的效果。
對比一下前后的效果，那個流逝的時光仿佛又回來了，外婆看到后也非常高興，在微信上連連夸贊。
同樣難度的還有這張照片，是外婆帶著我媽和舅舅拍的合影，應(yīng)該是在影棚里拍的，背景是張畫。這張照片的難點(diǎn)主要還是內(nèi)容太多了，無法一一指定顏色，所以我只能逐個上色，再用ps進(jìn)行融合。
看著這些老照片一張一張的翻新，思緒也會沉浸在某段時光里。也許不曾去過，但又總覺得似曾相識；也許相隔遙遠(yuǎn)，但又覺得觸手可及。
掃一掃，關(guān)注作者公眾號
stable diffusion、Blender等學(xué)習(xí)心得分享
2023-09-10 09:42
Kardashian
Altman
