PAI ArtLab高清修復(fù)的三種方式
本文為您介紹如何使用PAI ArtLab進(jìn)行高清修復(fù)。
背景信息
Stable Diffusion v1默認(rèn)圖像大小為512×512像素圖像,在當(dāng)前高清標(biāo)準(zhǔn)下顯得分辨率不足。以iPhone 12為例,其攝像頭能產(chǎn)生高達(dá)1200萬像素的照片(4,032×3,024像素),屏幕分辨率更是達(dá)到了2,532x1,170像素,因此未縮放的穩(wěn)定擴(kuò)散圖像需要放大并且看起來質(zhì)量較低。
在進(jìn)行文生圖創(chuàng)作流程時(shí),為了適應(yīng)GPU內(nèi)存限制并加快迭代速度,用戶通常會(huì)選擇較低分辨率設(shè)置批量生成候選圖像。
當(dāng)最終找到滿意的設(shè)計(jì)構(gòu)圖后,卻發(fā)現(xiàn)圖像缺乏精細(xì)度和足夠的分辨率。針對(duì)這一問題,我們可以利用AI upscaler、SD upscale,ControlNet tile upscale有效地對(duì)圖像進(jìn)行高清增強(qiáng)與細(xì)節(jié)豐富處理。
前提條件
如果您使用ControlNet tile upscale方式,請(qǐng)先安裝Ultimate SD Upscale和ControlNet擴(kuò)展。
安裝擴(kuò)展
ArtLab已預(yù)置了ControlNET插件,需要您自行安裝擴(kuò)展內(nèi)容,具體操作如下。
進(jìn)入擴(kuò)展>從網(wǎng)址安裝。
在擴(kuò)展的git倉庫網(wǎng)址中填入
https://github.com/Coyote-A/ultimate-upscale-for-automatic1111
。
單擊安裝,等待表示擴(kuò)展已成功安裝的確認(rèn)消息。
在已安裝頁簽中,勾選ultimate-upscale-for-automatic1111,并單擊應(yīng)用更改并重載前端。
更新完成后,您可以圖生圖頁面底部的腳本下拉菜單中看到Ultimate SD upscale。
AI Upscaler
進(jìn)入后期處理頁面,上傳要處理的圖像。
關(guān)鍵參數(shù)設(shè)置如下:
縮放比例:4
Upscaler 1:根據(jù)具體場(chǎng)景選擇。
查看生成效果。
SD Upscale
在使用AI Upscale時(shí),您可能會(huì)觀察到AI在修復(fù)的同時(shí)引入了一些額外的畫面變化,為了解決這個(gè)問題并確保畫面精確度,您可以再進(jìn)行一輪圖像到圖像的轉(zhuǎn)換,重新構(gòu)建細(xì)節(jié)。這種方法的優(yōu)勢(shì)在于,它可以借助同一模型及提示信息,生成與原始設(shè)計(jì)相匹配的細(xì)節(jié)
進(jìn)入圖生圖頁面,上傳圖像。
輸入原提示和否定提示。如果沒有原來的提示,您可以使用perfect之類的通用描述詞。
說明替代方案1:如果您剛剛在文生圖頁面上生成圖像,請(qǐng)單擊發(fā)送到 文生圖,圖像和提示將自動(dòng)填充。
替代方案2:如果您的本地存儲(chǔ)中保存了生成的圖像,則可以將其上傳到PNG信息頁面。您可以看到生成此圖像的所有信息,包括提示和模型。單擊發(fā)送到 圖生圖,圖像和提示將自動(dòng)填充。
關(guān)鍵參數(shù)設(shè)置如下:
寬度:512(用于SD升級(jí)的平鋪尺寸)
高度:512(用于SD升級(jí)的平鋪尺寸)
重繪幅度:0.3(較高的值將導(dǎo)致更多的發(fā)散性的細(xì)節(jié)和恢復(fù))
查看生成效果。
ControlNet Tile Upscale
ControlNet Tile Upscale是用于重新生成圖像細(xì)節(jié)的ControlNet模型,適合在圖塊中進(jìn)行升級(jí),因此它可以在低顯存設(shè)置下使用。
進(jìn)入圖生圖頁面,上傳圖像。
輸入正向Prompt和負(fù)向Prompt。
說明替代方案1:如果您剛剛在文生圖頁面上生成了圖像,則可以單擊發(fā)送到 圖生圖,圖像和提示將自動(dòng)填充在圖生圖頁面上。
替代方案2:如果您的本地圖像中保存了生成的圖像,請(qǐng)將其上傳到PNG信息頁面。您可以看到生成此圖像的所有信息,包括提示和模型。單擊發(fā)送到 圖生圖,圖像和提示將自動(dòng)填充在圖生圖頁面上。
關(guān)鍵參數(shù)設(shè)置如下:
迭代步數(shù):50
重繪幅度:0.5
進(jìn)入ControlNet,并上傳相同的原始圖像。關(guān)鍵參數(shù)設(shè)置如下:
勾選啟用
預(yù)處理器:tile_resample
模型:control_v…_sd15_tile
腳本:Ultimate SD Upscale
Target size type:選擇Scale from image size,尺度為4。
分塊寬度:512
分塊寬度:0
單擊生成。