基于函數(shù)計(jì)算快速部署可切換模型的Stable Diffusion
本文介紹如何通過函數(shù)計(jì)算搭建可切換模型的Stable Diffusion,實(shí)現(xiàn)更高質(zhì)量的圖像生成。
背景信息
AIGC(Artificial Intelligence Generated Content)是指人工智能生成內(nèi)容。Stable Diffusion是一個(gè)可通過文本生成圖像的擴(kuò)散模型,基于CLIP模型從文字中提取隱變量,并通過UNet模型生成圖片;最后通過逐步擴(kuò)散、逐步處理圖像,優(yōu)化圖像質(zhì)量。
在實(shí)際使用過程中,需要切換不同的模型生成圖片。本文為您介紹如何基于函數(shù)計(jì)算快速部署可切換模型的Stable Diffusion。
阿里云不對(duì)第三方模型的合法性、安全性、準(zhǔn)確性進(jìn)行任何保證,阿里云不對(duì)由此引發(fā)的任何損害承擔(dān)責(zé)任。
您應(yīng)自覺遵守第三方模型的用戶協(xié)議、使用規(guī)范和相關(guān)法律法規(guī),并就使用第三方模型的合法性、合規(guī)性自行承擔(dān)相關(guān)責(zé)任。
前提條件
已開通函數(shù)計(jì)算服務(wù),詳情請參見開通函數(shù)計(jì)算服務(wù)。
操作步驟
部署可切換模型的Stable Diffusion,需要使用函數(shù)計(jì)算及文件存儲(chǔ)NAS,在這兩部分會(huì)產(chǎn)生相關(guān)費(fèi)用。具體信息,請參見費(fèi)用說明。
關(guān)于部署Stable Diffusion并使用模型生成圖片的流程如下:
步驟一:創(chuàng)建應(yīng)用
登錄函數(shù)計(jì)算控制臺(tái),在左側(cè)導(dǎo)航欄,單擊應(yīng)用。
如果您首次使用函數(shù)計(jì)算的應(yīng)用中心,或您的賬號(hào)下沒有創(chuàng)建任何應(yīng)用,在左側(cè)導(dǎo)航欄,單擊應(yīng)用后,將自動(dòng)進(jìn)入創(chuàng)建應(yīng)用頁面。
如果您之前使用過應(yīng)用中心,在左側(cè)導(dǎo)航欄,單擊應(yīng)用,然后在應(yīng)用頁面單擊創(chuàng)建應(yīng)用。
在創(chuàng)建應(yīng)用頁面,選擇通過模板創(chuàng)建應(yīng)用,然后在應(yīng)用列表中搜索并選擇AI數(shù)字繪畫stable-diffusion自定義模型版,光標(biāo)移至該卡片,然后單擊立即創(chuàng)建。
在創(chuàng)建應(yīng)用頁面,設(shè)置以下配置項(xiàng),然后單擊創(chuàng)建應(yīng)用。
主要配置項(xiàng)說明如下,其余配置項(xiàng)保持默認(rèn)值即可。
配置項(xiàng)
說明
示例值
地域
選擇部署應(yīng)用的地域。
說明由于Hugging Face網(wǎng)站訪問不穩(wěn)定,部分Stable Diffusion插件存在檢查模型更新的邏輯,在國內(nèi)使用這類插件可能會(huì)遇到啟動(dòng)、出圖時(shí)間慢,及無法出圖等問題。如果您遇到上述問題,可以考慮在日本(東京)地域部署Stable Diffusion。
日本(東京)
繪圖類型
根據(jù)需要選擇繪圖類型,應(yīng)用中心內(nèi)置了SD1.5、動(dòng)漫風(fēng)格、真人風(fēng)格和輕量版的繪圖類型。
動(dòng)漫風(fēng)格
角色名稱
首次登錄用戶,需要單擊前往授權(quán)配置角色權(quán)限。
如果您的角色名稱已有相關(guān)權(quán)限,則無需設(shè)置。
AliyunFCServerlessDevsRole
在彈出的活動(dòng)應(yīng)用創(chuàng)建提醒對(duì)話框,仔細(xì)閱讀提示內(nèi)容,選中已知當(dāng)前收費(fèi)項(xiàng)復(fù)選框,然后選中我已經(jīng)了解上面的內(nèi)容,并同意上述描述復(fù)選框,最后單擊同意并繼續(xù)部署。
大約等待1~2分鐘后,部署狀態(tài)顯示部署成功,表示當(dāng)前版本部署完成。
部署完成后,您可以獲得Stable Diffusion的訪問域名。由于未進(jìn)行初始化模型管理,此時(shí)的Stable Diffusion只能使用內(nèi)置模型,不能切換模型。如果您需要更換模型,請查看步驟二:安裝模型。
步驟二:安裝模型
在應(yīng)用詳情頁面,單擊初始化模型管理。
在初始化模型管理對(duì)話框,選中我已閱讀,并了解上述創(chuàng)建資源的目的以及部分資源可能產(chǎn)生的費(fèi)用。我已知曉對(duì)應(yīng)的計(jì)費(fèi)規(guī)則,并決定繼續(xù)部署該應(yīng)用,然后單擊確認(rèn)。
存儲(chǔ)模型需要使用文件存儲(chǔ)NAS,會(huì)產(chǎn)生額外的存儲(chǔ)費(fèi)用。
選擇掛載NAS存儲(chǔ)方式,然后單擊確認(rèn)。
自動(dòng)配置:如果您從未創(chuàng)建過NAS或者首次部署,可選擇自動(dòng)配置,授權(quán)函數(shù)計(jì)算自動(dòng)為您創(chuàng)建NAS文件系統(tǒng)。
手動(dòng)配置:如果您已創(chuàng)建過NAS,可以選擇手動(dòng)配置,配置對(duì)應(yīng)的專有網(wǎng)絡(luò)、交換機(jī)、安全組,選擇文件系統(tǒng)后,使用默認(rèn)掛載點(diǎn)的NAS目錄和FC目錄。
模型管理初始化完成大概需要0.5分鐘~2分鐘左右。
在應(yīng)用詳情頁面,單擊模型管理域名對(duì)應(yīng)的鏈接,進(jìn)入模型管理工具頁面。
使用模型庫下載模型。
說明模型庫功能由阿里云OSS提供,模型/數(shù)據(jù)集/文件均來源于第三方,不保證合規(guī)性,請您在使用前慎重考慮。這些模型均遵循creativeml-openrail-m或cc-by-nc-sa-4.0許可,請您也遵守該許可的約定。您還應(yīng)嚴(yán)格遵守法律法規(guī)、第三方要求等,特別是不得利用本服務(wù)從事違法違規(guī)行為,例如上傳、輸入、生成、下載、使用違法或不良信息等。如您發(fā)現(xiàn)任何模型/數(shù)據(jù)集/文件等有問題,請加入釘釘用戶群(釘釘群號(hào):11721331),聯(lián)系函數(shù)計(jì)算工程師即時(shí)溝通處理。。
在左側(cè)菜單欄,單擊模型庫。
選擇合適的模型,單擊卡片對(duì)應(yīng)的下載模型,在文件下載確認(rèn)對(duì)話框中,單擊下載選中的模型。
您可以在模型庫或者傳輸列表查看模型下載進(jìn)度。模型將會(huì)被下載至您的文件管理NAS中,這會(huì)產(chǎn)生一定的文件存儲(chǔ)費(fèi)用,具體計(jì)費(fèi)信息請參見計(jì)費(fèi)概述。
模型下載完成后,您可以單擊左側(cè)文件管理,在
/mnt/auto/sd/models/Stable-diffusion
目錄下查看已下載的模型文件。
(可選)您也可以通過以下方式上傳自定義的模型文件。
在模型管理頁簽,進(jìn)入
/mnt/auto/sd/models/Stable-diffusion
目錄,單擊上傳文件上傳自定義的模型文件。在模型管理域名對(duì)應(yīng)的頁面中,單擊文件管理,在
/mnt/auto/sd/models/Stable-diffusion
目錄,單擊上傳按鈕上傳自定義的模型文件。
在應(yīng)用詳情頁面,單擊WebUI域名對(duì)應(yīng)的鏈接,進(jìn)入Stable Diffusion操作界面。
在Stable Diffusion模型下拉列表中可選擇要使用的模型。
步驟三:安裝插件
Stable Diffusion中默認(rèn)已安裝了常用的插件,您可以根據(jù)自己的需要自行選擇。
在Stable Diffusion操作界面,選擇擴(kuò)展插件頁簽。
在擴(kuò)展插件列表中,選擇需要使用的插件,單擊Apply and quit,重啟后的WebUI就會(huì)自帶已選擇的插件。
內(nèi)置的常用插件
ADetailer插件:修復(fù)崩壞臉。
Deforum插件:瞬息宇宙視頻制作。
Prompt all in one插件:提示詞翻譯助手。
Roop插件:一鍵換臉。
Image browser插件:圖像管理。
Rembg插件:一鍵快速摳圖。
Tagger插件:圖片反推提示詞。
Dataset tag editor插件:訓(xùn)練Lora打標(biāo)插件。
步驟四:生成圖片
在Stable Diffusion操作界面,選擇對(duì)應(yīng)的Stable Diffusion模型,在文生圖頁簽,輸入提示詞。
單擊生成,可以根據(jù)提示詞生成對(duì)應(yīng)的圖片。
步驟五:釋放資源
如您暫時(shí)不需要使用Stable Diffusion應(yīng)用生成圖片,請及時(shí)刪除對(duì)應(yīng)資源。如您需要長期使用Stable Diffusion應(yīng)用,請忽略此步驟。
釋放函數(shù)計(jì)算資源
返回函數(shù)計(jì)算控制臺(tái)概覽頁面,在左側(cè)導(dǎo)航欄,單擊應(yīng)用。
單擊目標(biāo)應(yīng)用右側(cè)操作列的刪除,在彈出的刪除應(yīng)用對(duì)話框,勾選我已確定資源刪除的風(fēng)險(xiǎn),依舊要?jiǎng)h除上面已選擇的資源,然后單擊刪除應(yīng)用及所選資源。
釋放文件存儲(chǔ)NAS資源
釋放文件存儲(chǔ)NAS資源屬于高危操作,可能會(huì)導(dǎo)致您的數(shù)據(jù)丟失,請謹(jǐn)慎操作。
登錄NAS控制臺(tái)。
在左側(cè)菜單欄,選擇
,在文件系統(tǒng)列表頁面找到FC_
開頭的目標(biāo)文件系統(tǒng),在對(duì)應(yīng)操作列選擇 。在刪除文件系統(tǒng)對(duì)話框中,移除掛載點(diǎn),然后單擊刪除。
費(fèi)用說明
套餐領(lǐng)取
函數(shù)計(jì)算套餐
為了方便您體驗(yàn)本文提供的文生成圖的場景,首次開通用戶可以領(lǐng)取試用套餐并開通函數(shù)計(jì)算服務(wù)。該套餐不支持抵扣公網(wǎng)出流量和磁盤使用量的費(fèi)用。如果您沒有購買相關(guān)資源包,公網(wǎng)出流量和超出512 MB的磁盤使用量將按量付費(fèi)。
文件存儲(chǔ)NAS套餐
如果您未領(lǐng)取過NAS試用套餐,您可以領(lǐng)取通用型NAS資源包50 GB,試用期限3個(gè)月。
函數(shù)計(jì)算費(fèi)用
公網(wǎng)出流量和磁盤使用量評(píng)估
如果您需要生成100張圖,每張圖需要5 MB公網(wǎng)出流量,每張圖生成耗時(shí)5s,則公網(wǎng)出流量使用量和超出512 MB的磁盤使用量計(jì)費(fèi)可參考以下表格內(nèi)容。
計(jì)費(fèi)項(xiàng) | 單價(jià) | 使用量 | 計(jì)費(fèi) |
公網(wǎng)出流量 | 0.50元/GB |
| 0.25元 |
磁盤使用量 | 超出512 MB的部分0.00000175元/GB*秒 |
| 0.008元 |
套餐資源消耗評(píng)估
函數(shù)計(jì)算配置:GPU 16 GB、vCPU 8核、內(nèi)存 32 GB。由于進(jìn)入Stable Diffusion WebUI使用界面就會(huì)耗費(fèi)GPU資源,所以領(lǐng)取的試用套餐,能夠支持免費(fèi)使用1041分鐘的Stable Diffusion WebUI,超出1041分鐘后將需要付費(fèi)。
由于插件邏輯不同,可能會(huì)存在進(jìn)入Stable Diffusion WebUI使用界面就會(huì)耗費(fèi)資源的情況。所以在不需要使用Stable Diffusion WebUI生成圖片的時(shí)候,請及時(shí)關(guān)閉Stable Diffusion WebUI使用界面。
免費(fèi)使用時(shí)間的計(jì)算方法如下:
1000000 GB*秒 / 16 GB / 60秒 = 1041分鐘
您需要根據(jù)實(shí)際情況進(jìn)行評(píng)估,具體的計(jì)費(fèi)信息,請參見計(jì)費(fèi)概述。
文件存儲(chǔ)NAS費(fèi)用
本文操作使用的通用型NAS,存儲(chǔ)規(guī)格為性能型,領(lǐng)取的試用套餐包含50 GB通用型NAS資源包,可以抵扣9.15 GB的性能型NAS使用量。
假設(shè)基礎(chǔ)大模型3.97 GB,Lora模型400 MB,那么您可以免費(fèi)存儲(chǔ)2個(gè)大模型、3個(gè)Lora模型。