無(wú)腦本地部署！SD XL 最先進(jìn)的AI繪畫(huà)！太酷啦！
無(wú)腦本地部署！SD XL 最先進(jìn)的文本到圖像渲染模型！太酷啦！
什么是SDXL 0.9
Stability AI 發(fā)布了 SDXL 0.9,這是 Stable Diffusion 文本到圖像模型套件中最先進(jìn)的開(kāi)發(fā)版本。b站很多人分享了使用comfyUI的本地使用方式。我今天就分享一下使用最新WEB擴(kuò)展的方式來(lái)體驗(yàn)和使用最新SDXL。SDXL 0.9 能夠在現(xiàn)代消費(fèi)級(jí) GPU 上運(yùn)行，并使在創(chuàng)意方面生成的 AI 圖像實(shí)現(xiàn)了巨大飛躍。SDXL對(duì)人類(lèi)的指令理解更深，SDXL 0.9 比其前身大幅改進(jìn)了圖像和構(gòu)圖細(xì)節(jié)。真正能夠?yàn)殡娪?、電視、音?lè)和教學(xué)視頻生成超現(xiàn)實(shí)的創(chuàng)作。
SDXL 系列還提供一系列超出基本文本提示的功能。其中包括圖像到圖像提示(輸入一個(gè)圖像以獲取該圖像的變體)、修復(fù)(重建圖像的缺失部分)和修復(fù)(構(gòu)建現(xiàn)有圖像的無(wú)縫擴(kuò)展)。
SDXL 0.9 組合進(jìn)步的關(guān)鍵驅(qū)動(dòng)因素是其參數(shù)數(shù)量(模型訓(xùn)練的神經(jīng)網(wǎng)絡(luò)中所有權(quán)重和偏差的總和)比 Beta 版本顯著增加。SDXL 0.9 是所有開(kāi)源圖像模型中參數(shù)數(shù)量最多的模型之一,擁有 3.5B 參數(shù)基礎(chǔ)模型和 6.6B 參數(shù)模型集成管道(最終輸出是通過(guò)在兩個(gè)模型上運(yùn)行并聚合結(jié)果來(lái)創(chuàng)建的)。管道的第二階段模型用于向第一階段生成的輸出添加更精細(xì)的細(xì)節(jié)。SDXL 0.9 在兩個(gè)CLIP 模型上運(yùn)行,包括迄今為止訓(xùn)練的最大 OpenCLIP 模型之一 (OpenCLIP ViT-G/14),它增強(qiáng)了 0.9 的處理能力以及創(chuàng)建具有更大深度和更高分辨率的逼真圖像的能力。 1024x1024。
簡(jiǎn)單看看以往生成的圖像和SDXL生成圖像的對(duì)比圖。
對(duì)比
1. 女性站在窗戶前，頭發(fā)飄拂，是一部現(xiàn)代動(dòng)漫作品，高度詳細(xì)，數(shù)字繪制，完美構(gòu)圖，輕柔的氛圍，傍晚的陽(yáng)光
1. 水下攝影，鯨魚(yú)在一片青草從中穿梭，國(guó)家地理，自然攝影，尼康DSLR，廣角鏡頭。
1. 魔法現(xiàn)實(shí)，幽林在天空騎馬
1. 黃昏時(shí)分，在霧氣蒙蒙的森林中漂浮的發(fā)光水母
系統(tǒng)要求
盡管具有強(qiáng)大的輸出和先進(jìn)的模型架構(gòu),SDXL 0.9 仍能夠在現(xiàn)代消費(fèi)類(lèi) GPU 上運(yùn)行,只需要 Windows 10 或 11 或 Linux 操作系統(tǒng)、16GB RAM、Nvidia GeForce RTX 20 顯卡(同等或更高版本)標(biāo)準(zhǔn))配備至少 8GB VRAM。Linux 用戶還可以使用具有 16GB VRAM 的兼容 AMD 卡。
現(xiàn)在,可以通過(guò) ClipDrop 訪問(wèn)該模型,API 即將推出。SD XL1.0,模型權(quán)重將在 7 月中旬公開(kāi)發(fā)布。
可用性
SDXL 0.9 現(xiàn)已在Clipdrop by Stability AI平臺(tái)上提供
SDXL 0.9 將僅在有限的時(shí)間內(nèi)提供用于研究目的,以在全面公開(kāi)發(fā)布之前收集反饋并充分完善模型。運(yùn)行它的代碼將在Github上公開(kāi)提供。
如果研究人員想訪問(wèn)這些模型,請(qǐng)使用以下鏈接進(jìn)行申請(qǐng):SDXL-0.9-Base model和SDXL-0.9-Refiner。請(qǐng)使用您的學(xué)術(shù)電子郵件登錄您的 HuggingFace 帳戶以請(qǐng)求訪問(wèn)權(quán)限。請(qǐng)記住,目前,SDXL 0.9 專(zhuān)門(mén)用于研究目的。
使用方式
1. 官網(wǎng)體驗(yàn)
網(wǎng)址：https://clipdrop.co/stable-diffusion
2.本地部署
本地需要安裝stable-diffusion-webui，沒(méi)有的可以在群里下載秋葉大佬的整合包。
步驟：
1. 點(diǎn)擊擴(kuò)展
2. 選擇第三個(gè)選項(xiàng)卡，從網(wǎng)址安裝。 輸入擴(kuò)展插件網(wǎng)址，然后點(diǎn)擊安裝：https://github.com/lifeisboringsoprogramming/sd-webui-xldemo-txt2img
3. 關(guān)閉控制臺(tái)，并重新啟動(dòng)
4. 啟動(dòng)后，選擇SDXL 0.9 DEMO選項(xiàng)卡
5. 首先點(diǎn)這里獲取授權(quán)，需要注冊(cè)一個(gè)hugging face賬號(hào)。
6. 接著點(diǎn)擊這里生成token
7. 點(diǎn)擊創(chuàng)建token
8. 復(fù)制token，打開(kāi)webui的設(shè)置界面，滑動(dòng)到最下面選擇 SDXL 0.9 DEMO，將token復(fù)制到輸入框
1. 點(diǎn)擊保存設(shè)置，并關(guān)閉控制臺(tái)。然后重新一鍵啟動(dòng)
2. 耐心等待下載的模型。
3.使用方式
正常的文生圖即可
