メインコンテンツへスキップ
見出し画像

新しめのStable Diffusionモデルについて(更新終了)

    ◆重要な補足(参考)
    NAIのリークモデル問題については、8-23-2024にNovelAI Diffusion V1 ウェイトが公開されたことにより、一定の区切りが付きました。本記事では問題について特に触れていませんが、ご参考まで。
    (参考:NovelAIが初期のイラスト生成AIモデルを公開 研究・個人利用OK - ITmedia)


    ※新しいモデルに注力するため、新記事に移行しました。なお、本記事にしか掲載していないモデルも多数あります。
    ※最近の更新(2023年)
    ~03-19:「yumekawa_diffusion_ver2.1」「Dreamlike Anime 1.0」追加。
    ~03-10:「Cool Japan Diffusion 2.1.2」「Aikimi_dC3」「OpenNiji-V2」「OpenNiji」追加。「Aikimi_d(旧)」削除。
    ~03-05:「Mitsua Diffusion One」「Aikimi_dC1.0(Aikimi_diffusion)」「WD 1.5 Beta 2」追加。
    ~02-25:「Aikimi_dV3.0」「SomethingV2」「SomethingV1」「Subtly」「Animistatics」「Untitled」「NewArtModel Version 4」追加。
    ~02-20:「7th_anime_v2_B-fix」「Aikimi_diffusion」「Anything V3.1」「Anything V3.3」追加。「8528-diffusion」削除。
    ~02-18:「Alloy Models Brass Mix」「Alt Pastel」「Myne Factory Base Model」「Picasso Diffusion 1.1」「Replicant」「RuminationDiffusion」「WD 1.5 Beta」追加。
    ~02-05:「Counterfeit-V2.5(V2.1とV2.2も)」「Cool Japan Diffusion 2.1.2 Beta」「補足」追加。「7th Test」更新。
    ※複数のv1系Stable Diffusionモデルにおいて、データの破損(特定の位置にあるトークンが無視される現象)が確認されています。それらには目印「◆」を付けておきますので、下記の記事で詳細を確認してください。

    ※内容の誤り、掲載を推奨するモデルなどの情報がありましたら、末尾のTwitterまでお知らせいただけると幸いです。なお、掲載は個人的に興味のあるモデルに限定します。

    1. はじめに

    概要

     22年8月にStable Diffusionが公開されて以来、多種多様なモデルが誕生し続けています。本記事では、アニメ、イラスト系が得意な新しめのモデルを中心に紹介します。マージモデルは下記の記事を参照してください(本記事にもマージモデルが含まれる可能性があります)。

    2. v1系モデル一覧

     名前の横に「(*)」が付いている場合は、破損チェック未実施(実施予定)です。「◆」はチェック時に破損モデルがありました。無印は、チェック時に破損モデルがありませんでした。「推奨」や「補足」の項目はざっくりな確認のみですので、詳細はリンク先でご確認ください。

    7th Layer ◆

    作者:godeyesai(syaimu)氏
    https://huggingface.co/syaimu/7th_Layer
     7th_layer/Abyss_7th_layer.ckpt
     7th_layer/abyss_7th_layerG1.ckpt
     7th_anime_v1/7th_anime_v1.1.*
     7th_anime_v2/7th_anime_v2_[A-C,G].*
      7th_anime_v2/7th_anime_v2_B-fix.ckpt
     7th_anime_v3/7th_anime_v3_[A-C].*
    推奨:NP
    備考:破損は「v2_B」と「v2_C」のみ

    7th Test

    作者:godeyesai(syaimu)氏
    https://huggingface.co/syaimu/7th_test
     7th_anime_3.1_[A-C,Cg].ckpt
     7th_anime_v2.1_B.ckpt
     <del> 7th_anime_v3_test[A-C].ckpt(7th_anime_v3と殆ど同じ)
    推奨:NP

    8528-diffusion ◆

    作者:852話氏
    https://huggingface.co/852wa/8528-diffusion
     8528d-v0-*.ckpt
     8528d-final.ckpt

    ACertainty

    作者:Joseph Cheung氏
    https://huggingface.co/JosephusCheung/ACertainty
     ACertainty.ckpt
    推奨:CLIP Skip:2
    補足:学習元として設計された

    ACertainModel ◆

    作者:Joseph Cheung氏
    https://huggingface.co/JosephusCheung/ACertainModel
     ACertainModel*.ckpt
    推奨:CLIP Skip:2

    ACertainThing ◆

    作者:Joseph Cheung氏
    https://huggingface.co/JosephusCheung/ACertainThing
     ACertainThing*.ckpt
    推奨:CLIP Skip:2

    AniReal ◆

    作者:Hosioka氏
    https://huggingface.co/Hosioka/AniReal
     AniReal.safetensors
     AniReal.vae.pt (=kl-f8-anime2)
    推奨:VAE

    Anything V3 ◆

    掲載者:Furqanil Taqwa(Linaqruf)氏
    https://huggingface.co/Linaqruf/anything-v3.0
     anything-v3-*.safetensors
     <del> Anything-V2.1.ckpt
     <del> Anything-V3.0*.ckpt
     <del> any-v3-fp32-better-vae.safetensors
    推奨:V2.1とV3.0はVAEが必要(V4側に掲載)
    補足:出所と作者は不明、公開停止時前のファイルは削除、any-v3-fp32-better-vaeとanything-v3-fp32-prunedは同一

    Anything V3.1

    作者:Cagliostro Research Lab
    https://huggingface.co/cag/anything-v3-1
     anything-v3-1.*
     anything-v3-2.*
    推奨:Prompt等
    補足:V3→V3.1はV3→V4とは別の系統、VAE不要

    Anything V3.3

    作者:Cagliostro Research Lab
    https://huggingface.co/cag/anything-v3-3
     anything-v3-3.*
    補足:V3.1の系統、VAE不要

    Anything V4 ◆

    作者:andite氏
    https://huggingface.co/andite/anything-v4.0
     Anything-V3.0-pruned.ckpt
     anything-v4.0*.*
     anything-v4.5*.*
     anything-v4.0.vae.pt(過去のバージョンと同一)
    推奨:VAE
    補足:V3は公開停止されたファイルと同一、V4はAbyssOrangeMix2をマージ

    Baka-Diffusion ◆

    作者:Hosioka氏
    https://huggingface.co/Hosioka/Baka-Diffusion
     Baka-DiffusionV1*.safetensors
     Baka-Diffusion.vae.pt (=Anything)
    推奨:VAE

    BPModel

    作者:Kurosu Chan氏
    https://huggingface.co/Crosstyan/BPModel
     bp_1024_*.ckpt
     bp_mk*.safetensors
    推奨:適当なVAE
    補足:ACertaintyをベースに学習を行った

    Counterfeit ◆

    作者:gdgsfsfs(gsdf)氏
    https://huggingface.co/gsdf/counterfeit-v1.0
     counterfeit-v1.0.ckpt
    推奨:NP、CLIP Skip:2

    Counterfeit-V2.0

    作者:gdgsfsfs(gsdf)氏
    https://huggingface.co/gsdf/Counterfeit-V2.0
     Counterfeit-V2.0*.*
    推奨:NP、CLIP Skip:2

    Counterfeit-V2.5

    作者:gdgsfsfs(gsdf)氏
    https://huggingface.co/gsdf/Counterfeit-V2.5
     Counterfeit-V2.5*.safetensors
     Counterfeit-V2.1.safetensors
     Counterfeit-V2.2.safetensors
     Counterfeit-V2.5.vae.pt(=Anything)
    推奨:EasyNegative、VAE

    Dreamlike Anime 1.0 ◆

    作者:dreamlike.art
    https://huggingface.co/dreamlike-art/dreamlike-anime-1.0
     dreamlike-anime-1.0.*
    情報:画像、一部の設定
    推奨:Prompt、NP

    EimisAnimeDiffusion

    作者:Eimis M.(eimiss)氏
    https://huggingface.co/eimiss/EimisAnimeDiffusion_1.0v
     EimisAnimeDiffusion_1-0v.ckpt

    Elysium Anime ◆

    作者:Bob(hesw23168)氏
    https://huggingface.co/hesw23168/SD-Elysium-Model
     Elysium_Anime_V[1-3].*
    推奨:NP、CLIP Skip:1~2、VAE(kl-f8-anime2)

    Elysium Kuro

    作者:Bob(hesw23168)氏
    https://huggingface.co/hesw23168/SD_Elysium_Kuro_Model
     Elysium_Kuro_Anime_V1.safetensors
     Elysium_Kuro_Anime_V1-inpainting.safetensors
    推奨:NP、CLIP Skip:2、VAE(kl-f8-anime2)

    Evt_V2

    作者:椎名晴樹(haor233)氏
    https://huggingface.co/haor/Evt_V2
     evt_v2-ema-pruned.ckpt
    推奨:CLIP Skip:2

    Evt_V3

    作者:椎名晴樹(haor233)氏
    https://huggingface.co/haor/Evt_V3
     Evt_V3_ema.ckpt
    推奨:CLIP Skip:2

    Evt_M

    作者:椎名晴樹(haor233)氏
    https://huggingface.co/haor/Evt_M
     Evt_M*.*
    推奨:CLIP Skip:2

    Evt_V4-preview

    作者:椎名晴樹(haor233)氏
    https://huggingface.co/haor/Evt_V4-preview
     Evt_V4_e*.*
    推奨:CLIP Skip:2

    Myne Factory Base Model

    作者:Myne Factory
    https://huggingface.co/MyneFactory/MF-Base
     MyneFactoryBase V1.0.*
    推奨:Prompt等、VAE(vae-ft-mse-840000)、Steps:30~、CFG Scale:9~12

    NewArtModel Version 4

    作者:Nerfgun3氏
    https://huggingface.co/Nerfgun3/NewArtModel4
     NewArtModel4.*
    補足:他モデルとのマージも可

    Openjourney

    作者:PromptHero氏
    https://huggingface.co/prompthero/openjourney
     mdjrny-v4*.*
    https://huggingface.co/prompthero/openjourney-v2
     openjourney-v2*.ckpt

    OpenNiji ◆

    作者:Buttercream(Korakoe)氏
    https://huggingface.co/Korakoe/OpenNiji
    https://civitai.com/models/5143/openniji
     OpenNiji.*
     OpenNiji-LoRA.safetensors
    情報:画像、一部の設定
    補足:VAEが必要(Anything)、anything-v4.5にniji・journeyの画像を学習

    OpenNiji-V2

    https://huggingface.co/Korakoe/OpenNiji-V2
    https://civitai.com/models/14479/openniji-v2
     OpenNiji-V2.safetensors
    情報:画像、一部の設定
    補足:SD-Siliconにniji・journeyの画像を学習

    Plat Diffusion

    https://huggingface.co/p1atdev/plat-diffusion
    https://huggingface.co/p1atdev/pd-archive
    作者:Plat氏
    plat-v0-1.ckpt
    plat-v1-2-*.*
    推奨:VAE(kl-f8-anime2)
    補足:v1系はv1.3.0未満

    Shirayuki Anime

    作者:Bob(hesw23168)氏
    https://huggingface.co/hesw23168/SD_Shirayuki_Model
     Shirayuki_Anime_V1-fp16.safetensors
    推奨:VAE(kl-f8-anime2)

    SomethingV1 ◆

    作者:NoCRYPT氏
    https://huggingface.co/NoCrypt/SomethingV1
     SomethingRaw.safetensors

    SomethingV2 ◆

    作者:NoCRYPT氏
    https://huggingface.co/NoCrypt/SomethingV2
     somethingv2.safetensors
     somethingv2_1.safetensors
    推奨:EasyNegative、CLIP Skip:2

    Waifu Diffusion 1.3.5ほか

    作者:haru氏ほか(?)
    https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/models
    wd-1-3-penultimate-ucg-cont.ckpt
    wd-1-3-5_80000-fp32.ckpt

    3. VAE一覧

     AUTOMATIC1111氏のStable Diffusion web UI(以下、web UI)では、VAEを別のものに変更して表現を変えることができます。使い方は、「5. 補足」で紹介しているweb UIの利用手順を参照してください。VAEを用意していたり(主に下記のコピー)、特定のVAEを使用するよう指示しているモデルもあります。

    AnythingのVAE

    https://huggingface.co/andite/anything-v4.0/tree/main
     anything-v4.0.vae.pt

    Stability AIのVAE

    https://huggingface.co/stabilityai/sd-vae-ft-ema-original
     vae-ft-ema-560000-ema-pruned.ckpt
    https://huggingface.co/stabilityai/sd-vae-ft-mse-original
     vae-ft-mse-840000-ema-pruned.ckpt

    Waifu DiffusionのVAE

    https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/vae
     kl-f8-anime.ckpt
     kl-f8-anime2.ckpt

    naclbit(TrinArt)のVAE

    https://huggingface.co/naclbit/trinart_derrida_characters_v2_stable_diffusion/tree/main
     autoencoder_fix_kl-f8-trinart_characters.ckpt

    Stable Diffusion originalのVAE

    https://note.com/mayu_hiraizumi/n/n136bd7b3a156 の 8. を参照。

    VAE mix test

    https://huggingface.co/sp8999/test_VAE
     mse840000_klf8anime.vae.pt
     mse840000_klf8anime_klf8anime2.vae.pt

    4. v2系モデル一覧

     v2系モデルには設定ファイル(*.yaml)があります。モデルの配布先で用意していない場合は原則不要です。配布先で用意している場合は、それをモデルと同じ場所に設置してファイル名を同じにしてください(拡張子のみが異なる状態)。通常は、512x512のモデル(v2-base)であれば v2-inference.yaml が、768x768のモデル(v2)であれば v2-inference-v.yaml が使用されます。

    Aikimi_diffusion

    作者:Aikimi氏
    https://huggingface.co/Aikimi/Aikimi_diffusion_base_wd-1-5_beta2
     Aikimi_dC3.safetensors
    情報:画像、設定(画像内)
    補足:v2モデル
    https://huggingface.co/Aikimi/Aikimi_diffusion_base_wd-1-5_beta1
     Aikimi_diffusion_*.safetensors
     Aikimi_d*.safetensors

    Alloy Models Brass Mix

    作者:Plat氏
    https://huggingface.co/p1atdev/alloy-mix
     brass/[a-c]/alloymix-brass-[a-c]*.safetensors
    補足:v2-baseモデル

    Alt Pastel

    作者:Plat氏
    https://civitai.com/models/8885/alt-pastel
    https://huggingface.co/p1atdev/alt-pastel
     type_[a-c]/altpastel_type_[a-c]*.safetensors
    補足:v2-baseモデル

    Animistatics

    作者:Maseshi氏
    https://huggingface.co/Maseshi/Animistatics
     Animistatics*.*
     Animistatics.vae.pt(=Anything)
     Animistatics.yaml
    推奨:VAE
    補足:v2-baseモデル

    Cool Japan Diffusion

    作者:あるふ氏
    https://huggingface.co/aipicasso/cool-japan-diffusion-2-1-2
     v2-1-2.*
     v2-1-2.yaml
    補足:旧バージョンは下記URLに掲載
    https://huggingface.co/aipicasso
    https://huggingface.co/alfredplpl/cool-japan-diffusion-for-learning-2-0

    Lazurite

    https://huggingface.co/p1atdev/ore-o
    作者:Plat氏
     lazurite-v1*.*
     lazurite-v1.yaml
    補足:LoRAのデータ有

    Mitsua Diffusion CC0

    作者:アブストラクトエンジン
    https://huggingface.co/Mitsua/mitsua-diffusion-cc0
     mitsua-diffusion-cc0-v1-0.ckpt
    補足:後継モデル「Mitsua Diffusion One」公開済み、v2-baseモデル

    Mitsua Diffusion One

    作者:アブストラクトエンジン
    https://huggingface.co/Mitsua/mitsua-diffusion-cc0
     mitsua-diffusion-one.*
     mitsua-diffusion-one.-base*
    補足:絵藍(えらん)ミツアが広報を行っている、v2-baseモデル

    Picasso Diffusion 1.1

    作者:AI Picasso、あるふ氏
    https://huggingface.co/alfredplpl/picasso-diffusion-1-1
     v1-1.*
    補足:v2モデル

    Plat Diffusion

    https://huggingface.co/p1atdev/plat-diffusion
    https://huggingface.co/p1atdev/pd-archive
    作者:Plat氏
     plat-v1-3-*.*
     plat-v1-3-.yaml
    補足:v2系はv1.3.0以降

    RuminationDiffusion

    作者:Joseph Cheung氏
    https://huggingface.co/JosephusCheung/RuminationDiffusion
     Rumination*.ckpt
     Rumination*.yaml
    補足:test model、v2モデル

    Stable Diffusion v2

    作者:Stability AI
    https://huggingface.co/stabilityai/stable-diffusion-2-1-base
     v2-1_512-*.*
    https://huggingface.co/stabilityai/stable-diffusion-2-1
     v2-1_768-*.*
    補足:初出のv2系モデル

    Subtly

    作者:だだっこぱんだ氏
    https://huggingface.co/ddPn08/subtly
     subtly-fp16.*
     subtly-fp32.*
    補足:v2モデル

    Untitled

    作者:Robin Rombach, Patrick Esser, Alfred Increment
    https://huggingface.co/alfredplpl/untitled
     untitled.safetensors
     embeddings/positive/*.*
     embeddings/negative/*.*
    推奨:Prompt等、TI
    補足:v2モデル、マージモデル「Untitled:Replicant」も公開された

    Waifu Diffusion 1.4 Anime

    作者:haru氏ほか
    https://huggingface.co/hakurei/waifu-diffusion-v1-4
     wd-1-4-anime_e*.ckpt
     wd-1-4-anime_e1.yaml
    補足:v2-baseモデル

    WD 1.5 Beta

    作者:Waifu Diffusion
    https://huggingface.co/waifu-diffusion/wd-1-5-beta
    https://cafeai.notion.site/WD-1-5-232cfa9443fc4661b469e7d1df8b7dd8
     checkpoints/wd15-beta1-fp*.safetensors
     checkpoints/wd15-beta1-fp*.yaml
     embeddings/wdbadprompt.pt
     embeddings/wdgoodprompt.bin
    推奨:wdgoodprompt & wdbadprompt(アニメ系の場合)、VAE(kl-f8-anime2)
    補足:v2モデル

    WD 1.5 Beta 2

    作者:Waifu Diffusion
    https://huggingface.co/waifu-diffusion/wd-1-5-beta2
    https://cafeai.notion.site/WD-1-5-Beta-2-Release-Notes-2852db5a9cdd456ba52fc5730b91acfd
    https://cafeai.notion.site/WD-1-5-Beta-2-Aesthetic-Ver-c44a410fec06478fbf1a08a9890310ff
     checkpoints/wd-1-5-beta2-fp*.safetensors
     checkpoints/wd-1-5-beta2-fp*.yaml
     checkpoints/wd-1-5-beta2-aesthetic-fp*.safetensors
     checkpoints/wd-1-5-beta2-aesthetic-fp*.yaml
    推奨:VAE(kl-f8-anime2)
    補足:aestheticは微調整を行った、v2モデル

    WD Unofficial Releases

    作者:Waifu Diffusion
    https://huggingface.co/waifu-diffusion/unofficial-releases
     wd14-booru-step-14000-unofficial.safetensors
    補足:非公式(開発中もしくはトレーニング中)のモデル
    補足:v2-baseモデル

    yumekawa_diffusion_ver2.1

    作者:teftef氏
    https://huggingface.co/teftef/yumekawa_diffusion_ver2.1
     WD4-teftef_LoRA_50000-merged.ckpt
     WD4-teftef_LoRA_50000-merged.yaml
    情報:画像、設定
    推奨:Simple prompts、NP
    補足:LoRA有(*_50000.pt、*_80000.pt)、v2-baseモデル

    Ushio Anime

    作者:shinomakoi氏
    https://civitai.com/models/10462
     ushioAnime_v1.safetensors
    補足:WD 1.5 Beta1にトレーニング、v2モデル

    5. 補足

    web UIの利用手順について

     下記の記事にて説明していますのでご覧ください。

    safetensors形式について

     従来の形式(pickle)より安全でロードが高速とされていて、web UIでは同じように利用できます。現在は、こちらの形式での公開が増えています。

    6. twitterの連絡先

     noteのアカウントはメインの@Mayu_Hiraizumiに紐付けていますが、記事に関することはサブアカウントの@riddi0908までお願いします。

     
     
    5060Ti (16GB) と 3060 (12GB) を所持。記載が無い限り文章は手書きです。記事に関することは X の riddi0908 までお願いします。質問箱は気まぐれにお返事します。

    あなたへのおすすめ