【OpenSea】nagiblog みてね!

最新ControlNet ver1.1.4バージョンアップSDXLに対応… 動かない、うまくいかない、機能しない、顔が崩れるなどの不具合…VERAMのメモリ不足対処法Stable Diffusion WebUI ver1.6.0画像生成AIイラスト

本日は、ControlNet verも1.14バージョンアップし、SDXLに対応したと言うことなので、使ってみましたので速報版的に、感想を書かせて頂きます

また、不具合や、VERAMのメモリ不足などの対処方法についてもまとめました

結論を先に言いますが、Stable Diffusion WebUI ver1.6.0もControlNet verも1.14も最新バージョンが出ていますが、アップデートは少し待ってみてもいいかもしれません

理由は、本編に書いてあります

目次

ControlNetがSDXLに対応

コントロールネットもバージョン1.1.4にアップデートしましたね

SDXLに対応したようです

ただし、Stable Diffusion WebUI ver1.6以降である必要があります

コントロールネット用のモデルファイルも増えていますね

https://huggingface.co/lllyasviel/sd_control_collection/tree/main

今回のバージョンアップでは、コントロールのネットのバージョン更新だけでなく、モデルファイルのダウンロードも行ってくださいね

やり方が分からない場合には、コチラの記事を参考にしてください。SD1.6でも前のバージョンでも導入や更新方法は同じです

コントロールネット1.12くらいで、ファイルが倍くらいに増えましたが、1.14では、さらに倍の32種類のモデルを確認できます


増えた多くのモデルはsdxl用のモデルとなっています

SD1.6用のモデルも増えています

モデルが多くなったので、新しいモデルが判別しにくい状況になっていますね

若干、ファイル表記も.112とは違う気がしますが…ちょっと判断付かなかったので、全部ダウンロードしてみました

1つ1つのモデルファイルのサイズが大きく、量もありますので、そろそろみなさんも、ストレージの空き容量がきつくなってきますよね

私も、増設しました…

推奨VRAM と VRAM不足で動かない際には…

公式サイトによりますと「すべてのメソッドは 8GB VRAM および 6GB VRAM でテストされています」とのことなので、VERAMが8GBあれば、動く様です

ただし、VRAM16GB以下の場合には、webui-user.batを以下の様に編集する必要があります


@echo off

set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=

call webui.bat –medvram-sdxl –xformers

StableDiffusion WebUI ver1.6.0では、新しいメモリー最適化オプションが追加されています

最適化オプション(–medvramや–xformers)を使うと画像を生成する速度落ちます。

メモリーをたくさん使うSDXLの時だけメモリの使い方を変えるようです

8GB 未満の vramの場合は、webui-user.batを以下の様に編集する必要があります


@echo off

set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=

call webui.bat –lowvram –xformers

今回は、–medvramの時には、後ろに-sdxl が付いてるけど、–lowvramには後ろに-sdxl が付いていないのはなぜですか?

ミドルスペックのVRAMを持つグラフィックカードの場合は、–medvram-sdxl オプションで特定の最適化が有効になります。

つまり「SDXLを使う際には–medvramを適用して」という命令を出しています。結果、SDXLの使用時に最適化されます

一方で、低VRAMのグラフィックカードを使用する場合は、–lowvram オプションを使って最適化を常に有効にする必要があります。

つまり、6GB以下ののVRAMでは、常時–lowvramを使って最適化してあげないと、動作しなくなってしまうため、常時–lowvramでの最適化をさせていると言うことになります

ただし、–lowvram オプションを使用すると、かなり制限されたモードで動作はするものの、生成速度が大幅に低下します。

ControlNet ver1.14の使用感と不具合について

公式サイトにも書かれていますが一部の機能で、制限があるようです

一部の Control LoRAなどの様です

私的には、cannyなど境界がある処理ができないように感じます

ControlNetの機能を複数使うMultiCNなどが使えない状況を確認しています

個人的な感想ですが、SDXL、StableDiffusion WebUI ver1.6.0、ControlNet ver1.14は、紹介されている機能は素晴らしいものがあります。

しかし、扱いが難しく、制限もあり、要求スペックも高いので…バージョン1.4または、1.5からはアップデートは少し待ってみてもいいですね

意外と「旧バージョンの方が良かった」と評価されることは、StableDiffusionだけではなく他の事にも該当しますからね

最後に、お知らせをさせてください

おまけ

StableDiffusion WebUI v1.6.0(随時更新リサーチ中)

StableDiffusion webUI基本設定

【学習モデル・checkpoint】

プロンプト

【ControlNet】

【その他 拡張機能について】

画像生成で収益化方法

【その他AI最新情報】

AIをとりまく社会問題

人気ブログランキング参加中 応援してね

この記事が気に入ったら
フォローしてね!

よかったらシェアしてね♪
  • URLをコピーしました!

web3 時代に必要なスキルを磨く!

なにかやりたい作業があって短時間で身に着けたいのであれば、オンラインで授業を受けたり質問できるサービスもあるよ

SHElikesは女性限定ですが、幅広く学べて、業界最安値(それでもそこそこなお値段しますが)

Withマーケは、私も参加してて、マーケティングに特化していまして、マーケティングスクールとしては最安値で、内容も濃くお値段以上です

副業に役立つツール・まとめ

副業に役立つツール最強ツールは、みなさんもご存じのAdobeのアプリ。

画像加工のPhotoshop 動画編集のpremiereなどでおなじみですが、単体プラン(2728円/月)を2つ以上契約するなら、全てのアプリを使えるAdobeクリエイティブクライド(6248円/月)がお得

さらに、社会人でも買えるアカデミック版(39980円/年 月当たり3,331円)は公式サイトのセール価格と同等価格のうえに、アカデミックの講義も付いてくるお得プラン

Adobe CCをアカデミック版で買うとセール価格より安い

副業に役立つ本まとめ

ブログで5億稼いだ方法/きぐち著

ブログサイト運営するなら、バイブル的な本です

なかなか知れない裏情報もばっちり載ってます

ブログ歴17年のプロが教える売れる文章術 ブログライティングの教科書/(中島大介)なかじ

現在、ブログ系の情報発信者のトップクラスのインフルエンサーです

私もなかじさんの情報にはかなり助けられました

目次