画像生成AIイラストは、綺麗な絵は描いてくれるけど…、指や手足の数が崩れちゃうときあるんだよなぁ～
そんな時には、Stable Diffusion webUI (automatic1111)にControlNetを使うことで、AIイラストを手描きで修正し、生成すると、きれいに直せる場合が多いよ
それって、絵心が必要なんじゃ…？
そうでもないよ、細かい修正はAIがやってくれるので、ある程度の事をAIに伝えるだけで簡単に直せます
Stable Diffusion webUIに、ControlNetを追加することで、AIが苦手な手や指の形の修正、洋服や髪形の修正した、AIイラストを作ることが出来ます。
現在、Stable Diffusionや画像生成AIに関する記事は、以下のものがありますので参考にしてね
【StableDiffusion webUI基本設定】
- StableDiffusion WebUIをローカル環境で使う設定のやり方♪
- 【画像生成AIイラスト】VAEインストール方法と便利な使い方
- 「VAE」かんたんに切り替えするインターフェイス
- 【日本語化】StableDiffusionWebUI インターフェイス設定方法。
- 大きく、キレイな画像を出力する方法Hires.fix使い方。解像度アップ！
- 操作画面の5つのボタン解説
【ControlNet】
- 【ControlNet】使い方とインストール方法。画像生成AIイラストに便利な神機能。
- 骨(棒人間)を使い、思い通りの姿勢をとらせた方法。
- 原画の絵と同じ姿勢(ポーズ)のAIイラスト生成のやり方♪
- AIイラストから線画を抽出する方法♪
- AIイラストを手描きで修正し、生成するやり方♪
- 自作の線画イラストをAIイラストに色塗り(ペイント)させる方法♪
【プロンプト】
【その他 拡張機能について】
- 【EasyNegative v2】導入&使い方♪設定方法
- 【EasyNegative V2】反映されないときには？原因と対処方法
- 【Dynamic Prompts】ダウンロードとインストールの設定方法と特殊構文の使い方
【その他 AI情報】
ControlNetを使い、AIイラストを手描きで修正し生成するやり方
まずは、Stable Diffusion web uiには、元々ControlNetが導入されているわけではないので、使える状態に設定します。
設定が終わると、次のような項目が加わります
※今回のモデルは、andite/anything-v4.0を使わせて頂いてます
AIが作ったイラストを修正する場合は、img2imgを使います
img2imgのタブをクリックしてね
修正を行いたいAIイラストを、Stable Diffusion webUIの「ここに画像をドロップ」の場所にアップロードしてね
※ControlNetの方の画像ドロップ場所ではありません
また、プロンプトとネガティブプロンプトには、修正したいイラストを作った時と同じモノを使用しています
※ただ、プロンプトは全く同じくする必要がありません。修正したいプロンプトは変更しても大丈夫ですが、変えすぎると変形が起こったりする場合があります
今度は、ControlNetの設定を行います
Control-Net欄のよこにある三角のボタンをクリックして、Control-Netを表示しましょう
ControlNet画面を表示
Control-Netを開くと、次のような画面が開きます
まずは、Enableの所にチェックを入れてください
Enableは、Control-Netを有効にすると言う意味です
次にimageの所に、修正したい線画をアップロードします
変更点は以下の４つです
- 左手の指の形
- 体の前に落ちる毛を２つ縛りに
- 制服を半袖に
- 右手の角度を変える
線画が…、へ、下手過ぎない…？
だ、だから、AIに伝わるレベルで良いって言ったじゃない…
今回はこんな感じで大丈夫です…
次に、プリプロセッサ(Preprocessor) と、モデル(Model)を設定します
プリプロセッサは、canny
モデルは、canny
に設定してね
ちなみに、下にあるウエイトのバーを操作することで、修正のための線画をどの程度、影響を持たせるのか調整が出来ます
AIは黒背景をベースと認識します。
私たち人間は、背景を白としてイラストを描いたりしますが、AIは黒を背景として考えていますので、白背景のままですと上手くAIに伝えることが出来ない場合があります
設定を変える必要があるんですね
今回は、画像生成AIが生成したイラストを修正するだけなので、このままで大丈夫ですが、手描きで書いたイラストをAIに伝えられるように、ControlNetは、入力色を反転させる機能があります
その際には、入力色を反転させる、Invert Input Color（インバート インプット カラー）にチェックを入れましょう
それでは、ジェネレイト(Generate)ボタンをおしましょう
1枚のみの生成では、上手く直らない所もあるので何枚か生成してみました
修正した場所が反映されましたね
- 左手の指の形が直った
- 髪が2つ縛りに
- 制服を半袖になり、袖襟が付いた
- 右手の角度が変わった
背景を入れ替えてみましょう
背景が薄くなってしまったので、先ほどのウエイトを調整してみます
ウエイトを0.7にしてみました
Generateします。
ウエイトを減らすと線画の修正効果は減ってしまう可能性もありますが、さっきよりは背景が出てきましたね
今度はプロンプトを調整して、「背景は桜並木」と追記してみます
「Row of cherry trees」（桜並木）とプロンプトに追記してみました
色味があるプロンプトを入れると、色味が引っ張られてしまいますが…背景を付けることが出来ましたね
何度か生成すると、近いデザインが出来てくると思いますので、プロンプトの調整や、ジェネレイトを何度かしてみてくださいね
プロンプトを「bakery」（パン屋）とに変えてみました
まだ、少し調整は必要そうですが、いい感じになりました
おまけ
本格的にやりたい人は、デジタルイラスト/アイコンお絵描きする必要なおすすめ道具をまとめましたので参考にしてね
動画版：【ControlNet】画像生成AIイラストを手描きで修正
YouTubeでもweb2 web3 に関する情報を発信しています。興味ありましたら、チャンネル登録してね
