手描きで書いたイラストと同じ、ポーズのイラストをAIイラストで生成したいケド…なかなか思い通りのポーズをとってくれないんだよなぁ～
そんな時には、Control-Netを使って、自分で描いた手書きのイラストでAIに伝えれば、思い通りのポーズをしたイラストを描いてくれるようになるよ
Stable Diffusion webUI(automatic1111)に、ControlNetを追加することで、手書きのイラスト通りに思い通りの姿勢をとらせた、AIイラストを作ることが出来ます。
手順などを解説していきますね！
現在、Stable Diffusionに関する記事は、以下のものがありますので参考にしてね
【StableDiffusion webUI基本設定】
- StableDiffusion WebUIをローカル環境で使う設定のやり方♪
- 【画像生成AIイラスト】VAEインストール方法と便利な使い方
- 「VAE」かんたんに切り替えするインターフェイス
- 【日本語化】StableDiffusionWebUI インターフェイス設定方法。
- 大きく、キレイな画像を出力する方法Hires.fix使い方。解像度アップ！
- 操作画面の5つのボタン解説
【ControlNet】
- 【ControlNet】使い方とインストール方法。画像生成AIイラストに便利な神機能。
- 骨(棒人間)を使い、思い通りの姿勢をとらせた方法。
- 原画の絵と同じ姿勢(ポーズ)のAIイラスト生成のやり方♪
- AIイラストから線画を抽出する方法♪
- AIイラストを手描きで修正し、生成するやり方♪
- 自作の線画イラストをAIイラストに色塗り(ペイント)させる方法♪
【プロンプト】
【その他 拡張機能について】
- 【EasyNegative v2】導入&使い方♪設定方法
- 【EasyNegative V2】反映されないときには？原因と対処方法
- 【Dynamic Prompts】ダウンロードとインストールの設定方法と特殊構文の使い方
【その他 AI情報】
ControlNetを使い、原画の絵と同じ姿勢のAIイラスト生成する手順
まずは、Stable Diffusion webUIには、元々ControlNetが導入されているわけではないので、使える状態に設定します。
ControlNetが使える状態になりますと、Stable Diffusion webUIのインターフェイスにControlNetの表記が出る様になります
※今回のモデルは、andite/anything-v4.0を使わせて頂いてます
今回ご紹介する、原画の絵と同じポーズのAIイラスト生成するやり方は、イラスト自体を読み取ると言うよりは、イラストの姿勢だけを読み取るだけで、基本的にはプロンプトを使ったAIイラスト生成になりますので、txt2imgを使います
元の画像がある場合、img2img使うのカナ？って思ったけど、txt2imgなんだね
そうだね、読み取るのはポーズだけになり、イラスト自体はプロンプトでテイストを指示しますのでtxt2imgになります
今回は、プロンプトとネガティブプロンプトに、最低限のプロンプトのみ以下のように記載しました
プロンプト
masterpiece, best quality, kawaii, cute girl
ネガティブプロンプト
worst quality, low quality
では、ControlNet欄のよこにある三角のボタンをクリックして、ControlNetを表示しましょう
ControlNet画面を表示
ControlNetを開くと、次のような画面が開きます
まずは、Enableの所にチェックを入れてください
Enableは、ControlNetを有効にすると言う意味です
次にimageの所に、とってほしい姿勢の画像を入れます
次に、プリプロセッサ(Preprocessor) と、モデル(Model)を設定します
プリプロセッサPreprocessorは、OpenPose
モデルModelは、OpenPoseに設定してね
それでは、ジェネレイト(Generate)ボタンをおしましょう
プロンプトをほとんど入れてないので、大部分はAIが自動生成しましたので、少しセクシーなおねぇさんになってしまいました。
体の角度、あたまの位置、左手が上がったり、要素は捉えていそうです
何枚か生成すると、より近いポーズが生成される場合もあります
ポーズ以外の要素は、画像から読み取りませんので、プロンプトを入れれて調整しましょう
どのくらい、Control-Netの影響を反映させるかは、Weightなどで調整できますよ
イラストの他に、openpose(棒人間)も作ってくれます。
お気に入りのopenpose(棒人間)は保存しておくと便利です
おまけ
本格的にやりたい人は、デジタルイラスト/アイコンお絵描きする必要なおすすめ道具をまとめましたので参考にしてね
動画版 : 【ControlNet】元絵や写真から同じポーズのAIイラスト生成
YouTubeでもweb2 web3 に関する情報を発信しています。興味ありましたら、チャンネル登録してね
