AI - 1679446213 - したらば掲示板

22：WS：2023/03/23(木) 11:38:47: ポーズや構図を指定してサクッと好みのイラスト画像を生成しまくれる「ControlNet」＆「Stable Diffusion」の合わせ技を試してみたよレビュー
https://gigazine.net/news/20230216-stable-diffusion-controlnet/

◆1：ControlNet拡張機能を「Stable Diffusion web UI(AUTOMATIC1111版)」にインストール
「Stable Diffusion web UI(AUTOMATIC1111版)」を起動したら、
「拡張機能」をクリックしてから「URLからインストール」をクリックし、
URL入力欄に「https://github.com/Mikubill/sd-webui-controlnet」と入力して「インストール」をクリックします。

インストールが完了したら「インストール済」をクリックして画面下部の拡張機能一覧に「sd-webui-controlnet」があることを確認し、
「適用してUIを再起動」をクリック。

「txt2img」タブの最下部に「ControlNet」が表示されていれば、拡張機能のインストールは完了です。

◆2：ControlNetのモデルデータをダウンロード
続いて、以下のリンク先にアクセスしてControlNetのモデルデータをダウンロードします。
webui/ControlNet-modules-safetensors at main
https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
リンク先には、モデレーターがズラリと並んでいます。
今回は「ポーズを指定して画像生成」という機能を使いたいので「control_openpose-fp16.safetensors」をクリック。

続いて「download」をクリックしてモデルデータ(ファイルサイズ689MB)をダウンロードします。
以下のようなファイルをダウンロードできたらOK。

続いて、「Stable Diffusion web UI(AUTOMATIC1111版)」のインストールフォルダ内を「extensions」→「sd-webui-controlnet」→「models」と移動し、
「models」フォルダ内にダウンロードしたモデルデータを移動します。
「models」フォルダ内にモデルデータが存在する状態になれば準備完了です。

◆3：ControlNetを用いて参考画像から骨格データを抽出して画像生成
ControlNetを使って「ポーズを指定した画像」を生成するには、ポーズの参考画像を準備する必要があります。
参考画像は背景がシンプルなものがベター。

画像を生成するには、まず「txt2img」タブの最下部に配置された「ControlNet」をクリック。
すると、「ControlNet」の設定項目が表示されます。

「ポーズを指定した画像」を生成する場合は、「Enable」にチェックを入れた後、「Preprocessor」で「openpose」を選択し、
「モデル」でダウンロードしたモデルデータを選択します。
さらに、参考画像の解像度も入力します。

続いて、「ここに画像をドロップ」と記された部分に参考画像をドラッグ＆ドロップします。
以下のように参考画像が表示されればOK。

次に、プロンプトを入力して「生成」をクリックします。今回は「girl, yoga」と入力しました。
しばらく待つと、画像が「ポーズの骨格画像」と共に出力されます。

◆4：デザインドールでポーズを自作して画像生成
上記の手順で「ポーズを指定した画像」は生成できますが、好みのポーズの参考画像を探し出すのは手間がかかります。
そこで、無料で使えるポージングツール「デザインドール」を使って、好みのポーズの参考画像を作成してみます。
デザインドールを使うには、まず以下のリンク先にアクセス。

デザインドール | 次世代デッサン人形
https://terawell.net/ja/index.php

続いて「ダウンロード」をクリックします。
以下の画面が表示されたら「ダウンロード」をクリックしてインストーラー(ファイルサイズ43.2MB)をダウンロードします。
インストーラーをダウンロードしたら、ダブルクリックして起動します。
インストールが完了したら「DesignDollを実行する」にチェックを入れて「完了」をクリックします。

インストールが完了すると、デザインドールが起動します。画面内に表示された人形の足や手をドラッグすると、各部位を動かせるので、好みのポーズを取らせます。