SDtutorial2 の履歴(No.4) - PukiWiki

[ トップ ] [ 一覧 | 検索 | 履歴 | ログイン ]

私的AI研究会 > Diffusion > SDtutorial2

　画像生成 AI「Stable Diffusion」チュートリアル 2 == 編集中 ==†

　画像生成 AI「Stable Diffusion」の操作ガイドその２

▲　目　次

　画像生成 AI「Stable Diffusion」チュートリアル 2 == 編集中 ==
- 「ControlNet」を使う
- 更新履歴
参考資料
- 私的AI研究会: サイト内リンク

※ 最終更新:2025/03/02　

「ControlNet」を使う†

はじめに†

「Stable Diffusion web UI」には画像生成をより便利にする多くの拡張機能があります
「ControlNet」を使うことでよりイメージに近い画像生成が可能になります
詳しくは → 「Stable Diffusion」拡張機能「ControlNet」

事前準備†

「ControlNet」をインストールします

①「Extention」タブを選択
② URLを入力
```
  https://github.com/Mikubill/sd-webui-controlnet
```
③「Install」ボタンを押す（※ 時間を要する）
④「Installed」タブを選択
⑤ sd-webui-controlnet の表示を確認
⑥「Apply and restart」ボタンを押す（※ 時間を要する）

　再表示された画面に「ControlNet XXXX」パネルが追加されていることを確認します

ControlNetモデルのダウンロードして設置します
- comfyanonymous/ControlNet-v1-1_fp16_safetensors より必要なモデルをダウンロードします
  ファイル名『control_v11・・・』のファイル 15本（2025/03/02現在）

ダウンロードしたモデルを「stable-diffusion-webui/models/ControlNet/」のフォルダへ移動します

写真から「水彩画/油絵」を生成する†

もとになる写真

① ② ③

写真からプロンプトを考えて生成してみる

Prompt	① White-eye perched on a branch, watercolor painting（枝にとまるメジロ、水彩画）
	② Epiphyllum oxypetalum, watercolor painting（月下美人、水彩画）
	③ Plum blossom, watercolor painting（梅の花、水彩画）
Negative prompt
Parameter	Steps: 20, Sampler: DPM++ 2M, CFG scale: 7, 768x512 or 512x768, Clip skip: 1, Model: realisticVisionV60B1_v20Novae

①	②	③

「ControlNet」『Canny』を使って写真から水彩画を生成する

『Canny』の使い方
←
①「ControlNet XXXX」パネルを開く
② 元になる画像をドラッグ＆ドロップ（処理済み画像を入力することもできる）
③「ControlNet」機能を有効にする（緑のサインが表示される）
④ Canny または Depth を選択
⑤ Canny または Depth の表示を確認（②で処理済み画像を入力した場合は None にする）
⑥ Canny のモデルを確認（Control Type と一致させること）
　　control_v11p_sd15_canny_fp16

⑦ 処理を開始する（②で処理済み画像を入力した場合はパスする）

→
⑧ プロンプトを入力
⑨ ネガティブ・プロンプトを入力
⑩ Generate ボタンを押して生成開始
⑪ 生成画像が表示される

　結果画像　watercolor painting（水彩画）

Model Preprocessor realisticVisionV60B1
_v20Novae animePastelDream
_softBakedVae etherBluMix
_etherBluMix7 v1-5-pruned
-emaonly

①

②

③

　結果画像　oil painting（油絵）

Model Preprocessor realisticVisionV60B1
_v20Novae animePastelDream
_softBakedVae etherBluMix
_etherBluMix7 v1-5-pruned
-emaonly

①

②

③

更新履歴†

2025/02/14 初版

参考資料†

私的AI研究会: サイト内リンク†

「Stable Diffusion」トップページ

ローカルマシンへのインストール手順
- 「Stable Diffusion web UI」AUTOMATIC1111 インストール
- 「Stable Diffusion web UI」openvinotoolkit インストール
「Stable Diffusion」チュートリアル
「Stable Diffusion」で画像生成
使い方の検証
- 「Stable Diffusion」プロンプト覚書
- 「Stable Diffusion」パラメータ詳細
- 「Stable Diffusion」生成演習　＜プロ・カメラマンに学ぶ＞
- 「Stable Diffusion」生成環境比較
- 「Stable Diffusion」拡張機能
「Stable Diffusion」の別のバージョン
- SD.Next
- Fooocus