Stable Diffusion メモ(4) 絵の描けない人が Krita Plugin で選択範囲にimg2imgかける

今回はこれら記事の続き、になるのかな?

別画像に切り出してimg2imgするのは面倒だなぁということでGIMPのプラグインの登場を待っていたんですが、どうもKritaという(無料)ペイントツールのプラグインが開発されているということでそちらを利用。

たぶんPhotoshop プラグインと同じことができそう、あちらはどうもクラウド側でimg2imgをするっぽいけど、こちらはローカルでGPUをぶん回すようだ。

誰かもっと詳しく書いてください…

(9/4 追記) Krita プラグインがアップデートされ、batファイルを叩けば必要なパッケージを集めてくるようになりました。その代わりにgitが必須となったようです。アップデートにともない、導入方法を書き換えています。

Krita 5.1.0 をインストールする
Kritaを起動して、メニューから「設定」 - 「リソースを管理」を選択し、画面の「リソースフォルダを開く」を押す
エクスプローラが開くので、pykrita フォルダを開く(なければフォルダを作る)
取ってきたKrita Pluginのコード一式から krita/plugin 下の krita_diff フォルダとkrita_diff.desktop ファイルをpykrita フォルダに置く
Kritaを再起動する
メニューから「設定」 - 「Kritaの設定を変更」を選択し、画面の「Python プラグインマネージャー」を選択して「Krita Stable Diffusion Plugin」の左にあるチェックボックスのチェックを入れる。
「OK」ボタンを押し、Kritaを再起動する。

Python 3.10.6入れる
gitをいれる
CUDA 11.3 を入れる
git bash を起動し、任意のフォルダで
git clone https://github.com/sddebz/stable-diffusion-krita-plugin.git する
- 古いKrita Plugin や webui の実装を上書きせず、別のフォルダにcloneし直すのを推奨
Stable Diffusionのモデルが置いてあるところからsd-v1-4.ckptをダウンロードし、model.ckptにリネームした上でwebui.batがあるフォルダと同じところに配置する
(オプション) GPFGANを使いたい場合は、ここからGPFGANv1.3.pthをダウンロードしてwebui.batがあるフォルダと同じところに配置する
webui-user.batを実行する(普通に実行すればよい、"管理者として実行"はしないこと)
なんやらかんやらあってKrita プラグインのサーバー側が起動します。

Krita 5.1.0 をインストールする(少なくともそれより前のバージョンは動かなさそう)
Krita Plugin のリポジトリからコードをClone、もしくはzipでとってくる
fork元のStable Diffusion のインストール方法に従い、webui.pyが実行できるようにする(このあたりは日本語で導入方法を書いてる方がおられると思う)
- anaconda or minicondaが必須、krita pluginで環境変数 %CONDA_PATH% が要求される

Krita Plugin では追加で以下の実行をする

conda env update -n ldo --file environment.yaml --prune

Kritaを起動して、メニューから「設定」 - 「リソースを管理」を選択し、画面の「リソースフォルダを開く」を押す
エクスプローラが開くので、pykrita フォルダを開く(なければフォルダを作る)
取ってきたKrita Pluginのコード一式から krita/plugin 下の krita_diff フォルダとkrita_diff.desktop ファイルをpykrita フォルダに置く
Kritaを再起動する
メニューから「設定」 - 「Kritaの設定を変更」を選択し、画面の「Python プラグインマネージャー」を選択して「Krita Stable Diffusion Plugin」の左にあるチェックボックスのチェックを入れる。
「OK」ボタンを押し、Kritaを再起動する。

krita.cmd を実行する
Krita を起動する
Stable Diffusionにかけたい画像の範囲を選択する。
SD Pluginのドッキングパネルでいろいろ設定する or krita_config.yamlをいじる
ドッキングパネルはメニューの「設定」-「ドッキングパネル」-「SD Plugin」にチェックを入れると出てきます。

大抵の設定の優先度は SD Pluginドッキングパネルの設定 > yamlの設定のようだ
最初yamlで denoising_strengthを設定しても全然効かなくてなんだこれはとウンウン悩んでいましたが、ドッキングパネルを出してなかっただけでした…
Kritaの画面でCtrl + Alt + Q (txt2img) または Ctrl + Alt + W (img2img) を押す