【Stable Diffusion】ペン入れしたイラストにAI画像生成で着色してみた【ControlNet】

前回の記事では、ラフを用意して、AIでペン入れと彩色が可能か試してみました。

今回は、ペン入れした画像を用意して、AIで自動彩色が可能か試してみました！

ペン入れした画像を用意

アイドリッシュセブンの「小鳥遊紡」ちゃんです。
アニメを見てハマったので気まぐれで描いたものの、色を塗るのがめんどくさくてペン入れだけして放置していました。

諸事情により、背景色と一体化していました。消しとけよ。
フリルペン（背景色あり）を使いたいがためのイラストだったので、不要な部分をレイヤーで上書きするために重ねたやつしか残ってなかったのだった。

前回に引き続き、使用するモデルは「ambientmix」です。
アニメ塗りで、自分の絵に近い結果が得られることを期待して選んでいます。

下記1点を変更。他はデフォルト。

導入済みの「EasyNegativeV2」を入れています。

下記2点を変更。他はデフォルト。

比較のため、前回の記事と同じ設定でいってみたよ。

えっ、すごくないですか？？？？

リボンとか細部が溶けてしまっていることを除けば、ニュアンスほぼそのまんまやで？？？

なお、袖の折返しのピンク色は反映されませんでした。
指示が悪いと思うのですが、どのようにお願いすればよかったんだろう。

ちなみに、既存キャラクターなのでプロンプトに名指ししてみたバージョンもあるけど、色設定は反映されませんでした。モデルとして利用されていそうな巨大ジャンルなら再現できるのかな。

100％完全に塗ってくれるわけではないけど、軽く手入れすれば完成としても良さそう。
あとは用途によるかなぁ。自己満足のラクガキレベルならこれでいいのでは？

ペン入れしたら自動彩色できそう！
ただし、線や塗りが完全に再現されるわけではない。

余談ですが。
新しいモニタを導入したので、配置の関係上、今まで使っていたモニタを縦にして使ってみたらまーーー使いやすい！

ControlNetを導入するとかなり縦長表示になって、スクロールすると「Generate」ボタンが隠れてしまうの地味にストレスだったので、これで解消できました。

モニタを縦にする必要性がわからなかったのですが、使う側の問題でした。
Twitter見るだけじゃなかったんだ。