「落書きを抑揚のあるペン画として清書して着色する」のをAIにやらせられないかな？と思って試行錯誤
目次(クリックでジャンプ)
原画の作成
電車の移動中にiPadをサッと取り出して落書きをする。apple pencilを取り出すのも面倒なので指で描く。細かい描写はできない(言い訳)
AIが線画を認識しやすいように白黒反転させておく
線画に変換
上の画像をStable Diffusion(SeaArt AIで使用)のコントロールネットできれいな線画にする(この過程は必要でなかった気もする)
ルートA
プロンプトをテキトーに(「少女」など)入力して、画面右下の「ControlNetに送る」でコントロールネットの画面に移動
コントロールネットのタイプは「lineart_anime」を選択。プリプロセッサは「No(参考画像として線画そのものをアップロードしているので)」
モデルは「RPG」(何故これにしたのか不明。自動でなってた？)
生成させるとコレが出来る
キレイとは言えないが線画になった？このうち1枚をダウンロードして、白黒反転
以降はこの画像をアップロードして画像を生成する
ルートB
モデルに「RPG」ではなく「Comic Babe」を使用してみる
結果、元絵を調整しただけのような…
元絵のメイドとコントラストを調整した画像
変わらんねｗこれを白黒反転させる
ルートBはこれをアップロードしてみる。線が汚いのがどう影響するか
線画の清書(ルートA)
上の画像を新たにStable Diffusion(SeaArt AIで使用)のコントロールネットで着色する
プロンプトをテキトーに入力して「ControlNetに送る」
コントロールネットのタイプは「scrible_hed」プリプロセッサは「No(参考画像として線画をアップロードしているので)」
モデルは「ReV Animated」(以前、きれいな絵ができたので)
出来上がりはなぜか写実的なイラスト…
線を書かないモデルなんだろう…
プロンプトを「線画」に、モデルを「Counterfeit-V3.0」に、コントロールウェイトを最大(2)にしてみる
結果。線画っぽいのが1枚出来た♪
プロンプトを詳細にして色々試すと線画が増えてきた
ここで、モデルだけを変えてみる
「MeinaMix」というモデル
線画にならない
「Comic Babes」というモデル
良いね。このモデルで線画自体を作れば良かった気がする(汗)
ちなみにコントロールウェイトを「1(標準)」にすると、このモデルの標準の顔立ち(ちょっと下膨れ？)に近づく
ウェイトを「1.5」にするとバランスが良く感じる
「Toon You」というモデル
意外なことに、線画にならない
「GzKComic_v1_fp16」というモデル
細かいタッチまで拾いすぎて汚い
コントロールウェイトを2から1にしてみると目元が線画にならない
1.5にしてもダメ
今度は「Hiccup」というモデル(濃い！)
濃いｗ(右は調整した画像)
コントロールウェイトを1.5に
「comic babe」には負けるか
試した結果、当然だが線が「濃い」モデルと相性が良いのが分かる
さらに「」というモデル
線画の清書(ルートB)
原画を画像調整して白黒反転させたもの
をアップロードしてコントロールネットで「Comic Babe」モデルにペンで清書させる
結果♪
おお、今風で良いじゃんｗこのタッチは自分では描けないからAIを通す価値があるな
着色もできるかな？
プロンプトから「モノクロ」などを除去して「日焼け」などを入れると小麦色になった
さらに青空とか色々入れると
う～ん。目元にペンの描写がなくなってしまった
プロンプト上で、ペン画を示唆するワードを前半に持ってくると1枚ペン画が出た。
プロンプトを研究しないとダメそうだ。
あるいは、モノクロペン画をダウンロードして大雑把に着色してから上げるとか？
線画を変更しつつペン画にする
ペン画にする時点で表情などを修正する
プロンプトに「笑顔」を加えて、コントロールウェイトを「1.9」に下げる(プロンプトの影響が高くなる)
笑った
目を細くしたい。ウェイトを更に下げたり、プロンプトにワードを入れたら、「高精細」「最高品質」がよくないのか目がペン画にならない
(ここでseaArtAIが「残高不足」になったので中断)