Stable Diffusionはいいぞ。【前編】

皆さん、こんにちは。9月に入り季節は秋になりましたが、未だに夏の暑さが続く中いかがお過ごしでしょうか。

さて、最近の私はStable Diffusion(ステーブル・ディフュージョン)という描画AIにハマっています。
この描画AIは、先月末よりオープンソースとして無償公開され、ユーザーがテキストでプロンプトにキーワード(いわゆる呪文)を入力することで、それに応じて画像が生成される仕組みとなっており、画風はフォトリアルなものから有名画家風タッチ、アニメ調(いわば二次元)なものまで幅広く対応しています。

Stable Diffusion 2-1 - a Hugging Face Space by stabilityai

私も最初はデモ版を用いてフォトリアルなものから始めてみましたが、それでも物足りなくなり、第三者によるツイートがきっかけで二次元イラストを生成してみようと考えるようになりました。
以下は参考にしたツイート。

Stable Diffusion のプロンプト(絵の仕様書)について少しわかってきたのでこのスレッドにメモを残しておきます。
アニメ調イラストの場合、崩壊しないプロンプトを作るのがとても難しいのです。

アニメ調イラストを描かせたい人の参考になればと思います。
(Ver1.4 2022/08/25)#stablediffusion pic.twitter.com/HrFJCE3Z9M

— 金剛あかね (@akanekongo) August 25, 2022

A princess knight in a dress stands in a meadow,meteorite dress,Sunlight shines through the clouds,Behind the meadow are ruin,Blonde with long hair,a beatiful girl,kawaii girl,matte patinting,Very saturated,makoto shinkai,azurlane Jeanne

スレッド先頭の画像を作ったプロンプトです

— 金剛あかね (@akanekongo) August 25, 2022

プロンプトは英語で作ります。
正しくないと思いますが下記のような構成になります。
主題、衣装、情景、髪型など、アニメ調イラスト指定、指定した作家画風、参考キャラクター

— 金剛あかね (@akanekongo) August 25, 2022

アニメ調イラストの指定はkawaii girlとmakoto shinkai で行います。
参考キャラクターはある程度有名で作りたい画像に近いキャラクターを選びます(ノイズが少ない物を選ぶ)
アズールレーンのジャンヌダルクを使いました

参考キャラクターの有り無しの比較
※有りが1枚目 pic.twitter.com/2ZbELVtrCm

— 金剛あかね (@akanekongo) August 25, 2022

…とまあ、こんな風に自分の好みに合わせたイラストを生成する上でそれらの「呪文」を入力することよってこんな風に出来たりするんですね。

これは某アニメ風の水着少女をAI生成したものですが、完全に出てくるわけではなく、時には修正箇所が必要で、場合によっては作画崩壊レベルになることも。
上記の画像はなんとか編集できるレベルですので、アイビスペイントを使って気になる箇所を修正してみました。
それがこちら↓

元絵は不自然な部分がとにかく多いので、イラストに関してはシロートな私はGoogle検索などを駆使して手直ししています。
まず、腕に不自然に付いているリボンは腕に巻くようにし、トップスの肩紐はずらし、肩や首下、胸なども細かく色入れしていきます。
また前髪や目、眉毛も適宜調整し、おへそも位置を若干ずらしています。
仕上げたら、色合いや明るさなどを調整して完成です。
ここでは人物をメインに行なっているので、背景は何も手を加えていません。

まあ、それでもここまで出来ればいいやと自己満足に浸っています。
しかし、それでは終わらず次のAI生成をを求めて、絵を極めて(？)行くのであった。。。

続く。