Stable Diffusion プロンプトメモ

     

Stable Diffusion web UI(AUTOMATIC1111版)のインストール方法

Stable Diffusion web UI(AUTOMATIC1111版)をWindowsで導入する方法(Stable Diffusion2.1版)
画像を自動生成するAI「Stable Diffusion2.1」をUIで簡単に操作できるツール、Stable Diffusion web UI(AUTOMATIC1111版)を導入する方法について説明していきます。

 

気がついたこと

  • 解像度が上がれば上がるほど、小さな細かい部分の崩壊が防げる気がする。
    例えば、前進の人間を描いてもらった場合、512x512pxだと顔が崩壊するが、1024x1024pxだときれいに出力できる。ただし、出力時間はかなり長くなる。

 

強調・減衰

【】文字選択 + Ctrl + 「上下矢印」で強度調整
(), {} プラス、[]マイナス

解像度

基本:512 – 512
768 – 1024

ねこすけ虎之助

((The tip of the right ear is slightly torn )), ((masterpiece)), (((best quality))), ((ultra-detailed)), ((illustration)), perfect lighting, red tabby cat,

右耳の先端が欠けてる:The tip of the right ear is slightly torn
茶トラ:red tabby cat

ポジティブ 例

高画質
(8k wallpaper, best quality, masterpiece, extremely detailed, ultra-detailed:1.4)

写真
realistic, photo-realistic, RAW photo

ネガティブ 例

ネガティブ クオリティ
((lowres)), ((low quality)), ((worst quality))
(worst quality:1.4),(low quality:1.4)

ネガティブ
(bad hands, mutated hands and fingers), bad anatomy, bad feet, bad face, anatomical nonsense,
(monochrome:1.4), lowres, low quality, worst quality, jpeg artifacts, unfinished, sketch, monotone, greyscale, doujinshi, simple background,
signature, artist name, artist logo, watermark, error, meme, cropped, stitched, blurry, censored, chart, comparison, lineup, before and after,
extra arms, extra legs, extra digits, extra fingers, missing limb, missing finger,
furry, futanari, femboy, pony, animal, sonic, pokemon,
cuts, blood, organs, corpse, morbid, disfigured, malformed, mutated, mutation, ugly, dirty, peeing, pee, scat, old, obesity, fat, bad

NSFW:職場閲覧注意

アウトライン強めの2D

ネガティブに3Dを入れると絵に縁ができるかも知れない。強度を上げると太くなる。
(3D:1.5)

“anime coloring” or “black border”でも同じ様になるかも。

 

 

この画像すごい良い

https://twitter.com/8co28/status/1628905953549762560/photo/2

 

アイコンを作ってみた

Abstract icon logo design with cat motif, catoon, logo, cat, vector drawing, simple, minimal.(red tabby cat:1.2), simple background,

ネガティブ:(3D:1.5), NSFW, (worst quality:1.4),(low quality:1.4), (bad hands, mutated hands and fingers), bad anatomy, bad feet, bad face, anatomical nonsense

 

いい感じのを選ぶ。

 

変な線をAffinity Photo2で修正する。

 

左右反転して、目をジト目にする。

 

ねこすけと虎之助のステッカーが完成。

 

オリジナルLoRAを作る

いろいろなポーズのねこすけを出力したいので、下記ブログを参考に作ってみる。

LoRAを使った学習のやり方まとめ!好きな絵柄・キャラクターのイラストを生成しよう【Stable Diffusion】
今回は画像生成AIに関する中級者向けの話題で 既存のモデルに好きな絵柄・キャラクターを追加学習させる「LoRA」のやり方 を一通りご紹介するという内容になっています。 Stable Diffusion系のモデルを使って画像を生成していると、

うまく行かずとりあえず諦める。

 

ねこすけの絵本を作る

ChatGPTを使って、絵本のストーリーを考えてもらいました。

次の情報を元に、絵本のストーリーを考えてください。
・お爺さんが一人で森に住んでいる
・腹ペコの猫がお爺さんのところに来る
・お爺さんは猫にご飯をあげる
・猫は妊娠していた
・猫は無事出産した
・お爺さんは子猫のご飯を買いに街に降りていく
・その間に子猫がカラスに襲われそうになる
・子猫を助けるために、母猫はカラスと戦う
・カラスは追い払うことができたが、耳に傷を負う
・お爺さんが帰ってきて、手当をする

すると、このように返ってきました。

ある日、森に住んでいるお爺さんは、腹ペコの猫が自分の家の前にやってきたことに気づきました。お爺さんは、猫がお腹が空いていることを察し、すぐに猫にご飯をあげました。猫は大満足で、そのままお爺さんの家に住むことになりました。

しかし、しばらくして猫は妊娠していたことがわかり、お爺さんは猫が安心して出産できるように手伝いました。猫は無事に子猫を出産し、お爺さんは喜びました。

しかし、その後、お爺さんは子猫たちに食べ物が必要だと気づき、街に降りてご飯を買いに行くことにしました。その間、子猫たちはカラスに襲われそうになりました。しかし、母猫は勇敢に立ち向かい、カラスを追い払うことができました。

しかし、母猫はカラスとの戦いで耳に傷を負ってしまいました。お爺さんが帰ってきたときには、母猫は疲れ果てていました。お爺さんは母猫の傷を手当てし、優しく世話をしました。

子猫たちは、お腹いっぱいになって、母猫と一緒に眠りました。お爺さんは、母猫と子猫たちを見ながら、家族の大切さを再確認しました。そして、おじいさんと猫の家族は、仲良く森で暮らし続けることになりました。

題名も聞いてみました。

この絵本の題名を教えてください。

題名も考えてくれました。

申し訳ありませんが、このストーリーには題名が含まれていません。ストーリーを元にして絵本を作成する場合は、自分で題名を考える必要があります。例えば、「おじいさんと腹ペコの猫」という題名が考えられます。

 

ページ分けと絵の感じ

P1
ある日、森に住んでいるお爺さんは、腹ペコの猫が家の前にやってきたことに気づきました。
(家の外からお爺さんを覗く感じ)

P2
お爺さんは、猫がお腹が空いていることを察し、すぐに猫にご飯をあげました。
(お爺さんが外で餌をあげて食べている)

P3
猫は大満足で、そのままお爺さんの家に住むことになりました。
(家の外にダンボールハウス)

P4
しばらくして猫は妊娠していたことがわかり、お爺さんは猫が安心して出産できるように手伝いました。
(ダンボールハウスで猫出産)

P5
猫は無事に子猫を出産し、お爺さんは喜びました。
(子猫をなでているお爺さん)

P6
その後、お爺さんは子猫たちに食べ物が必要だと気づき、街に降りてご飯を買いに行くことにしました。
(子猫は1ヶ月ほど経った状態。お爺さんが遠くにいてそれを見る猫を背中からのアングル)

P7
その間、子猫たちはカラスに襲われそうになりました。
(背中を立ててカラスに威嚇する)

P8
母猫は勇敢に立ち向かい、カラスを追い払うことができました。
(カラスに猫パンチ)

P9
しかし、母猫はカラスとの戦いで耳に傷を負ってしまいました。お爺さんが帰ってきたときには、母猫は疲れ果てていました。
(ぐったりして耳が怪我してる。おじさんは遠くに小さくいる)

P10
お爺さんは母猫の傷を手当てし、優しく世話をしました。
(耳に包帯を巻く)

P11
子猫たちは、お爺さんが買ってきてくれたご飯をたくさん食べました。
(ご飯を食べる猫)

P12
お爺さんは、母猫と子猫たちを見ながら、家族の大切さを再確認しました。
(猫たちはすやすや寝ている)

P13
そして、おじいさんと猫の家族は、仲良く森で暮らし続けることになりました。
(包帯を取って桜耳になっているねこ)

 

絵本情報

情報 内容
タイトル おじいさんと腹ペコの猫
ページ数 13ページ
登場人物 お爺さん(1人)
母猫(1匹)
子猫(1匹)
タッチ キャラクター:柔らかい感じ
背景:アニメ

 

絵の生成

猫の絵の生成がうまくいかない場合、そのモデルに猫の絵のデータがないかも?
LORA

Pastel Mix

abyss OrangeMix2

Arknights

Counterfelt
ネガティブにhumanを追加しても、人が割り込んでくる。

derrida_final

 

ControlNetで猫のポーズを指定する

GitHub - lllyasviel/ControlNet: Let us control diffusion models!
Let us control diffusion models! Contribute to lllyasviel/ControlNet development by creating an account on GitHub.

 

プロンプト

小屋:hut
balcony:バルコニー
Shabby:みすぼらしい

ねこ(sunshinemix_sunlightmixPruned.safetensors)
(8k, best quality, masterpiece:1.4), (1 cat:1.5), (red tabby cat:1.5), (light brown skin:1.2), (full body:1.4), simple and white background, (black eyes:1.5), light from the front, cat eating food, silver dish, bird’s-eye view, <lora:cutescrap05v_cutescrap3:0.8>

(NSFW, human:1.4), (worst quality, low quality:1.4), text, watermark,

お爺さん
(8k, best quality, masterpiece:1.4),(full body:1.4), simple and white background, (black eyes:1.5), light from the front, bird’s-eye view, An old man with a white beard sitting on a chair, overalls,

 

絵本制作

P1
ある日、森に住んでいるお爺さんは、腹ペコの猫が家の前にやってきたことに気づきました。
(家の外からお爺さんを覗く感じ)

P2
お爺さんは、猫がお腹が空いていることを察し、すぐに猫にご飯をあげました。
(お爺さんが外で餌をあげて食べている)

(8k, best quality, masterpiece:1.4), (1 cat:1.5), (red tabby cat:1.5), (light brown skin:1.2), (full body:1.4), simple and white background, (black eyes:1.5), light from the front, cat eating food, silver dish, bird’s-eye view, <lora:cutescrap05v_cutescrap3:0.8>

P3
猫は大満足で、そのままお爺さんの家に住むことになりました。
(家の外にダンボールハウス)

P4
しばらくして猫は妊娠していたことがわかり、お爺さんは猫が安心して出産できるように手伝いました。
(ダンボールハウスで猫出産)

P5
猫は無事に子猫を出産し、お爺さんは喜びました。
(子猫をなでているお爺さん)

P6
その後、お爺さんは子猫たちに食べ物が必要だと気づき、街に降りてご飯を買いに行くことにしました。
(子猫は1ヶ月ほど経った状態。お爺さんが遠くにいてそれを見る猫を背中からのアングル)

P7
その間、子猫たちはカラスに襲われそうになりました。
(背中を立ててカラスに威嚇する)

P8
母猫は勇敢に立ち向かい、カラスを追い払うことができました。
(カラスに猫パンチ)

P9
しかし、母猫はカラスとの戦いで耳に傷を負ってしまいました。お爺さんが帰ってきたときには、母猫は疲れ果てていました。
(ぐったりして耳が怪我してる。おじさんは遠くに小さくいる)

P10
お爺さんは母猫の傷を手当てし、優しく世話をしました。
(耳に包帯を巻く)

P11
子猫たちは、お爺さんが買ってきてくれたご飯をたくさん食べました。
(ご飯を食べる猫)

P12
お爺さんは、母猫と子猫たちを見ながら、家族の大切さを再確認しました。
(猫たちはすやすや寝ている)

P13
そして、おじいさんと猫の家族は、仲良く森で暮らし続けることになりました。
(包帯を取って桜耳になっているねこ)

 

コメント

タイトルとURLをコピーしました