皆さま、いかがお過ごしでしょうか。歌乃です。

Stable Diffusion で画像生成です。

今回は AnyLoRA + 自作モデル (LoRA) に Coolkids でちびキャラが出力できたのでその顛末です。

Coolkids の破壊力はすごいです。


KIDS ILLUSTRATION (coolkids) は子供向け絵本のイラストテイストの画像が出力できる追加学習モデル (LoRA) です。 licenseは厳しいので商用には使えません。あくまで趣味の範疇というかサンプルとして。

オリジナル学習モデルは、前回と同じもの。

Model: anyloraCheckpoint_bakedvaeBlessedFp16
VAE: None
Sampler: DPM++ SDE
Schedule type: Karras
Steps: 26
CFG scale: 7.5
Size: 768x768
Seed: 505539711
LoRA: COOLKIDS_MERGE_V2.5
LoRA: オリジナル

prompt:

girl, standing, white background, multicolored hair,parted lips,eyeliner, jacket

negative:

(worst quality, low quality:1.2), monochrome,grayscale,

今回生成したベース絵はこれ。
ベース画像

<original lora: 0、lora:COOLKIDS_MERGE_V2.5:0.2> 00029-505539711
Coolkids0.2、ほぼ元絵のまま。

<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.4>
00030-505539711

<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.6>
00031-505539711
徐々に coolkids の影響が見えてきました。

<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.8>
00032-505539711
完全に coolkids の影響を受けてます。0.7が閾値みたいです。

<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 1>
00033-505539711
子供絵っぽくなってきました。coolkids は影響度 1 で固定でよさそうです。

ここからオリジナルLoRAの出番です。

<original lora: 0.1、lora:COOLKIDS_MERGE_V2.5: 1>
00034-505539711
効果はまだなし?

<original lora: 0.2、lora:COOLKIDS_MERGE_V2.5: 1>
00035-505539711 何が作用したのか、ちびキャラ化が進行。思わぬ方向性に。

<original lora: 0.3、lora:COOLKIDS_MERGE_V2.5: 1>
00036-505539711 かわいい。普通にあり。ライセンス的に使えんけど( ゚Д゚)

<original lora: 0.4、lora:COOLKIDS_MERGE_V2.5: 1>
00037-505539711 ここで一気にちびキャラ化。使えないのが残念。

<original lora: 0.5、lora:COOLKIDS_MERGE_V2.5: 1>
00038-505539711 なぜか元絵のポーズがここで復活。良い。

<original lora: 0.6、lora:COOLKIDS_MERGE_V2.5: 1>
00039-505539711 ちびキャラから、子供キャラに復帰。元絵のポーズは維持されてる?

<original lora: 0.7、lora:COOLKIDS_MERGE_V2.5: 1>
00040-505539711 破綻一歩手前という感じです。

<original lora: 0.8、lora:COOLKIDS_MERGE_V2.5: 1>
00041-505539711

<original lora: 0.9、lora:COOLKIDS_MERGE_V2.5: 1>
00042-505539711

<original lora: 1、lora:COOLKIDS_MERGE_V2.5: 1>
00043-505539711 まだ破綻しないのは、coolkids の安定性という事でしょう。

<original lora: 1.2、lora:COOLKIDS_MERGE_V2.5: 1>
00045-505539711 この時点で破綻しました。

途中で自己規制に引っ掛かりそうな絵になったのでそのあたりも含めて、0.4~0.5あたりがベストなのかもしれません。


Coolkids + オリジナル学習モデルの意外な相性におどろきでした。
ライセンス問題で使えないのが本当に残念。
独自のちびキャラ系LoRAにも挑戦してみるかな。

オリジナル学習モデルの作り方はこちらのページで、どぞ (`・ω・´)。

Post If you feel like it, I would be happy if you could post it.