皆さま、いかがお過ごしでしょうか。歌乃です。
Stable Diffusion で画像生成です。
今回は AnyLoRA + 自作モデル (LoRA) に Coolkids でちびキャラが出力できたのでその顛末です。
Coolkids の破壊力はすごいです。
KIDS ILLUSTRATION (coolkids) は子供向け絵本のイラストテイストの画像が出力できる追加学習モデル (LoRA) です。
licenseは厳しいので商用には使えません。あくまで趣味の範疇というかサンプルとして。
オリジナル学習モデルは、前回と同じもの。
Model: anyloraCheckpoint_bakedvaeBlessedFp16
VAE: None
Sampler: DPM++ SDE
Schedule type: Karras
Steps: 26
CFG scale: 7.5
Size: 768x768
Seed: 505539711
LoRA: COOLKIDS_MERGE_V2.5
LoRA: オリジナル
prompt:
girl, standing, white background, multicolored hair,parted lips,eyeliner, jacket
negative:
(worst quality, low quality:1.2), monochrome,grayscale,
<original lora: 0、lora:COOLKIDS_MERGE_V2.5:0.2>
Coolkids0.2、ほぼ元絵のまま。
<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.4>
<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.6>
徐々に coolkids の影響が見えてきました。
<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 0.8>
完全に coolkids の影響を受けてます。0.7が閾値みたいです。
<original lora: 0、lora:COOLKIDS_MERGE_V2.5: 1>
子供絵っぽくなってきました。coolkids は影響度 1 で固定でよさそうです。
ここからオリジナルLoRAの出番です。
<original lora: 0.1、lora:COOLKIDS_MERGE_V2.5: 1>
効果はまだなし?
<original lora: 0.2、lora:COOLKIDS_MERGE_V2.5: 1>
何が作用したのか、ちびキャラ化が進行。思わぬ方向性に。
<original lora: 0.3、lora:COOLKIDS_MERGE_V2.5: 1>
かわいい。普通にあり。ライセンス的に使えんけど( ゚Д゚)
<original lora: 0.4、lora:COOLKIDS_MERGE_V2.5: 1>
ここで一気にちびキャラ化。使えないのが残念。
<original lora: 0.5、lora:COOLKIDS_MERGE_V2.5: 1>
なぜか元絵のポーズがここで復活。良い。
<original lora: 0.6、lora:COOLKIDS_MERGE_V2.5: 1>
ちびキャラから、子供キャラに復帰。元絵のポーズは維持されてる?
<original lora: 0.7、lora:COOLKIDS_MERGE_V2.5: 1>
破綻一歩手前という感じです。
<original lora: 0.8、lora:COOLKIDS_MERGE_V2.5: 1>
<original lora: 0.9、lora:COOLKIDS_MERGE_V2.5: 1>
<original lora: 1、lora:COOLKIDS_MERGE_V2.5: 1>
まだ破綻しないのは、coolkids の安定性という事でしょう。
<original lora: 1.2、lora:COOLKIDS_MERGE_V2.5: 1>
この時点で破綻しました。
途中で自己規制に引っ掛かりそうな絵になったのでそのあたりも含めて、0.4~0.5あたりがベストなのかもしれません。
Coolkids + オリジナル学習モデルの意外な相性におどろきでした。
ライセンス問題で使えないのが本当に残念。
独自のちびキャラ系LoRAにも挑戦してみるかな。
オリジナル学習モデルの作り方はこちらのページで、どぞ (`・ω・´)。