皆さま、いかがお過ごしでしょうか。歌乃です。

Stable Diffusion で画像生成です。

今回は AnyLoRA + 自作モデルのテスト。

Model: anyloraCheckpoint_bakedvaeBlessedFp16.safetensors
VAE: None
Sampling: DPM++ SDE Karras
Sampling step: 20
Size: 768 x 768
CFG Scale: 7.5
Seed: 3941494802

prompt:

1girl,solo,upper body, white background, multicolored hair,parted lips,eyeliner, jacket

negative:

(worst quality, low quality:1.2), monochrome,grayscale,

生成したベース絵はこれ。

オリジナル学習モデルは、主に目元をオリジナルイラストに近付けるために自分で用意した52枚分の胸像画をトレーニングさせたもの。

<original lora: 0.1>
この時点で元絵が維持されてないので、顔だけをオリジナルにするのは難しそう。

<original lora: 0.2>
手が崩れるのは良くあること。
顔にほんのりとオリジナルの要素が見える。

<original lora: 0.3>
元絵のポーズが変わってしまったので、この時点で自分が求めていた追加学習モデルとしては使えない(´・ω・`)

<original lora: 0.4>

<original lora: 0.5>
腕が消失してるのはoriginal model に使った画像で腕が入ってなかったせいかな。

<original lora: 0.6>
腕復活。だいぶ幼い感じになってきたのは、学習に使ったオリジナル画像のせい。

<original lora: 0.7>
完全にオリジナル画像の影響が出てます。ぎり胸像イラストとして使えるかな。構図も何もないので、元絵に加工を加えるという用途には使えない。

<original lora: 0.8>
オリジナル画像の線画の粗さが出てる。

<original lora: 0.9> ここでモデルとしては破綻しました。耳と上着が描かれてるだけでも恩の字かな。

<original lora: 1>

<original lora: 1.1>

<original lora: 1.2> この時点でほぼオリジナル画像がでてきました。

最後の方の画像を見てもらってもわかるとおり、結構ラフ（学習させたいとこだけきっちり描いた）な画像を使って学習させてもそれなりによさげな感じで抽出してくれます。

基本のモデルにオリジナルのテイストを混ぜたいときにいいかなと思います。

オリジナル学習モデルの作り方はこちらのページで、どぞ (`・ω・´)。