
【はじめてのAnima】自作LoRAを別のモデルにつないだら、絵柄がこんなに変わった
こんにちは。
前回は、文章と3Dポーズで白衣ちゃんのポーズを比べてみました。
今回は、背景の描き込みをもう少し増やせないか、いろいろ試してみました。
というのも、以前から少し複雑な条件でイラストを生成するときに、背景の描き込みが少ないのが気になっていたからです🤔

背景の描き込みが少ない
白衣ちゃんの LoRA は、Anima の Base 版で作ったものです。
今回のお題は、量産型の服でメリーゴーランドの前に立つ白衣ちゃんです。
いつもの書き方で、全身と背景が入るように頼みました。

背景が少しシンプルすぎるような気がします。
3 枚出しても、どれも同じ感じでした。

masterpiece, best quality, safe, 1girl, solo, hakuinoko, jitome, blush, low twin braids, black hair ribbon, ryousangata fashion, baby pink chiffon blouse with puffy princess sleeves, white frilled collar and a big black ribbon bow with a small heart bijou, black high-waisted flared skirt with pearl buttons, pink ribbon hair clips with pearls, white lace frilled socks, black glossy platform shoes, a pink quilted heart-shaped mini bag on her arm, holding a heart-shaped strawberry candy apple close to her chest with both hands. She stands in front of an ornate pastel carousel at an amusement park, with string lights on the carousel roof, carousel horses and a distant ferris wheel. She is a little right of center, seen from head to toe and not too large, so the carousel and the sky stay wide around her. She tilts her head a little with a shy smile. Bright daytime.worst quality, low quality, artist name, blurry, jpeg artifacts, bad anatomy, bad hands, watermark, signature, text設定は、er_sde・30 ステップ・CFG 4 です(このあとも同じです)。
Base 版のまま、プロンプトと拡大を試す
まずは、モデルはそのままで直せないか試しました。
Anima の配布ページには、先頭に入れるタグとして
masterpiece, best quality, score_7, safe が、
ネガティブには score_1, score_2, score_3 や chromatic aberration などが書かれていました。
今までの書き方は score_7 を入れていなかったので、これに合わせます。
あわせて「Bright daytime.」を、夕方の逆光を書いた 2 文に替えました(B)。
次に、白衣ちゃんを大きくするため cowboy shot(膝から上の構図)を足し、
りんご飴を口元に持つしぐさを書きました(C)。
最後に、C を 1.5 倍に拡大してもう一度描き直す hires fix を試しました(D)。
拡大してから強さ 0.35 で描き直すので、細かいところが増えるのを期待しました。

B で原色が消えて、パステルにまとまりました。
C では白衣ちゃんが大きくなり、表情も見えるようになりました。
木馬や屋根の書き込みも、多少増えたように思います。
D はまつ毛や髪の線が少し細かくなりましたが、背景はCとほとんど同じです。
1 枚あたり約 26 秒が約 95 秒になりました。
待った時間のわりに、背景の見た目は大きくは変わりませんでした。
C の 3 枚です。1 枚は全身のままでした。

masterpiece, best quality, score_7, safe, 1girl, solo, hakuinoko, jitome, blush, low twin braids, black hair ribbon, cowboy shot, ryousangata fashion, baby pink chiffon blouse with puffy princess sleeves, white frilled collar and a big black ribbon bow with a small heart bijou, black high-waisted flared skirt with pearl buttons, pink ribbon hair clips with pearls, white lace frilled socks, black glossy platform shoes, a pink quilted heart-shaped mini bag on her arm, holding a heart-shaped strawberry candy apple. She stands in front of an ornate pastel carousel at an amusement park, with string lights on the carousel roof and carousel horses behind her. She is seen from the knees up, a little right of center, and fills most of the picture height. She leans forward a little, holds the candy apple up near her lips with both hands and tilts her head, glancing at the viewer with a shy smile. Soft late-afternoon sunlight comes from behind her and puts a warm rim light on her hair and shoulders, while the string lights on the carousel glow softly. Gentle pastel colors with soft shadows.worst quality, low quality, score_1, score_2, score_3, artist name, blurry, jpeg artifacts, chromatic aberration, bad anatomy, bad hands, watermark, signature, text, nsfw, explicitB は、C から cowboy shot としぐさを外し、A の構図の文に戻したものです。
B ではタグと光の文を、C では構図としぐさを、それぞれまとめて変えています。
派生モデルにつないでみる
プロンプトや拡大では背景があまり変わらなかったので、
モデルを変えたら変わるのではと思い、試してみました。
Anima には、Anima をもとに追加で学習させた「派生モデル」がたくさんあります。
最初に試したのは botan_anima(base1.0-v3.1)です。
配布ページによると、Base 版をもとに、高い解像度の画像で追加学習したモデルです。
変えたのはモデルだけで、プロンプトも LoRA も C と同じです。

白衣ちゃんは白衣ちゃんのまま、木馬の鞍の模様や屋根の電球が一気に細かくなりました。
3 枚とも膝から上の構図になり、1 枚あたりの時間は約 26 秒のままです。
拡大して描き直すより、こちらのほうがずっと背景が変わりました。
つなぐモデルを 5 つ替えてみる
モデルでここまで変わるなら、ほかのモデルにつないだらどうなるのか気になりました。
そこで、同じプロンプト・同じ Seed で、モデルだけを 5 つ替えて並べました。
Base 版(ここまでの C)
botan_anima(base1.0-v3.1)
AnimaYume(v1.5): ダウンロード数の多い、Anima の追加学習モデル
GleamPalette ANIMA(v2): 配布ページに「柔らかな光のグラデーション、細かな背景描写が特徴」と書かれていたマージモデル
Anima Aesthetic(v1.1): 配布元が高品質な画像で追加学習した版

どのモデルでも、ジト目・黒いリボン・服の形は残りました。
白衣ちゃんはそのままで、背景の書き込みと塗りがモデルごとに別物になりました。
いちばん書き込みが多かったのは GleamPalette です。
木馬に陰影が入り、奥がぼけて奥行きが出ています。
白衣ちゃんの髪や顔にも陰影が入って、少し大人っぽい塗りになりました。
1 枚あたりは約 29 秒で、ほかより少しだけ長めでした。

一方で、AnimaYume は線が細く、淡いパステルの平たい塗りになりました。
これはこれでかわいいのですが、背景の書き込みは Base 版と同じくらいです。

膝から上の構図になるかも、モデルで違いました。
botan_anima と GleamPalette は 3 枚とも膝から上、
Base 版・AnimaYume・Aesthetic は 1 枚ずつ全身になりました。
ほかの場面でも比べてみる
メリーゴーランドだけの話なのか気になったので、
冬のデート服・ライブハウス・ラッフルのワンピースの 3 場面でも、
Base 版・botan_anima・AnimaYume・GleamPalette を比べました。
この 3 場面は、細かいところを増やす Detail Daemon というノードを、どのモデルにも同じ強さ(0.2)で足して出しています。
冬のデート服

masterpiece, best quality, score_7, safe, 1girl, solo, hakuinoko, jitome, blush, low twin braids, black hair ribbon, cowboy shot, winter date outfit, white short coat with a fluffy faux fur collar, light brown knit dress, burgundy beret, small brown leather shoulder bag, white knit mittens, holding a paper cup of hot cocoa with both hands. She stands on a street in front of a station, lined with bare trees wrapped in string lights, shop windows and a street clock behind her. She is seen from the knees up, a little left of center, and fills most of the picture height. Her cheeks are pink from the cold, she breathes a small white breath and glances at the viewer with a shy smile. Soft late-afternoon winter sunlight comes from behind her and puts a warm rim light on her hair and the fur collar, while the string lights glow faintly. Gentle colors with soft shadows.worst quality, low quality, score_1, score_2, score_3, artist name, blurry, jpeg artifacts, chromatic aberration, bad anatomy, bad hands, watermark, signature, text, nsfw, explicitこちらは、Base 版でもイルミネーションやショーウィンドウが細かく描かれました。
4 つのモデルの差は、いちばん小さい場面でした。
ライブハウス

masterpiece, best quality, score_7, safe, 1girl, solo, hakuinoko, jitome, blush, low twin braids, black hair ribbon, (cowboy shot:1.5), bangya fashion, punk fashion, oversized black off-shoulder long-sleeve band t-shirt with a red graphic print, sleeves covering her hands, red and black tartan plaid tiered mini skirt with silver chains, black fishnet tights, black and white striped arm warmers, studded black choker with a small silver cross, chunky black platform boots, a ticket pass on a lanyard around her neck, rubber wristbands. She stands in front of the entrance of a small live music venue with neon signs, a marquee light board and framed concert posters on the wall. She is seen from the knees up, a little left of center, and fills most of the picture height. She leans her shoulder against the wall, tugs at her long sleeve near her mouth and looks at the viewer a little shyly. Soft late-afternoon sunlight comes from behind her and puts a warm rim light on her hair and shoulders, while the neon signs glow softly. Gentle colors with soft shadows.worst quality, low quality, score_1, score_2, score_3, artist name, blurry, jpeg artifacts, chromatic aberration, bad anatomy, bad hands, watermark, signature, text, nsfw, explicitGleamPalette はネオンの色が濃く、奥行きのある入口になりました。
Base 版は看板やポスターが平たいままです。
ライブハウスは、膝から上にするため (cowboy shot:1.5) と強めています。
そして 3 枚ずつ見ていくと、壁のポスターに白衣ちゃんに似た顔が描かれた絵が、どのモデルにもありました。
ラッフルのワンピース

masterpiece, best quality, score_7, safe, 1girl, solo, hakuinoko, jitome, blush, low twin braids, black hair ribbon, cowboy shot, fashion magazine style, pastel lavender drop-waist dress with tiered ruffles and puffed sleeves, white lace collar, white satin headband with a small bow, white frilled socks, white mary janes, holding a small bouquet of pink roses. She stands in a rose garden with an arched rose trellis and a white stone fountain behind her. She is seen from the knees up, a little right of center, and fills most of the picture height. She lightly lifts the hem of her skirt with one hand and tilts her head with a gentle smile at the viewer. Soft late-afternoon sunlight comes from behind her and puts a warm rim light on her hair and the ruffles, and the water of the fountain sparkles. Gentle pastel colors with soft shadows.worst quality, low quality, score_1, score_2, score_3, artist name, blurry, jpeg artifacts, chromatic aberration, bad anatomy, bad hands, watermark, signature, text, nsfw, explicitbotan_anima と GleamPalette は、バラや噴水、木まで細かく、色も深くなっています。
ただこのシーンはBase 版とYumeの方がシンプルで私の好みでした。
今日わかったこと
白衣ちゃんの LoRA はそのままでも、どのモデルにつなぐかで背景の書き込みや塗りが大きく変わることがわかった
使ったワークフロー
今回使ったワークフローです。
モデル・LoRA の重みは含まれていません。
【次の記事】
【おすすめ記事】