cgdiff_lllite

cgdiff_lllite — キャラ差分生成 ControlNet-LLLite (SDXL / Illustrious)

ベース絵 1 枚 + danbooru タグ → 同一構図の差分（表情・体液・状態変化） を生成する SDXL 用 ControlNet-LLLite です。 ゲーム CG やキャラ立ち絵の「差分」を、構図・キャラデザインを固定したままタグ指定だけで量産できます。

• ベースモデル: wai Illustrious SDXL v170
• 学習系: kohya-ss/sd-scripts sdxl_train_control_net_lllite.py
• 条件画像 = 差分を出したいベース絵そのもの（前処理不要。canny 等への変換は不要）

サンプル: Vtuber 立ち絵の表情差分

ベース絵（左端）を条件に、プロンプトのタグだけ変えて生成した表情差分。キャラデザイン・衣装・構図が固定されたまま表情だけが変わる。

すべて同一 seed・同一プロンプト土台で、末尾の表情タグ（laughing / crying, tears / surprised / embarrassed, full-face blush / pout, puffed cheeks など）だけを差し替えています。

使い方 (sd-scripts)

python sdxl_gen_img.py \
  --ckpt waiIllustriousSDXL_v170.safetensors \
  --control_net_lllite_models cgdiff_lllite_v2-000004.safetensors \
  --guide_image_path base.png \
  --prompt "1girl, <キャラ・構図のタグ>, <差分タグ> --n worst quality, low quality, bad anatomy" \
  --W 832 --H 1216 --steps 28 --scale 6 --sampler euler_a --sdpa --bf16

• --guide_image_path に差分を出したいベース絵を渡す
• プロンプトには「ベース絵の内容を表すタグ + 変えたい差分のタグ」を書く
• ComfyUI では ControlNet-LLLite ローダー経由で同様に使用可能

効き（multiplier）の使い分け

--control_net_multipliers で条件の強さを変えると、出せる差分の範囲が変わります。

表情・状態差分は 1.0、構造を変える差分は 0.6 が目安です。

学習設定

学習データは「同一シーン・同一構図で表情や体液だけが違う」ペアが中心のため、その系統の差分が最も得意です。

制限

• 学習データに無い系統の構造変化（大幅なポーズ変更など）は multiplier を下げても出づらい
• ベース絵と大きく異なる解像度・アスペクト比では構図固定が弱まることがある
• Illustrious 系以外の SDXL モデルとの組み合わせは未検証