精密参照(IP-Adapter)研究家

AIキャラ「一貫性」のプロになるための実践ガイド。
“顔がコマ毎に別人になる”を、技術で根治する。

🧪 合言葉:LoRAで雰囲気を学び、IP-Adapterで顔そのものを焼き付ける
IP-Adapter精密参照で固定
雰囲気画風LoRAで土台
商用OKvit-h標準で安全に販売
PROBLEM

😵なぜキャラはコマ毎に“別人”になるのか

原因がわかれば、直し方も決まる。

  • LoRAは顔・髪・体型しか学ばない。衣装や細部は毎回プロンプトから再解釈され、コマごとに別物になる。
  • プロンプトだけの一貫性には限界。同じ言葉でもseedが変われば顔が動く。
  • 過学習・タグ過剰のLoRAはかえって“崩れた別人”を量産する。
  • 相手(人外・モンスター等)の特徴がヒロインに混入して奇形化する事故も。
💡 解決の核心 = 「お手本の1枚」を作り、それを全コマに“転写”して顔・特徴を焼き付ける。これが精密参照(IP-Adapter)。
BEFORE / AFTER

LoRA単独 → LoRA+精密参照

同じキャラ設定でも、顔の安定感がまるで違う。

Before:LoRAだけ

🙍‍♀️
👩
🙎‍♀️
👧

コマ毎に顔が動く・別人化

輪郭・目の形・雰囲気がバラつき、「同じ子」に見えない。

After:LoRA+IP-Adapter精密参照

👩
👩
👩
👩

全コマ“同じ子”で固定

基準1枚の顔が全コマに転写され、別人化が消える。

※ 本物の生成画像によるBefore/After比較は、現在ローカルSDで作成中。完成次第このページに差し込み更新します。
HOW IT WORKS

🔬精密参照の仕組み(インフォグラフィック)

参照画像を“絵の意味”に変換して、生成へ注入する。

🖼️
基準1枚
お手本の顔
🧠
CLIP-ViT-H
画像を特徴に変換
💉
IP-Adapter
特徴を注入
🎨
生成
全コマ同じ顔

LoRAが「学習で覚える」のに対し、IP-Adapterはその場でお手本を見せて真似させる。だから再学習なしで、即日キャラを固定できる。

COMPARE

⚖️一貫性4手法の使い分け

単独で戦わない。役割で重ねるのがプロ。

手法得意(固定できる)弱点商用役割
画風LoRA画風・雰囲気・体型の土台衣装/細部は弱い・過学習で別人化土台
IP-Adapter
精密参照
顔・キャラ同一性(最強)効かせ過ぎるとポーズも固まる○ vit-h主軸
ControlNet
(pose/depth)
構図・ポーズ顔同一性は持たない構図制御
顔特化
(FaceID系)
顔の一致精度が高いInsightFace等は非商用で販売NG× 注意閲覧用のみ
🏆 勝ち筋=画風LoRA(土台)+ IP-Adapter精密参照(顔固定・主軸)+ 必要ならControlNet(構図)。販売用は顔も vit-h標準で固定し、非商用素材を避ける。
GOLDEN RECIPE

🍯黄金レシピ:基準1枚 → 全コマ転写

この順番で作れば、一貫性は安定する。

1

設計(多様化)

顔を何枚も出して“この子”を1枚選ぶ。脱マスピ顔はここで。

2

基準1枚を確定

選んだ顔をseed固定+高解像度で“決定版”に。

3

IP-Adapterで転写

基準を参照に、全コマへ顔を焼き付ける(プロンプトはコマ毎に変える)。

4

hires+ADetailer

高解像度化+顔を再描画して精度UP。

5

4AIゲート

顔・髪・衣装の一致を判定→ブレたコマだけ再生成。

SETTINGS

🎛️推奨設定(SDXL・ip-adapter_sdxl_vit-h)

まずはこの値から。効きすぎ/効かなさで微調整。

weight 0.7〜0.9
顔をしっかり固定
weight_type style transfer / precise
start_at 0.0 / end_at 0.8〜1.0
参照画像 正方〜縦・顔がはっきり
複数参照 顔用+全身用をブレンド
CLIP CLIP-ViT-H(必須)
⚠️ 効きすぎ=ポーズや構図まで基準に固まる→weightを下げる/end_atを早める。効かない=weightを上げる/参照画像の顔を大きく鮮明に。
COMMERCIAL

💴販売用・商用ライセンス安全スタック

「売る」なら、ここを外すと後で痛い目に。

工程使うもの商用
キャラ/顔固定IP-Adapter ip-adapter_sdxl_vit-h(標準)
顔の高精度化ADetailer / FaceDetailer(標準YOLO)
アップスケールRealESRGAN_x4plus(実写)/ _anime_6B(アニメ)
避けるものInsightFace / FaceID / buffalo_l / 4x-AnimeSharp× 非商用
TROUBLE

🛠️崩れる原因 → 対策

症状原因対策
コマ毎に顔が別人参照が弱い/無いIP-Adapter weight↑・基準画像を鮮明に
ポーズが全部同じに固まる参照が効きすぎweight↓・end_atを早める・ControlNetで構図分離
顔が崩れた別人を量産LoRA過学習num_repeats/caption削減・LoRA強度↓
相手の特徴がヒロインに混入プロンプト伝播人間肌アンカー+NEGで相手特徴を否定
角/特徴が左右非対称・奇形特徴語が弱い(two symmetric…:1.3)で対称ロック
CHECKLIST

一貫性プロのチェックリスト

  • ☑ 設計(多様化)と固定(LoRA/IP)の工程を分けた
  • 基準1枚を確定し、全コマで同じ参照を使ったか
  • ☑ IP-Adapterは vit-h標準(商用OK)
  • ☑ 顔・髪・衣装の一致を4AIで判定したか
  • ☑ ブレたコマだけ再生成したか
  • ☑ 販売用に非商用素材を避けた