見出し画像

Animagine XL V3のマージモデルReprogineの作り方


Fair AI Public License 1.0-SDライセンスで多分どう作ったのか公開する必要があるので公開しておきます。
このレシピよりさらに前までさかのぼるのは面倒なので指摘があったら非公開にします


・Reproduction_LCMv2
・animagine V3
・SD XL - DPO Finetune


①Reproduction_LCMv2とanimagine V3を階層マージします。
理由は一番新しく公開している自分のモデルがそれだからです。
LCMモデルとマージしていいの?というツッコミは受け付けません
ステップ数をいい感じに減らせるかも!と思いましょう

AにReproduction_LCMv2、Bにanimagine V3を入れて下画像の通りパラメータを設定してマージしてます

このパラメータの理由は階段で綺麗だからです。
Baseを1とかにしたら版権の再現性はそのままとかになるかもしれません

階層マージパラメータ

② ①で出来たものとSD XL - DPO Finetuneをマージします
SD XL - DPO FinetuneはなんかSDXLをいい感じにしたやつみたいです。せっかくなので使います。

Aに①、BにSD XL - DPO Finetuneを入れて下画像のようにcosマージします。
alpha 0だけどいいの?知りません多分良いです。
大きくなりすぎたベクトルをいい感じに小さくするイメージでやってます(過学習防止)。

cosマージパラメータ

→完成!

ちょっと違う感じのいいテイストになったんじゃないでしょうか
背景と顔を違う感じにしたいならどうぞ

animagineと比較

モチベーションの増加につながるのでよろしければサポートお願いします。