見出し画像

【AIアニメ】Loraによるキャラクターデザイン固定を試す

  • 前回のアニメーションではAI生成した画像をベースにしたが、実際にストーリーアニメを作るなら、キャラクターデザインの一貫性を維持する必要がある。

  • ひとまずオーソドックスにLoraによるキャラデザ固定を試す(ただし、現在はControlNetだけでもかなり固定できるとのこと)。

  • 今回は、AIマンガの試作用にVroidStudioで作成した3Dモデルを流用して、データセットを準備した。

  • LoraモデルはGoogle Colabで手軽に作成できる。画像データは十数枚でもいいらしい。Colab無料版で20分弱で学習が完了した。

学習データ(Vroid)
  • よく分からないまま、Loraの適用度合いをWebUI上で調整。

  • Loraを強くすると、学習画像ほとんどそのままになる。さすがにVroid感が強いので、もう少しアニメ風にしたい。

Lora強め
  • Loraを弱くしすぎると、学習画像の特徴が薄れる。

Lora弱め
  • バランスをとって調整。

こんくらいでいいか