![見出し画像](https://assets.st-note.com/production/uploads/images/150516887/rectangle_large_type_2_e8d7260bdecd2ddbf4ee63845e3c6e47.png?width=1200)
ComfyUI で FLUX.1 の画像生成とLoRAを試す
「ComfyUI」で「FLUX.1」の画像生成とLoRAを試したのでまとめました。
1. FLUX.1
「FLUX.1」は、「Stable Diffusion」の開発者たちが立ち上げた「Black Forest Labs」が発表した最新の画像生成AIモデルです。
・FLUX.1 [pro] : APIから利用可能な最高品質のモデル。
・FLUX.1 [dev] : 非商用アプリ向けのオープンなガイダンス蒸留モデル。
・FLUX.1 [schnell] : 最速のタイムステップ蒸留モデル。
2. Fluxの画像生成
Fluxの画像生成の手順は、次のとおりです。
(1) 「Stability Matrix」で「ComfyUI」をインストールして起動。
起動時のログで「ComfyUI」フォルダのパスを確認できます。
![](https://assets.st-note.com/img/1723501111341-YBSur2JJok.png?width=1200)
(2) 以下のファイルをダウンロードし「ComfyUI/models/clip/」に配置。
32GB以上のRAMがある場合はfp16が推奨されます。
・t5xxl_fp16.safetensors (または t5xxl_fp8_e4m3fn.safetensors)
・clip_l.safetensors
(3) 以下のファイルをダウンロードし「ComfyUI/models/vae/」に配置。
(4) 以下のファイルをダウンロードし「ComfyUI/models/unet/」に配置。
(5) ComfyUIのFluxページの「Flux Dev」の画像をダウンロード。
この画像にはワークフローの情報が含まれています。
![](https://assets.st-note.com/img/1723501941716-SqFZwajvYA.png?width=1200)
(6) 画像をComfyUIの画面にドラッグ&ドロップして「Queue Prompt」を押す。
画像が生成されます。
![](https://assets.st-note.com/img/1723502654460-enUi4gDz06.png?width=1200)
(7) プロンプトを変更して「Queue Prompt」を押す。
「cute cat ear maid of japanese style」で画像を生成しました。
![](https://assets.st-note.com/img/1723503178096-En09a6TPIp.png?width=1200)
3. FluxのLoRA
FluxのLoRAの手順は、次のとおりです。
(1) 以下のファイルをダウンロードし「ComfyUI/models/lora/」に配置。
今回は、現代のアニメ画風を学習したLoRAウェイト「alfredplpl/flux.1-dev-modern-anime-lora」を使いました。
(2) ワークフローのダウンロード。
(3) ワークフローをComfyUIの画面にドラッグ&ドロップして「Queue Prompt」を押す。
画像が生成されます。
![](https://assets.st-note.com/img/1723503627391-q4L7C0dWYl.png?width=1200)
(4) プロンプトを変更して「Queue Prompt」を押す。
「cute cat ear maid of japanese style」で画像を生成しました。
![](https://assets.st-note.com/img/1723503653023-QzMXXEvJ00.png?width=1200)
4. FluxのLoRAの学習
FluxのLoRAの学習の手順は、次のとおりです。
(1) LoRAの学習。
「Google Colab」(有料版)で学習することができます。
(2) LoRAウェイトを切り替えて「Queue Prompt」を押す。
![](https://assets.st-note.com/img/1723503858784-Wc9BF0UrEr.png?width=1200)
この記事が気に入ったらサポートをしてみませんか?