自作ControlNetモデル開発記録⑧

https://note.com/tori29umai/n/n09c755961ef1

ひとまず陰影及び、ノーマルマップControlNet完成しました。

huggingface公開モデル

Stable Diffusion web UI用陰影ControlNet
https://huggingface.co/tori29umai/ControlNet_Shadow

※マルチControlNetで↓のcannyと併用するのがポイント
https://huggingface.co/thibaud/controlnet-sd21

Stable Diffusion web UI用ノーマルマップControlNet
https://huggingface.co/tori29umai/ControlNet_Normalmap

※マルチControlNetで↓のcannyと併用するのがポイント
https://huggingface.co/thibaud/controlnet-sd21

データセット

ロイヤリティーフリーの3Dモデルや公的機関が公開している彫刻3Dデータ3905体をあらゆる角度から10000枚撮影したデータセット

結果

線画→陰影の方はこんな感じ。

線画→ノーマルマップの方はこんな感じ（ライティング済み）

まだまだ詰められそうなところもありそうですが、予算が尽きそうなので一先ずこのプロジェクトは完！！！ということにしたいです。
完！！！！！！！！！！！！！！！