日刊 画像生成AI （2022年9月28日）
画像生成AI界は、今認識できないスピードで進化をし続けています。
DALL・E2公開、Midjourney公開、StableDiffusionがオープンソースで公開されて..進化の速度が上がり続けており、日々異常なスピードで変化しています。
そんな中、毎日時間なくて全然情報追えない..！って人のために業界変化、新表現、思考、問題、技術を毎日あらゆるメディアを調べ、まとめています。
昨日までの投稿はこちら
開発
Video Killed The Radio Star Difusion
YouTubeリンクを貼れば、Whisperで文字起こし + 歌詞に合わせた画像生成→それが滑らかに変わっていくというもの。ミュージックビデオ生成を自動化します。Deforum Diffusionでも全然できますが、YouTubeと接続してるのはすごい。
ちなみに、「Video Killed The Radio Star」は1979年の曲で、ラジオスターの仕事がビデオによって無くなったという新しい時代の幕開けを感じる歌です。
Thanks for your patience everyone, first draft of colab for music video automation with #stablediffusion is published! https://t.co/RW88i1aAkW
— David Marx (@DigThatData) September 27, 2022
こちらのビデオに影響されて作られたようです。
dreamboothトレーニングがDiffusersで利用可能に。
dreambooth #stablediffusion training is now available in 🧨diffusers!
— Suraj Patil (@psuraj28) September 28, 2022
And guess what! You can run this on a 16GB colab in less than 15 mins!
Github: https://t.co/ipIuIJNlMm
Colab for training: https://t.co/n6uWQRgPK3
Colab for inference: https://t.co/cbUoibYRWS pic.twitter.com/XtIbLRsLSQ
Textual Inversionの際と同様、学習済みのものが沢山まとまっているDreamBooth Concepts Libraryも誕生しています。
こちらのcolabで利用できるようです。
DreamBoothがついに12.5GBのVRAMでも動作可能に。（無料のcolab枠で利用可能。(9/28時点)）
colabはこちら。
Redditはこちら。
ponze.gg
3D アセットのタイル可能なテクスチャを生成する AI を利用したプロトタイピング ツールが公開。 https://www.ponzu.gg/
Stable DiffusionがKeras CVで利用可能に
Stable Diffusion is now available directly in KerasCV!
— François Chollet (@fchollet) September 27, 2022
And it's fast: 30% faster than the PyTorch version for a batch of 3 images on the NVIDIA T4 GPU (which is the GPU you typically get on Colab).
Try it out: https://t.co/a7lFP8kIBv pic.twitter.com/EnnRGmUmo1
Loopback Zoom
生成中にパラメーターを変更したり、プロンプトを切り替えたりできるループバックスクリプトが公開されました。
動物キャラクターの特化モデルが公開。
furry、ケモノに特化したモデルが公開。
エポックはこちらからダウンロードできます。
Stable Diffusionで動物キャラクターを作っている方にお知らせ
— パジョカ (Pajoca)⁰😺Nya!😸 (@Pajoca_) September 27, 2022
ついに動物キャラ(furry・ケモノ)に特化したモデルが作成されました!🐱🐶🦊
従来のSDやWaifuDiffusionではほぼ無理でしたが、furry_epoch4.ckpt ならこの系統の絵が出るようになります😺
(あとひと工夫でゆるかわ系のキャラも作れるかも!) pic.twitter.com/mF7GwtReBF
HOLOSHEET v2
googleスプレッドシートに、ReplicateとOpenAIのAPIキーを入れると使えるそうです。こんな使い方もあるんですね。
（あまり詳しくは理解できておらずです。）
HOLOSHEET v2!
— fabians.eth (@fabianstelzer) September 29, 2022
a google sheet running GPT-3..and #stablediffusion 🖇️
just enter a prompt & explore a world, narrative and visuals, right within sheets..
so much is possible when u have gpt3() + stable() as normie sheet functions..😮
btw, gpt3 wrote that app script, too 🫣 pic.twitter.com/vQyZSkUTGb
phase.artが進化
以前紹介していたphase.artがPhotoshopでStableDiffusionを利用しているような動作が可能なGUIになったようです。Inpainting、img2img、プロンプト履歴、プロンプト ビルダーまで搭載したとのこと。
1度に二人を学習させるには？
表現
Blender→Stable Diffusion img2img
More testing of the SD addon for Blender. 😁#b3d #stablediffusion pic.twitter.com/1vJ22sIGgS
— 👣KᗪᗩᗯG👣 (@Kdawg5000) September 27, 2022
アイデア賞、 MRIをレタスでimg2img。
SD Upscale + 4x UltraSharp + Topaz GigaPixelで脅威的なディテールで生成。
拡大して見たい方はこちらのリンクからどうぞ。
木星のミルクシェイク
研究
DreamBooth検証者続々
ドラクエの「キラーマシン」を題材に Dreambooth with Stable diffusion によるバリエーション生成を試してみた。プロンプトを少し変えるだけで超カッコいいキラーマシンが無限に作れるの楽しい。#AIArtwork #dreambooth #stablediffusion @DragonQuest pic.twitter.com/4lOGntA40R
— 2f6i (@2feet6inches) September 27, 2022
画像生成AIに美樹さやかさんのデータを学習させたら、指定してないのに勝手に佐倉杏子さんらしき人物が隣に映り込むようになった、って記事を読んで感動してる
— 三雲岳斗 (@mikumo) September 28, 2022
独りぼっちは、寂しいもんな…https://t.co/dkDds6NciT pic.twitter.com/Zx5UZBAY1y
素晴らしいAIアートを作るための照明スキーム
12 lighting schemes to produce amazing #AiArtworks. "Remember adding a word at earlier position in the prompt has more impact"#AIartists #stablediffusion #AIPrompt #ArtificialIntelligence #NFTs #generativeart @DreamStudioAI
— prompts:AI (@ibex_labs) September 27, 2022
LIGHTING FOR SCENES
— prompts:AI (@ibex_labs) September 27, 2022
----------------------------------
twilight light, volumetric lighting, specular lighting, cinematic lighting
LIGHTING FOR OBJECTS
— prompts:AI (@ibex_labs) September 27, 2022
---------------------------------
soft lighting, diffused lighting, luminescence, translucency, global illumination, bioluminescent details, glowing, iridescent
顔をアニメーション化する方法についてチュートリアル
思想・ムーブメント
Stability.ai CTOのブログ
I've joined Stability AI as CIO. Check out why in my latest article where I cover the transformative power of generative AI, the rise of open foundation models, + the battle for a future that's truly open versus open in name only.#stablediffusion https://t.co/9ZADY9YqsZ
— Daniel Jeffries (@Dan_Jeffries1) September 28, 2022
私たちは新しい芸術媒体の誕生を目の当たりにしています
AIのヒューマンファクター, 安全で倫理的なAI技術の開発
AIアートコンテスト 優勝者には$300（現在4万3000円程度）
Ai Art Contest - Autumn
— PromptHouse (@PromptHouseXYZ) September 24, 2022
Join us in embracing this wonderful season with an Ai Art contest! The winner will receive a grand prize of $300. 🎨
Use all your favorite AI tools and have fun. Challenge details can be found at: https://t.co/5pRY7OfHsk pic.twitter.com/GrWJcPhZgo
AIの作ったアートに初めて著作権登録が認められる。
AIの第一人者ルカン氏、現在のアプローチの多くは真の知能につながらないと批判
ゲームのアセットとしてStable Diffusionを活用
画像生成AI「Stable Diffusion(AUTOMATIC1111版)」で一度に1000枚以上作ったりデフォルトのファイル名を変更したり生成が終わったらプッシュ通知したり知っておくといろいろ便利な設定方法まとめ
Gigazineさんが分かりやすくまとめてくれています。
深津さんの仮説
AIで「なんでも作れる」時代がきても、「欲しいものを取り出せる」とは限らないと確信しつつある。
— 深津 貴之 / THE GUILD / note.com (@fladdict) September 27, 2022
「なんでも」というのは絞り込みが無限大なので、けっきょく「いい感じの爺さん」を取り出せても「思い通りのいい感じの爺さん」を取り出すには、指定力みたいなものが問われる。#stablediffusion pic.twitter.com/tX4EMkNGqa
つまり人類は、与えられた「いい感じの何か」に甘んじるか、「自分が思う通りのいい感じ」を獲得するために、修行やトレーニングをするのか…というのを問われる未来になる。
— 深津 貴之 / THE GUILD / note.com (@fladdict) September 27, 2022
最後に
Twitterに、毎日製作したものや、最新情報、検証を載せたりしています。よかったらフォローしてくれるとうれしいです。
画像生成AIの実験, 最新情報のまとめはこちら
前回の号はこちら
サポートいただけると喜びます。本を読むのが好きなので、いただいたものはそこに使わせていただきます