見出し画像

日刊 画像生成AI (2022年10月1日)

やまかず

画像生成AI界は、今認識できないスピードで進化をし続けています。
DALL・E2公開、Midjourney公開、StableDiffusionがオープンソースで公開されて..進化の速度が上がり続けており、日々異常なスピードで変化しています。

"ショータイム"

そんな中、毎日時間なくて全然情報追えない..！って人のために業界変化、新表現、思考、問題、技術を毎日あらゆるメディアを調べ、まとめています。


昨日までの投稿はこちら


開発

テスラ、Optimus公開。

Tesla AI dayにOptimusというロボットが公開されました。自社工場に実験的に投入予定で、5年内に$20k（280万円程度）で一般販売予定とのこと。イーロンマスク曰く「ターミネーターにならないよう注意したい」とのこと。

個人的にはこういうロボットが見たり聞いたりした情報まで学習データに含まれ始めた時こそ初めて、プロンプト入力の間隔は人間とかなり近いものになるんじゃないかと思っています。今プロンプトが人間的な対話からかなり離れているのでそうなってほしい。（そういう意味では今のプロンプト技術は細かいレベルではあまり意味覚える意味がないと思っています。概念を覚えるのは価値があるかと思っていましたが、アーティストスタイルやモディファイアを選べるguiがすごい勢いで登場するのを見て、それも意味ないと思っています。どうなんでしょうか。）


Stable Diffusion Infinity

無限のキャンバスに生成が可能な 「stablediffusion-infinity」が更新。優れたUIのWebアプリにアップデート。かなりDALL・E2のOutpaintingに近い様子です。WebUI (by AUTOMATIC1111)に早く取り込まれてほしい。


Optimized Stable DiffusionがVRAM 4GBで1088x1088の画像生成を可能に、ネガティブプロンプトにも対応。

VRAM の使用量をさらに削減することを目的とした Stable Diffusion の basujindalフォークの修正版、Optimized Stable Diffusionが4GB GPU のみで 1088x1088の画像を生成と、ネガティブプロンプトの設定を可能にしたようです。


Text to Vectorgraphics

スケーリング可能なように、SVG、PDFで書き出してくれるWebUI(by AUTOMATIC1111)用のスクリプトが開発されました。

https://www.reddit.com/r/StableDiffusion/comments/xsidwd/txt2vectorgraphics_using_sd_to_create_scaleable/


png2png

画像間のモーフィングで間の画像を生成するというものらしいです。コメントも少なく、あまり情報はありません。

https://www.reddit.com/r/StableDiffusion/comments/xstcqb/png2png_mix_two_images_morphing_animation_between/


Auto SD WorkflowがマルチGPUでの操作を可能にしようとしてます。

以前紹介したSDの生成を自動化して沢山違うパラメーターで生成したりできるAuto SD Workflowがシステムにあるすべての GPU (または他のコンピューターのリモート GPU) を使用して、画像を同時にレンダリングできるようにしているとのこと。これによりこれまでの半分の時間で生成が可能になる。

Audo SD Workflowはここから。


DreamBoothが11GBに

nvidia 3060 12GB で問題なく動作するそうです。


NovelAI 検証が続々投稿。

10/1時点ではNovelAIは公開されておらず、続々と一部の利用できる方が投稿している状態でした。この後すぐに公開され大きな話題を呼びます。


pony-diffusion v1

Astralite Heart氏がpony-diffusion v1を公開。 AnlatanのCEO、NovelAIのヘッド研究責任者、リード開発者のEren DoğanさんとNovelAIがコンピューティングを支援しているようです。


Emad氏、1.5について言及。

予測では既に公開されているはずの1.5モデルが公開されていない状態ですがそこについてEmadさんが言及されているようです。

残念ながら、いくつかのコンプライアンス上の問題から、すぐに発表できるものではありません。
OpenCLIPとpolyglotは暫定的にリリースされています。

わかりやすくするために
i) CompVisからフォークし、GitHubを維持しながら、Stability AIリリースに移行するプロセスを導入しています。
ii) 過去5週間のフィードバックを反映させる
iii) これは、トレーニング中のモデルの将来のリリースを合理化するものである。
詳しくはこちら
https://danieljeffries.substack.com/p/the-turning-…

Emad氏
「Twitterは昨年、12億4700万ドルを研究開発に費やし、ついにその突破口を開いた。… 今後数年間で、それ以上の費用をオープンソース AI に費やす予定です。」


表現

もしも戦争の兵士がスマホで撮影していたら。

https://www.reddit.com/r/StableDiffusion/comments/xsszzg/what_if_we_send_a_smart_phone_back_to_the_past/


今日のおすすめAIアニメーションセレクト


thispersondoesnotexist.com を使用し、DALL-E で拡張

https://www.reddit.com/r/dalle2/comments/xs6u3n/used_thispersondoesnotexistcom_then_expanded_it/


アメリカの衛星画像から全体までoutpaintingで生成。

https://www.reddit.com/r/dalle2/comments/xs789g/started_with_a_satellite_map_of_africa_and_filled/


研究

お絵描きAIで手指を描く方法や、二次キャラを描く方法

このtogetter超まとまってるでおすすめです。


フォトグラメトリの代替案としてDreamBoothを使えるか実験。


DreamBooth検証者続々


Stepsを20以上にすべき理由。

https://www.reddit.com/r/StableDiffusion/comments/xse27g/a_graphical_explanation_of_why_you_should/


チェックポイントマージの比較

https://www.reddit.com/r/StableDiffusion/comments/xss6bl/checkpoint_merging_comparative/


ネガティブプロンプトは、通常のプロンプトと同じくらい重要です。

Negative prompt:
(cartoon, 3d, disfigured, bad art, deformed, poorly drawn, extra limbs, close up, b&w, weird colors, blurry:0.25)

https://www.reddit.com/r/StableDiffusion/comments/xsrxhl/negative_prompt_is_just_as_important_as_the_main/


思想・ムーブメント

画像AIにどう関わっていくべきか

こちらかなりいい記事です。ポジションとしてどうあるべきかというのは僕も本当に考えているところなので共感しました。逆の視点のハシゴが外される懸念はあまり考えていなかったので面白かったです。


Stable Diffusion社創設者 Emad Mostaque氏 AI倫理、宗教、インドのAIの未来、オープンソースについて語る


AIの未来は真にオープンである必要があると強く信じています

Stability.aiの取締役会の会長になられた方Jim OShaughnessyさんがTwitterで「AI の未来は真にオープンである必要があると強く信じています。」と語られています。

私は、AIの未来は真にオープンである必要があると強く信じています。私の意見では、Stability.aiは、オープン AI ムーブメントの旗手でありビーコンです。


フードピア

画像生成AIを活用した謎のコミュニティがあるらしいです。メモ。


勉強

まっくすさんのText-to-imageの仕組み解説

技術書典で公開されていた「TensorFlowは使われたい！（3）」の内容を公開されていました。とても分かりやすいので是非！


最後に

Twitterに、毎日製作したものや、最新情報、検証を載せたりしています。
よかったら見ていただけると嬉しいです。

画像生成AIの実験, 最新情報のまとめはこちら


前回の号はこちら

次回の号はこちら


サポートいただけると喜びます。本を読むのが好きなので、いただいたものはそこに使わせていただきます