![見出し画像](https://assets.st-note.com/production/uploads/images/122880845/rectangle_large_type_2_452867da2f5390f902a957a81978f43a.png?width=800)
画像生成AIも進化 特定の概念のみをコントロールする技術 他 / Catch up on AI 2023.11.27
Pick up
画像生成AIを普通に利用すると、様々な画像は比較的簡単にできるようになるが、生成した画像のベースを残しながら、特定の要素のみをコントロールするとなると非常に難しいのですが、Concept Slidersはそれらを解決してくれる可能性がある。
Concept Sliders
page: https://sliders.baulab.info
code: https://github.com/rohitgandikota/sliders
paper:https://arxiv.org/abs/2311.12092
【特定の概念のみをコントロールする技術】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
Concept Slidersは、特定のワードの概念のみを数値でコントロールできる技術。年齢やメイク、笑顔など、元々の生成結果は固定した上でコントロールが可能です。Cookedなど高度な概念も対応!
続く>>#生成AI #AI pic.twitter.com/7RF2xBcMAV
Catch up on AI
プロンプトでアプリを1分で制作
【プロンプトでアプリを1分で制作】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 26, 2023
trace( @trace_ai )を利用して、1分以内にタイマーアプリと、アラームアプリをAIを使って生成。
Xcodeを使って必死に創っていた時代が懐かしい。アプリもAIに補助してもらう時代に。
続く>>#生成AI #アプリ #AIpic.twitter.com/4OlLSyNrqA
生成AIの指示だけでipodのUIを再現
【生成AIの指示だけでipodのUIを再現】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 26, 2023
この指示を書くのも大変だと思いますが、この指示でUIが再現できるのも凄まじい。
UIのモックアップもディレクターが創れる時代へ。#生成AI #UIUX #デザインpic.twitter.com/x0NOdqVlQ7
LCMを利用したリアルタイム生成AIシステム
【LCMを利用したリアルタイム生成AIシステム】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 26, 2023
インプット、ControlNet、生成結果が並ぶ非常にわかりやすいインターフェイス。
LCMを利用して、リアルタイム落書き生成や、線画の着色など様々なことが可能。#生成AI #AI #LCMpic.twitter.com/mB6OXefB27
3Dガウスプラッティング生成AIの裏側
【3Dガウスプラッティング生成AIの裏側】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 26, 2023
プロンプトから3Dガウスプラッティングシーンを生成するLucidDreamerの裏側。
生成した画像から、Depthを取ってそこから点群を推測しているっぽい。
考えつくことは実現可能というけれど、凄い!#3D #gaussiansplatting #生成AIhttps://t.co/RLPqMCTmsp pic.twitter.com/1MorWUNOLg
スマホのみで、手書きから電卓アプリ生成
【スマホのみで、手書きから電卓アプリ生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 26, 2023
GPT-4VでHTML化。WEBサービスがあるなら、スマホだけで実現したくなるが、こんなラフな手書きから生成できるとは驚き!
UIDrawというプロジェクトでコードも公開されています。
続く>>#生成AI #コーディング #プログラムpic.twitter.com/BXkx0vwHMH
CGモデルとAIを利用してアニメ制作も!?
【CGモデルとAIを利用してアニメ制作も!?】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
LCMで40fps前後でVroidを読み込ませてリアルタイム生成のデモ。
これは夢がある!!#生成AI #AIアニメ #LCM https://t.co/23ZmRo2b1J
ロゴに特化したリアルタイム生成AI
【ロゴに特化したリアルタイム生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
リアルタイム生成を活かしたロゴに特化した生成AI「Logo Diffusion( @LogoDiffusion )」。手書きでリアルタイムも可能ですが、プロンプトからも生成可能です。#生成AI #デザイン #ロゴデザインpic.twitter.com/iitIorRQp1
stable video diffusionのパラメータ調査
【stable video diffusionのパラメータ調査】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
動画が生成できるstable video diffusionのmotion bucket idがアウトプットに与える影響を調査した動画。
とても参考になる!!#生成AI #AI #SVDpic.twitter.com/Y4BZ9oaNps
Stable Video Diffusion (SVD) パラメータテスト2
【Stable Video Diffusion (SVD) パラメータテスト2】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
Motion値の比較、Default: 127でレンジが、1〜255。
モーション値の変化は結果に大きな影響がでますね。#生成AI #AI動画 #SVDpic.twitter.com/JcTpYUoWjw
オープンソースのビデオアップスケーラー
【オープンソースのビデオアップスケーラー】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
生成した映像をフルHD・2k・4k にアップスケールできるreal-esrgan-video。
アップスケールのモデルも選択可能。
続く>>#生成AI #AI #アップスケール pic.twitter.com/Z83Th3DeDm
NeRF×生成AIで誰でも変身!
【NeRF×生成AIで誰でも変身!】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 27, 2023
NeRFを編集する「Posterior Distillation Sampling」。
人間をバットマンに変えたり、スパイダーマンに変えたりと形状は保ったまま大幅に変更可能。もちろん人間以外にも対応可能。
続く>>#NeRF #生成AIpic.twitter.com/ILf5YuDmuX
AIのNewsやアートワーク情報を更新中⚡
X(Twitter)ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか?