![見出し画像](https://assets.st-note.com/production/uploads/images/123047932/rectangle_large_type_2_01a54672b4ae497353081151f2565572.png?width=800)
進化した生成AIのリアルタイム変換が何かに似ている…ともやもやしていたけどやっと分かった
前にnoteにも書いたLCMですが、最近本当にリアルタイムにもほどがあるくらいの速度になってきました。
LCMで40fps前後で画像生成出来るようになりました!これで完全にリアルタイムアプリケーションいけます。
— あき先生 | AI Vtuber『しずく』開発中 (@cumulo_autumn) November 26, 2023
下のデモ動画は1倍速(リアルタイム)で、OBSの画面録画、VRoidのレンダリング込みで約36fpsで動いてます。(録画無しだと39fps) pic.twitter.com/IDi1ypSFRf
I added a simple face detection to the real time LCM custom node for ComfyUI. When used in conjunction with the inpainting model, you can replace just the face. https://t.co/XVs5CO3Q46 pic.twitter.com/L6UBwO1J21
— toyxyz (@toyxyz3) November 24, 2023
なんかこのように高速LCMによりぬるぬると変換されていく様をみて、何かに似ている…とずっと引っかかっていたのです。
それが完全にリアルタイムになればなるほど何かに似ている感覚が強くなるのです…
なんだろうなあ〜と思いながら過ごすここ数日。
本日、ついに思い出しました!!↓↓↓↓↓↓↓↓↓↓↓↓
色んなLCMのイラストリアルタイム生成を見ていて何かに似てるな〜ってずっともやもやと考えてたのだけど、たまたまこのイオさんのポスト見てやっと思い出した!
— SUTO💡 (@st_e_ai) November 29, 2023
tiktokとかのフィルターだ!
自分の顔を盛りながら配信する感じと体験が似てるんだ…!!
実物よりちょっと盛る感じ!超スッキリ! https://t.co/wnV8hBp9KD
そう、tiktokとかのエフェクトです!!!!
(興奮してフィルターもエフェクトもごっちゃになってます)
思えば完全にエフェクトでした。なんで思い出せなかったんだろう。
みなさんtiktokのフィルター使ったことありますか?
いまは2次元に変身できるエフェクトや若くなったり老けたり、美しくなったり異性になったりほんといろんなエフェクトが大量にありますよ!
@alyssa.in.japan 下書きすみません🙇🏻♀️どれがよかったかな?💖
♬ INFERNO - Sub Urban & Bella Poarch
見てみるとアニメになるエフェクトなんて結構そのままですね…
これらの決まったエフェクトと違う点として、カメラや人の動画に限らず、イラストとかもリアルタイムに変換できたり、LoRAなど画風を適応できたりといろんなことに使えるのが良いところでしょうか。
絵描きさんにリアルタイムAIお絵描きで、「四季」を描いてもらいました!
— Akuma.ai (@AkumaAI_JP) November 28, 2023
みんなはどの季節が好き?☘️☀️🍂☃️ pic.twitter.com/SlmH57i6YZ
SDXL Turboなんていうtext2imgがリアルタイムにできちゃうすごいモデルも発表されちゃいましたし、通常のエフェクトとはまったく違う方向に発展していく未来もみえています。
SDXL Turboのご紹介: リアルタイムテキスト画像生成モデル。
— Stability AI 日本公式 (@StabilityAI_JP) November 28, 2023
SDXL Turboは、新しい蒸留技術によって最先端のパフォーマンスを実現し、必要なステップ数を50からわずか1へと削減することで、これまでにない品質のシングルステップ画像生成を可能にします。… pic.twitter.com/TZlZwglSyc
試してみたい方は以下のデモから。
それにしても、これtiktokのフィルターに似てるんだ!と気づいた瞬間のアハ体験ひさびさだったなあ
エフェクトみたいに、きっとこれからはイラストでもなんでもちょっと(どんどん?)盛るのが普通の世の中になるのですね…
これがスマートメガネやスマートコンタクトに実装されたら、リアルタイムに世の中の全てが他の世界に変換されていくんだろうな。
同じ道を歩いているけど、世の中が花で溢れている人もいるし、はたまたすごい南国のような場所だったりするかもしれないし、見える世界がパーソナライズされて、美しい絵しか視界に入ってこなくなってきたりしたり、、、
![](https://assets.st-note.com/img/1701253731523-rOuL9GPBIn.png?width=800)
わたしの悪い癖で未来妄想が止まらなくなりそうなのでここらで終わりたいと思います…笑
結局技術を使ってどんな面白いことが考えられるかですね…!
いろいろ考えさせられた1日でした😇
この記事が気に入ったらサポートをしてみませんか?