Catch up on AI

動画生成AI Gen2でアニメキャラの表情まで制御　他 / Catch up on AI 2024.1.20

Pick upGen2のマルチモーションブラシを利用して表情のアニメを生成。マルチモーションブラシになったことで全体の作画が崩れにくくなっているため実現。細かく指定することで、表情までコントロールが可能です。 Catch up on AIAIで表情操作を実写で試す Midjourney v6はデザイン業務に耐えられるか？海外のゲーム開発者は生成AIを50%が利用 Midjourneyで360度VR用画像を生成一貫性が素晴らしいAI動画 Stable Vide

生成AIによる動画は一歩前に！GEN2マルチモーションブラシが全ユーザーに開放　他 / Catch up on AI 2024.1.19

Pick up動画生成AI、Gen2で画像の中の要素を指定してそれぞれにアニメーションを付与できるマルチモーションブラシが全ユーザーに開放。 Catch up on AIマルチモーションブラシを試す鳥編マルチモーションブラシを試すアニメ編喜怒哀楽が表現できるポートレート生成AIモデルマーク・ザッカーバーグ氏がMetaのAIに関する最新情報を投稿機械式アームを利用したAIアニメ Stable Video Diffusion用の、ControlNetのli

SDベースの動画生成モデルStable Video Diffusionがリリース他 / Catch up on AI 2023.11.22

Pick upStable Diffusionベースの動画生成モデルがリリース。調査によるとrunwayと同等、pikaLabsよりも評価を上回る。モデルに寄っては双方を上回る結果となったと発表されています。イラストはまだ苦手みたい Stable Video Diffusion Colab版 Catch up on AIGen2 モーションブラシ機能解放ビデオを解析し説明してくれるvideo-llava すべてがLEGOになる Lego Cloud 生成AI

Whisperを49%圧縮し4.2倍高速化したDistil-Whisper 他 / Catch up on AI 2023.11.4

Pick upWhisperだけでも十分高速だけど、Whisperをさらに、49%小型化して、4.2倍高速化した、Distil-Whisper。比較動画を見ても分かる通り、すごい速度。生成AIは技術も驚きの連続ですが、その進化のスピードにはいつも驚かされます。さらに便利に早く、使いやすく。日々進んでいます。 https://github.com/huggingface/distil-whisper Catch up on AI3Dスカルプティングをしながら、生成AIで

動画生成AIのGen-2が大幅アップデートで超高品質へ他 / Catch up on AI 2023.11.3

Pick upRunwayがリリースしているGen-2が大幅アップデートされ、生成動画が一気にクオリティが上がりました。それに合わせて様々な検証などが行われており、tazikuでも一部検証を行っています。画像生成AIの際もそうでしたが、動画も進化が加速度的に進んでいる。アップデートされたGen-2でアニメを作成シネマ感強めの写真を生成してから新しいGen-2でimg2vid 話題になっているGen2のアップデート、新Verと旧Verの比較動画 Catch up

GPT-4 Vでインテリアコーディネートのサポート　他 / Catch up on AI 2023.10.3

Pick upこの部屋を改善するにはどうしたらいい？という質問を写真とともにChatGPTに投げた際にアドバイスをしてくれる。こういった提案もChatGPTでできる時代に。何を学ぶべきかを考えさせられる実験。 Catch up on AIAnimatediff-cli-prompt-travelとIPAdaptersで生成したアニメ ComfyUI × AnimateDiffでのBlend Factor別の出力結果のサンプルゴーストタウンのセロ・ゴルドの古い写真を

OpenAIがGPT-5の商標を提出。次期Verは対話型か!? 他 / Catch up on AI 2023.8.1

Pick upOpenAIがGPT-5の商標を7月18日に米国特許商標庁(USPTO)に提出。次期バージョンのヒントも見えてきた。GPT-5へのアップデートには本当に期待！ Catch up on AIGen-2で生成した車のコマーシャルムービー KaiberAI の新機能 MOTION（BETA）とGen2の違い。 Luma 3Dを利用した、Zayn's (One Direction) のAIミュージックビデオ AnimateDiff-cliのテスト動画事前登

人間と同じ思考でAIがプログラムを書く「ChainCoder」　他 / Catch up on AI 2023.7.31

Pick up人間のプログラマーが複雑なアルゴリズムを実装する方法を模倣する新しいプログラム生成モデル。あえて人間に寄せることで精度が上がるのは不思議な感覚がします。 ChainCoderは最先端のモデルを上回る性能を示したと発表されています。 Catch up on AIGen2のバイク動画テスト Gne2→Kaiberへテスト SDスクリプトをコアとしてSDXLチェックポイントにコンバート臨床言語を理解するマルチモーダル生成AIモデル「Med-PaLM M 」

1枚の画像から3Dメッシュを生成できるAI「One-2-3-45」他 / Catch up on AI 2023.7.25

Pick up1枚の画像を読み込ませると、カメラアングルなどを指定しつつ3Dメッシュが生成できるAI「One-2-3-45」。UIもとても素晴らしく、今後に期待したいツール。デモは以下から試せます。 https://huggingface.co/spaces/One-2-3-45/One-2-3-45 Catch up on AIMidjounery+Zoom Out→Gen2→AEで近未来のバイクムービー読みにくい文字を正確に認識する「CLIPTER」 2枚のイ

髪の毛に特化した生成AIのアイデア！「MAGIC EDIT」　他 / Catch up on AI 2023.7.24

Pick up髪の毛に特化した生成AIのインペイントツール「MAGIC EDIT」。人類全員が持っていて、共通の悩みが存在する、生成AI活用において非常に良い使い方の一つになるかも知れない。 Catch up on AIアイルランドのデザイナー兼アーティストがGen-2によるミュージックビデオを制作 ChatGPTのプロンプトフレームワーク「RTF」 Bing Chatで、スケッチからHTMLを生成する方法が詳しく解説 AIアバターもどんどん進化！HeyGenを利用し

脳のEEG信号から画像生成できるDreamDiffusion　他 / Catch up on AI 2023.7.1

Pick upEEG信号とは、Electroencephalogram (EEG)の略で、脳神経細胞の活動によって生じる電気的変化（活動電位）を記録したもの。 DreamDiffusionは脳のEEG信号から、高画質画像を生成する技術。論文のアウトプットイメージ見る限りではかなりの精度で画像生成が可能となっています。 Catch up on AI屋外でジェネレーティブAI × プロジェクションマッピング Midjourneyを活用した新しいAIループ動画名古屋造形大

動画生成AIのGen-2が一般公開他 / Catch up on AI 2023.6.8

Pick upRunway Researchが、テキストからビデオを生成する「Gen-2」が一般公開されました。テキストのみから動画を生成したり、テキスト+イメージで動画を生成が可能です。txt2videoについては様々なサービスがリリースされていますが、一つ抜けている印象です。色々な動画の生成を今後試してみたいと思います。 Catch up on AI細かな部分まで認識できるHQ-SAM プロンプトを生成・共有するオープンソースツール「Prompter」 txt2

3Dモデル+アニメーションが生成できる生成AI　他 / Catch up on AI 2023.5.23

Pick up3Dモデル+アニメーションが生成できる「HyperDiffusion」。3D形状や4Dメッシュアニメーションにわたる複雑ものをコンパクトに再現性高く表現可能。画像だけでなくて、3Dどんどん進化して行っていますね。 Catch up on AIAIが認識する美しいとはなにか？ Gen2とKaiberを使った実験 360度生成してもキャラクターに一貫性もたせる実験 Nvidia H100 の生成速度実験スーパーコンピュータ「富岳」でLLMの研究開始 A

RVCがさらに精度改善したRVC v2をリリース　他 / Catch up on AI 2023.5.22

Pick up国内でも大きな話題になっていた、精度が高く、リアルタイムにボイスチェンジが可能な、RVC+ボイスチェンジ。そのRVCに新たな精度が高まった学習方法 RVC v2が登場。音声学習も日に日に精度が高まっており、様々な利用方法が期待されています。 <2023年6月4日追記> かなりの方が、この記事を訪問いただいています。ニュース的な内容なので、RVCの技術的な部分やその他RVCの記事に関しては以下の記事をご覧ください。 Catch up on AIリアルタイム

#Gen2

動画生成AI Gen2でアニメキャラの表情まで制御 他 / Catch up on AI 2024.1.20

生成AIによる動画は一歩前に！GEN2マルチモーションブラシが全ユーザーに開放 他 / Catch up on AI 2024.1.19

SDベースの動画生成モデルStable Video Diffusionがリリース 他 / Catch up on AI 2023.11.22

Whisperを49%圧縮し4.2倍高速化したDistil-Whisper 他 / Catch up on AI 2023.11.4

動画生成AIのGen-2が大幅アップデートで超高品質へ 他 / Catch up on AI 2023.11.3

GPT-4 Vでインテリアコーディネートのサポート 他 / Catch up on AI 2023.10.3

OpenAIがGPT-5の商標を提出。次期Verは対話型か!? 他 / Catch up on AI 2023.8.1

人間と同じ思考でAIがプログラムを書く「ChainCoder」 他 / Catch up on AI 2023.7.31

1枚の画像から3Dメッシュを生成できるAI「One-2-3-45」 他 / Catch up on AI 2023.7.25

髪の毛に特化した生成AIのアイデア！「MAGIC EDIT」 他 / Catch up on AI 2023.7.24

脳のEEG信号から画像生成できるDreamDiffusion 他 / Catch up on AI 2023.7.1

動画生成AIのGen-2が一般公開 他 / Catch up on AI 2023.6.8

3Dモデル+アニメーションが生成できる生成AI 他 / Catch up on AI 2023.5.23

RVCがさらに精度改善したRVC v2をリリース 他 / Catch up on AI 2023.5.22