マガジンのカバー画像

Catch up on AI

388
本
海外のAI関連のキャッチアップした情報をできる限り、noteでまとめていきます。
運営しているクリエイター
Yoshihiro Tanaka | taziku

#動画生成AI

GoogleのSoraに匹敵する動画生成AI「Veo」他 / Catch up on AI 2024.5.15

Pick up1080pで1分の動画生成が可能な動画生成AIモデル。かなり精度が高い。Soraも非常に待ち遠しいがGoogle Veoも非常に楽しみ。 Catch up on AIプロンプトも公開 Veoの動画5選 ユニバーサルAIエージェント Project Astra AIウェブページ生成 Wegic AIが仕事のパートナーになるAI Teammate for Google Workspace AI FILM FESTIVAL受賞作品出揃う 3Dキャラクター生

Yoshihiro T…

生成AIでスケッチから現実に3DCGを創造 他 / Catch up on AI 2024.5.13

Pick up適切に生成AIを選定利用すれば、3DCGの技術が無くてもここまでのことが可能に！ Catch up on AICGをセグメントしてAIレンダリング VRから全ての家具を削除 An Empty Room is All We Want 参照画像を簡単に利用 AnifusionでIPAdapter 自由自在なヘビ型ロボ MIRRAX-150 3DCG x 生成AIレンダリング テキストを検出し視覚化 VimTS Adobe Neo x 生成AI わずか

Yoshihiro T…

AutoDeskが3DAIモデルを発表 他 / Catch up on AI 2024.5.9

Pick up生成AIはどんどん一般化している。こうした業界標準のものに生成AIが搭載されればさらにその動きは広がる。 Catch up on AIセルルックをAIアニメに 3DCGから3DGSを生成 ComfyUIにIC-lightが登場 超高速のアップスケーラー キーフレームを選択して融合生成 考えたことが言葉に変わる 音楽生成AI Udioでインペイント機能 Appleの広告を逆再生で印象を変える AIのNewsやアートワーク情報を更新中⚡X（Twit

Yoshihiro T…

XでGrokが利用可能に　他 / Catch up on AI 2024.5.8

Pick up突然機能が追加され、X上で利用できるようになったAI Grok。リアルタイムに全TweetをRAG的に利用ができるということで昨日のニュースを参照して回答を生成可能。これは他の生成AIには無い魅力。 利用は現在プレミアムユーザーのみとなっています。 Catch up on AILlama3ハッカソン開催 UIをリアルタイムで生成 Adobe FireFlyでポテト文字 生成AIのライティングを操作IC-Light 中国のヒューマノイド工場 映画と現

Yoshihiro T…

パワーポイントx生成AIで生成されたAI動画　他 / Catch up on AI 2024.5.7

Pick upPPTをベースにリアルタイムに動画を生成し続けるデモ。だれでも手軽に使えるソフトウェアがインターフェイスになるのはとても良さそう！ Catch up on AIClarity AI アップスケーラーが ComfyUI で利用可能 URLからマーケティングプランを生成 コンテンツとスタイルを分けて考えるB-LoRA 商品撮影 x リアルタイム生成AI マウスに追従したインタラクティブ生成 ロゴマークを生成に特化したAI 2Dを深度マップで3D化 生

Yoshihiro T…

1枚の画像から30秒以内に3Dシーンを生成 Invisible Stitch 他 / Catch up on AI 2024.5.3

Pick up解像度はまだ低いが、その速度は可能性を感じる。将来は1枚の画像から様々な3Dシーンが生成される様になるかもしれない。 Invisible Stitch: Generating Smooth 3D Scenes with Depth Inpainting Project: https://research.paulengstler.com/invisible-stitch Code: https://github.com/paulengstler/invisib

Yoshihiro T…

LLMのアリーナデータ推移をアニメに　他 / Catch up on AI 2024.4.29

Pick up生成AIの歴史を1分の動画にまとめたアニメーション。GPT4がやはり優位。だが、近年はかなり肉薄するところまで様々なLLMが迫ってきた。 Catch up on AIClaude3でp5js実験 「誰かのパイを失うまで奪うゲーム」をテーマにしたショートフィルム OpenAIで情報漏洩 時速6kmで走行できるヒューマノイド AIタウンを1クリックで AIモーションキャプチャで服だけを動かす img2imgをサイネージに ARで呼び出した3Dアニメー

Yoshihiro T…

画像から顔の一貫性を保持する ConsistentID　他 / Catch up on AI 2024.4.27

Pick up画像1枚からの顔を表現する技術はどんどん進化。データセットも専用のものも用意されかなり高度に。 ConsistentID:Portrait Generation with Multimodal Fine-Grained Identity Preserving Project：https://ssugarwh.github.io/consistentid.github.io/ arXiv：https://arxiv.org/abs/2404.16771 Code

Yoshihiro T…

キャラクター性を維持して動画を生成 ID-Animator 他 / Catch up on AI 2024.4.24

Pick up動画でも、画像1枚指定するだけで、キャラクター性を維持して一貫性の高い動画が生成できるフレームワークがID-Animatorが発表 ID-Animator: Zero-Shot Identity-Preserving Human Video Generation Project：https://id-animator.github.io arXiv：https://arxiv.org/abs/2404.15275 Code：https://github.com

Yoshihiro T…

タイムラプスから学習された動画生成AI「MagicTime」 他 / Catch up on AI 2024.4.9

Pick up現在の動画生成AIが連続性と、現実世界の物理法則が欠如している問題をタイムラプスの動画を学習させることで改善した動画生成モデル「MagicTime」。 ちゃんと花が割く、建物が組み上がるなどを実現しています。 MagicTime: Time-lapse Video Generation Models as Metamorphic Simulators Project：https://pku-yuangroup.github.io/MagicTime/ arX

Yoshihiro T…

長時間の動画生成を可能に「StreamingT2V」他 / Catch up on AI 2024.4.7

Pick upまだまだ一貫性は低いですが、20秒ほどの動画が様々な動画生成フレームワークで生成が可能に。今後の可能性・発展に注目です。 StreamingT2V: Consistent, Dynamic, and Extendable Long Video Generation from Text Project：https://streamingt2v.github.io arXiv：https://arxiv.org/abs/2403.14773 Code：https:

Yoshihiro T…

生成AIアニメ実験 ぬいぐるみの一貫性は？　他 / Catch up on AI 2024.4.6

Pick up色々なものを変換して、レタッチしてノウハウも溜まってきた。いくつかの実務に落とし込むことができればさらに進んでいく。アニメではないが、日本にフィットする形で一つの新しい表現として確立していく。 Catch up on AIアニメーターから見た生成AIについて 生成AIでVR動画 博報堂 AIでペルソナに直接聞くを実現 一貫したスタイルを実現 StyleAligned 空間に高品質な3DCGを設置 Beautiful Things 道案内をしてくれるA

Yoshihiro T…

中割りも期待！精度が高いフレーム補間「VIDIM」他 / Catch up on AI 2024.4.3

Pick upVIDIM（Video Frame Interpolation with Diffusion Modelは非常に精度が高い、フレーム補間フレームワーム。 まだ論文だけの発表ですが、こうした技術もどんどん進化し続けている。 Video Frame Interpolation with Diffusion Model https://synthical.com/abs/2404.01203 Catch up on AI生成AI x アニメーターの手書きで修正

Yoshihiro T…

アニメのための自動着色AI「Learning Inclusion Matching」　他 / Catch up on AI 2024.4.2

Pick up1フレーム目の色見本から、残りのフレームに対して着彩をしてくれるというAI。かなり識別のレベルが高く、色指定の見本を保ったまま着彩ができています。 Learning Inclusion Matching for Animation Paint Bucket Colorization Project：https://ykdai.github.io/projects/InclusionMatching arXiv：https://arxiv.org/abs/240

Yoshihiro T…