Catch up on AI

小石を完璧にセグメント segmenteverygrain 他 / Catch up on AI 2024.3.31

Pick up重なり合う小石を完璧に近い形でセグメントできるsegmenteverygrain。様々な画像解析の用途で利用できそう。凄まじい精度。 segmenteverygrain https://github.com/zsylvester/segmenteverygrain?tab=readme-ov-file Catch up on AI現実と見間違える3DGSをPostshotで BMWの100年の歴史を生成AI動画で生成AIにアニメーターがどう向き合うのか

顔画像1枚で、同一人物を再現 Arc2Face　他 / Catch up on AI 2024.3.30

Pick up一貫性のあるキャラクターの再現は、生成AI当初からの課題ですが、Arc2Faceは1枚の画像からキャラクター性を保ち、多様なバリエーションを生成できるフレームワーク。ローカル版がリリースされておりWindows、Mac、Linuxで1クリックで利用可能。 Arc2Face-A Foundation Model of Human Faces https://pinokio.computer/item?uri=https://github.com/cockta

精度の高いインペイントを実現 BrushNet　他 / Catch up on AI 2024.3.29

Pick upインペイントの精度を一段引き上げてくれるモデル BrushNet。全く違和感がなく、マスクした部分を保管しながら生成してくれます。 BrushNet : A Plug-and-Play Image Inpainting Model with Decomposed Dual-Branch Diffusion Project：https://tencentarc.github.io/BrushNet/ arXiv：https://arxiv.org/abs/240

AIアバターのHeyGenの「Avatar in Motion 1.0」が凄い他 / Catch up on AI 2024.3.28

Pick upAIアバターのHeyGenが新機能、「Avatar in Motion 1.0」がリリース。アクションもリップシンクも全てが自然に。もうアバターと言われないとわからないレベルになってきた。 HeyGen https://www.heygen.com/ Catch up on AIForge Webuiで複数人を生成 SD Forge Attention Couple 3DCG生成AIのワークフロー 360度写真生成AI Skybox AIがアップデート

AIとわからない動画Arcads AIを使用して生成された動画他 / Catch up on AI 2024.3.27

Pick up生成AIでフルで生成されたか、Deepfakeかが議論となっていましたが、その争点より、気軽にできることに対して知識とリスク管理をしたほうが良いと感じた動画。 Arcads AI Deepfake Video https://www.resemble.ai/arcads-ai-deepfake-video/ Catch up on AI3秒で解説動画に変換するAI NoLang ２か国語の字幕で語学を学ぶ Miraa AI セマンティックガウスという概念

クリエイター x Soraの生成AI動画作品他 / Catch up on AI 2024.3.26

Pick up一部のクリエイターやデザインスタジオにSoraが解禁。様々なユニークな作品が生まれている。様々な周辺産業はなくなる可能性もあるが、クリエイターにとっては追い風になりそう。ただ競争も激化する。 Sora: First Impressions https://openai.com/blog/sora-first-impressions Catch up on AISoraで生成された想像上の生物ラフ絵からのアニメ生成ラスベガスのスフィアも利用 Net

写真1枚と動きの参考動画からアニメを生成できる新機能　他 / Catch up on AI 2024.3.25

Pick up静止画と動画をあわせて、一つのアニメーションを生成できる新機能。これはなかなか手軽。様々な実験を試みてみたいと思います。 Domo AI https://discord.com/invite/domoai Catch up on AIアニメーター x 生成AI 実験動画内のターゲットオブジェクト認識格ゲーでLLMの性能評価様々な人間のテクスチャを生成 TexDreamer AIで3Dアニメーションサイト構築 3Dデータと連携一貫性の高いアニ

3Dガウシアンを舞台に「Gaussian Frosting」/ Catch up on AI 2024.3.24

Pick up3Dガウシアンで表面に特別な層を追加し、3DCGと連携したり編集が可能になる技術。 Gaussian Frosting: Editable Complex Radiance Fields with Real-Time Rendering Project：https://anttwo.github.io/frosting/ arXiv：https://arxiv.org/abs/2403.14554 Code：Coming Soon Catch up on A

開始フレームと終了フレームからアニメを生成 / Catch up on AI 2024.3.23

Pick up開始フレームと終了フレームをインプットすると、その間のフレームを生成してくる技術。かなり自然に動画を生成してくれている。 Explorative Inbetweening of Time and Space Project：https://time-reversal.github.io arXiv：https://arxiv.org/abs/2403.14611 Code：Coming Soon Catch up on AI高精度な手のアニメ電子ペーパー

画像生成AIのAPIの包括パッケージ Stability AI Developer Platform / Catch up on AI 2024.3.20

Pick upAIによるアップスケール、アウトペイント、インペイントなど画像の生成だけではなく編集機能まで提供。様々なプラットフォームでStable Diffusionが利用されるようになる。 Stability AI Developer Platformの画像サービス https://ja.stability.ai/blog/image-services-on-stability-ai-developer-platform Stability AI Develope

動画生成AIも超高速へAnimateDiff-Lightning / Catch up on AI 2024.3.21

Pick up動画生成も大幅にスピードアップ。従来の10倍へ、今後さらに生成AIによる動画は試行錯誤が加えられる環境となった。 AnimateDiff-Lightning Project：https://huggingface.co/ByteDance/AnimateDiff-Lightning Model：https://huggingface.co/ByteDance/AnimateDiff-Lightning/tree/main Demo：https://huggin

日本語にも対応した高精度AIキャプチャ Webcam Motion Capture　他 / Catch up on AI 2024.3.20

Pick upAI搭載のWebcam Motion CaptureはAIを搭載し、高品質なハンドトラッキングをWebカメラだけで実現する高精度モーションキャプチャ。 VTuber初期と比べると時代が進んだ。 Webcam Motion Capture [English Ver] https://webcammotioncapture.info/beta.php [日本語Ver] https://webcammotioncapture.info/ja/beta.php

アニメから絵画風まで「AI 3Dレンダリング」ワークフロー　他 / Catch up on AI 2024.3.19

Pick up3DCGを制作して、それぞれのオブジェクトを認識させてAIレンダリング。今までかなり工数と時間がかかっていた作業が生成AIで大きく短縮。当然一貫性などの問題はありつつも大きな進捗だと思います。 AI 3Dレンダリングチュートリアル https://youtube.com/watch?v=mu3JEfx3PHM Catch up on AIアニメの高画質化に新たな手法 APISR 1Xのヒューマノイド目的生成AIの3DCGを1ランクアップヒューマノ

Soraを目指すプロジェクト Open-Sora 1.0 他 / Catch up on AI 2024.3.18

大きな技術革新が発表されると、それらをオープンソースで再現しようとするプロジェクトが立ち上がりますが、Open-Soraは、OpenAIが発表した動画生成AI Soraをオープンソースで再現するプロジェクト。 Open-Sora: Democratizing Efficient Video Production for All Blog：https://hpc-ai.com/blog/open-sora-v1.0 Gallery：https://hpcaitech.gith

2024年3月の記事一覧

小石を完璧にセグメント segmenteverygrain 他 / Catch up on AI 2024.3.31

顔画像1枚で、同一人物を再現 Arc2Face 他 / Catch up on AI 2024.3.30

精度の高いインペイントを実現 BrushNet 他 / Catch up on AI 2024.3.29

AIアバターのHeyGenの「Avatar in Motion 1.0」が凄い 他 / Catch up on AI 2024.3.28

AIとわからない動画Arcads AIを使用して生成された動画 他 / Catch up on AI 2024.3.27

クリエイター x Soraの生成AI動画作品 他 / Catch up on AI 2024.3.26

写真1枚と動きの参考動画からアニメを生成できる新機能 他 / Catch up on AI 2024.3.25