Soraを目指すプロジェクト Open-Sora 1.0 他 / Catch up on AI 2024.3.18
大きな技術革新が発表されると、それらをオープンソースで再現しようとするプロジェクトが立ち上がりますが、Open-Soraは、OpenAIが発表した動画生成AI Soraをオープンソースで再現するプロジェクト。
Open-Sora: Democratizing Efficient Video Production for All
Blog：https://hpc-ai.com/blog/open-sora-v1.0
Gallery：https://hpcaitech.github.io/Open-Sora/
Code：https://github.com/hpcaitech/Open-Sora
【Soraを目指すプロジェクト】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
Open-Sora 1.0 はオープンソースで、OpenAIが発表した動画生成AI Soraを再現するプロジェクト。モデルが公開されオープンソース。
公開されたモデルは、わずか3日間のトレーニングで、解像度 512x512の2～5秒の長さのビデオを生成可能です。
続く>>#生成AI #Sora pic.twitter.com/ryjMIoQCJg
Catch up on AI
生成AIも透過画像の時代へ Leonardo AIがTransparent Generationsを発表
【生成AIも透過画像の時代へ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
Leonardo AIが透過画像を生成できる「Transparent Generations」をリリース。その利用例として、AIでゲームアセットを制作する例が提示。
LayerDiffuseがリリースされていることから、レイヤー構造を持つ画像生成AIは今後も増えると予測。pic.twitter.com/zjb9Tu0hKU
新時代の3DCGワークフロー
【新3Dワークフロー】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
３DCG生成AI @tripoai が公開した、宇宙飛行士の宇宙空間での禅を描いた動画。建物以外はTripo AIで生成。生成のシーンから、3DCGを配置して動きを設定するところまでが描かれている。
新時代のワークフローが少しだけ見える。#生成AI #3DCGpic.twitter.com/IVDc9rDBMn
OpenAIのSoraが生成した 葉っぱに包まれた象
【葉っぱに包まれた象】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
OpenAIのSoraが生成した、現実世界には存在しない象の映像。現実世界をそのまま生成するというのも凄いですが、こうした動画も魅力的。
精度がさらに上がると、CG制作やVFXなどの領域は大きくワークフローの変更もありうる。#生成AI #sorapic.twitter.com/Heql76YbuU
VRM/MMD用AIモーキャプ XR Animatorがアップデート
【腕が変に曲がらない】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
VRM/MMD用AIモーキャプ XR Animatorがアップデート！さらに安定感が増した。WEBカメラとAIでここまでの安定性は本当に凄い。
VTuberの始まりは、本当に動きとの戦いだった。テクノロジーの進化を感じるデモとアップデート！pic.twitter.com/dIpxFCcCmF
AIアップスケーラーSUPIRのv2バージョンがリリース
【メモリ削減・ Ligntningモデルに対応】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 18, 2024
SUPIRのv2バージョンがリリース。メモリ処理の改善、幅広いモデルへの対応、より多くのサンプリングオプションが選択できるようになりました。
10GB以下のVRAMでも512→2048pxで実行可能に！
続く>>#生成AIpic.twitter.com/Lp5hkHCIz4
Midjourneyで同一キャラ生成実験
【Midjourneyで同一キャラ生成実験】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 17, 2024
Character Reference x 3Dカートゥーン風を試してみました。実写だけでなく、こうした3Dっぽいキャラクターも十分に使える!!
←オリジナル cw0⇢
←cw50 cw100+プロンプト⇢
細かい精度は改善の余地がありますが、この機能はとても便利！#画像生成AI #AI pic.twitter.com/yG70CCC98w
Grok-1がオープンソースで公開
【Grok-1がオープンソースで公開】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 17, 2024
X上で触れる前にオープン化されるとは思わなかった。
・2023年10月から0からトレーニング
・特定のタスク向けにチューニングはされていない
・パラメータ数は3,140 億。
・ライセンスはApache 2.0
Githubで公開中https://t.co/hnnZz9nSyf
自律型AIソフトウェアエンジニア Devin AI
【AIが全て実行】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 17, 2024
Devin AIは自律型AIソフトウェアエンジニア。コードの生成だけではなく、システム設計、デバッグ、デプロイまで全てを実行。
精度が上がっていくと、何が創りたいか？アイデアの力と行動力が最重視される世の中になりそう。
Dev:@cognition_labspic.twitter.com/l6zdx8dIwt
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？