【勉強メモ】Googleのモデルを凌駕する無料の音楽ジェネレーターが登場　New FREE/Open Source Music Generator - It Destroys Google's Model

だいち

New FREE/Open Source Music Generator - It Destroys Google's Modelより（GPT要約）

Meta Facebookが開発したオープンソースの音楽生成AI「music gen」が、GoogleのAI音楽生成ツール「music LM」よりも優れた結果を出した。music genは、音楽的なコードブックの予測を平行して行い、より効率的にモデルを作成している。また、Melody condition機能により、条件に合わせた曲を生成することができる。

Detailed Summary for New FREE/Open Source Music Generator - It Destroys Google's Model by Monica

00:00 新しいオープンソースの音楽ジェネレーターがリリースされ、Googleのモデルと比較して効率的であることが判明

  • Googleの音楽ジェネレーターであるMusic LMは、非公開であるため、限られたデモしか利用できない

  • 新しいオープンソースの音楽ジェネレーターであるmusic genは、自己教師あり意味表現を必要とせず、効率的にコードブックを生成することができる

  • music genはAuto regressive Transformer modelを使用しており、高品質である

  • 完全に無料のデモが提供されており、GitHubにもモデルが公開されている。

03:30 新しい無料/オープンソースの音楽生成器 - Googleのモデルを破壊する

  • Audiocraftは、オーディオ生成のためのPyTorchライブラリで、完全にオープンソースです。

  • あなた自身のマシンにインストールできますが、16 GBのビデオメモリが必要です。

  • 小規模な300Mモデル、中規模の1.5ビリオンモデル、大規模な3.3ビリオンモデルなど、複数の事前学習済みモデルがあります。

  • トレーニングコードはまだ完全にリリースされていませんが、すぐにリリースされる予定です。

07:01 Googleのモデルを凌駕する無料の音楽ジェネレーターが登場

  • Googleの音楽生成モデルはBongo beatを生成することができなかった

  • Facebook Researchの音楽生成モデルはBongo beatを生成し、ベースドロップを追加することができた

  • Music Genのモデルをアップグレードすることで、より高品質なBongo beatを生成することができた

10:32 Googleが生成したものと比較して、Music genは高品質な音楽を生成するが、大型モデルは生成に時間がかかる。

  • Bongo beatとGuitar soloを生成して比較

  • 大型モデルはBongo beatを生成するのに優れているが、Guitar soloは不十分

  • Music LMの結果も良かった。

14:03 新しい無料・オープンソースの音楽ジェネレーターがGoogleのモデルを上回る

  • 音楽LMよりも客観的に優れた音楽生成器

  • グラフで確認できるように、リラックスできるビートで一貫性がある

  • 「Sad Piano emotion of Doom evoke」の場合、音楽LMよりも優れていた

  • 「16-bit video game Boss Battle」のテーマは、興奮をもたらす

17:36 新しい無料/オープンソースの音楽生成器は、Googleのモデルを破壊します

  • Music lmの結果はまあまあだが、一貫したメロディを維持できない問題がある

  • Music genは、より一貫性があり、30秒間全体にわたって一貫している

  • 小さなモデルでも、大きなモデルと同じくらい一貫性がある

  • 音楽生成の高品質が得られることと、オープンソースであることが重要。

21:05 無料・オープンソースの音楽ジェネレーターには、曲にメロディを追加する機能があり、長いメロディをアップロードすると時間がかかるが、特定の条件下で正確なメロディを生成することができる。

  • メロディを追加する機能がある

  • 長いメロディをアップロードすると時間がかかる

  • 正確なメロディを生成するには、明確なメロディと特定の条件が必要

Meta AIは、テキストやメロディーの指示があれば音楽音声を合成できる新しいテキストtoミュージックモデル「MusicGen」を発表しました。MusicGenは、GoogleのMusicLMのような既存のモデルよりも優れているとしています。MusicGenは、圧縮された離散音楽表現の複数のストリームに対して動作する1段の変換言語モデルです。300M、1.5B、3Bの3段階のパラメータを持つ。

本日の動画からのリンクです：

Meta AIのMusicGen: https://huggingface.co/spaces/faceboo...

MusicGenのGithub: https://github.com/facebookresearch/a...

Google Music LM 論文: https://www.futurepedia.io/tool/musiclm

✩ Google AI Test Kitchen: https://aitestkitchen.withgoogle.com/...

► MattVidProウェブサイト: https://MattVidPro.com

► MattVidPro Discord: https://discord.gg/bQgcbjs2Sg

► フォローミーオンツイッター: https://twitter.com/MattVidPro

-------------------------------------------------

▼ 興味のあるリンク集を追加しました：

aiリンクスマスターリスト: https://www.futurepedia.io/

レモンギャラリー： https://MattVidPro.com/Gallery

一般的なAIプレイリストです：

- 一般的なMattVidPr...

動画編集に使っている✩AI https://www.descript.com/?lmref=nA4fDg

セカンドチャンネルです：

/ @mattpierceauto

-------------------------------------------------

Matt Video Productionsをご覧いただきありがとうございます！私はここYoutubeでいろいろな種類の動画を作っています！技術、チュートリアル、レビューなどなど！そして、購読してください！

すべての提案、思考およびコメントは大いに感謝される...私が実際にそれらを読むので。

-------------------------------------------------

► ビジネスコンタクトMattVidProSecond@gmail.com


New FREE/Open Source Music Generator - It Destroys Google's Modelより



実行してやった結果


この記事が気に入ったらサポートをしてみませんか？