Magenta RealTime(略してMagenta RT)は、Google DeepMindが開発したオープンソースの音楽生成モデルで、人間の作曲を補強することを主な目的としている。このモデルは800MパラメータのTransformerアーキテクチャをベースとしており、学習データには約190,000時間のインストゥルメンタルストックミュージックが含まれている。Lyria RealTimeのオープンソース版として、ライブパフォーマンスやサウンドスケープの作成に適した、テキストまたはオーディオキューによる高品質なミュージッククリップの生成をサポートしています。
このモデルはApache 2.0およびCC-BY 4.0ライセンスの下で公開されており、コードとモデルの重みは、ミュージシャンや開発者が革新的なアプリケーションを探求することを奨励するために一般公開されている。主な利点としては、低レイテンシー生成(2秒間の音楽生成にかかる時間は約1.25秒)、マルチモーダル入力のサポート、ジャンルを超えたフュージョン機能などがある。
この答えは記事から得たものである。Magenta RealTime: リアルタイムで音楽を生成するオープンソースモデルについて