SongGenerationはTencent AI Labによって開発されたオープンソースの音楽生成モデルで、そのコア機能は以下の通り:
- 歌の世代歌詞とテキストに基づき、ボーカルとバッキングトラックを含む完全な楽曲を生成します。
- マルチトラック出力純粋な音楽、純粋なボーカル、またはボーカルとバッキングトラックを別々に生成し、ポスト編集を容易にします。
- スタイル・コントロールテキスト記述による音楽スタイルのカスタマイズ(例:性別、音色、ジャンル、感情など)
- リファレンス・オーディオ・ミミクリー10秒間のオーディオ・クリップをアップロードすると、そのスタイルを真似て新しいトラックを生成することができる。
- 低メモリ最適化最低10GBのGPUメモリをサポートします。
- オープンソース・サポートフルモデルウェイトとコンフィギュレーションの提供
これらの特徴により、作曲やビデオスコアリングなど幅広いシーンに適している。
この答えは記事から得たものである。SongGeneration: 高品質の音楽と歌詞を生成するオープンソースのAIモデルについて