Demucsバージョンv4では、トラックセパレーションの品質とパフォーマンスを大幅に向上させる数々の重要な技術的改良が導入されている:
コア技術の革新::
- ハイブリッド・トランスフォーマー・テクノロジーが導入され、トランスフォーマー・アーキテクチャーと従来のCNNが組み合わされた
- より高度なU-Net畳み込みアーキテクチャを採用
- セパレーション・アルゴリズムを改良し、トラック間の干渉を低減
パフォーマンス向上::
- v3と比較して分離精度が大幅に向上
- 複雑な音楽の分離が向上
- 特にボーカルとバッキング・トラックの分離に最適化されています。
新機能::
- 実験的な6トラック・モデリングを追加(ギターとピアノ入り)
- 微調整モデル(htdemucs_ft)オプション提供
- 複数のハードウェアプラットフォームに最適化されたサポート
これらの改善により、バージョンv4は特に音楽制作、カラオケ生成、プロフェッショナルなオーディオ分析シナリオに適しています。一般的なユーザーにとっても、バージョンv4は比較的良好な処理速度を維持しながら、より優れたデフォルトセパレーションを提供します。
この答えは記事から得たものである。Demucs: 音楽トラックを分離するための無料のオープンソースツールについて