ShortGPTは、ElevenLabsとMicrosoft EdgeTTSという2つの主要な音声合成システムを統合することで、30以上の言語をサポートするナレーションマトリックスを構築しました。この技術の組み合わせには、ElevenLabsの忠実度の高い発音(ブランドコンテンツ向け)と、EdgeTTSの無料ソリューション(予算が限られたプロジェクト向け)の両方が含まれています。このシステムは、韓国語やアラビア語などの複雑な言語を扱う際には音素のリズムを自動的に調整し、中国語を扱う際には四声規則を認識します。実際の事例では、ある教育機関がこの翻訳エンジンを使って、英語のオンライン授業を12の言語バージョンに自動変換し、ユーザー満足度90%の自然な吹き替えを実現した。この言語カバー範囲の広さは、従来のダビングアウトソーシングサービスを凌ぐもので、コストは手作業の1/5で済みます。
この答えは記事から得たものである。ShortGPT:ショートビデオ自動生成のためのAIフレームワークについて