Mubert-Text-to-Music - Mubert APIを介したプロンプトベースの音楽生成を示すシンプルなノートブック

(A simple notebook demonstrating prompt-based music generation via Mubert API)

Created at: 2022-10-18 02:42:18
Language: Jupyter Notebook

ミュベール-テキストから音楽へ

Mubert APIを介したプロンプトベースの音楽生成を示すコラボノートブック

デモを見る

ミュベールのテキストから音楽へ

プロンプトと期間による音楽生成を提供する簡単なデモ

安定拡散+ムベール

Deforum安定拡散コラボに基づくインスタントプロンプトベースのミュージックビデオ生成のデモ


すべての音楽はMubert API –www.mubert.com/ によって生成されます。無料で使用したい場合は、Twitter(https://twitter.com/mubertapp)でタグを付け、ハッシュタグ#mubertを含めてください。

新しいテキストから音楽へのデモインターフェイスをご紹介できることをうれしく思います。 現在はGoogle Colabとして、まもなくこの機能をシンプルなフォームとしてWebサイトに追加する予定です。これはすでに口コミで広まっているので、コミュニティはすべてがどのように機能するかについて質問しています

人々はこの音楽が実際にどれほど生成的であるかを尋ねます。リクエストを送信するたびに、APIはサウンドの一意の組み合わせを生成します。繰り返しの可能性は非常に小さいです。音楽は完成したトラックのデータベースから取得されるのではなく、要求時に作成されます。

サウンドはどのように生成のために選択されますか?入力プロンプトとMubert APIタグはどちらも、トランスフォーマーニューラルネットワークの潜在空間ベクトルにエンコードされます。次に、各プロンプトに最も近いタグベクトルが選択され、対応するタグが音楽生成のためにAPIに送信されます。

すべてのサウンド(ベース、リードなどの個別のループ)はミュージシャンやサウンドデザイナーによって作成され、ニューラルネットワークによって合成されることはありません。私たちのパラダイムは「クリエイターからクリエイターへ」です。私たち自身もミュージシャンであり、ミュージシャンが方程式にとどまることが重要です。

当社独自の技術は、関連するサウンドを分析および選択し、それらからアレンジや構成を構築することができます。このデモでは、ループトラックまたは開始と終了のトラックなど、必要なものを設定できます。

カスタムライセンスはcolabで機能します。アトリビューション付きの音楽を無料で使用して画像やビデオと同期することはできますが、DSP(Spotify、Apple Music、Deezerなど)で自分のものとしてリリースすることはできません。また、@mubertappとハッシュタグ#mubertについても言及してください。商用ライセンスが必要な場合は、お問い合わせください。

これは、より複雑で正確な生成アルゴリズムを作成するための最初のステップですが、そのためには時間とリソースが必要になります。すべてのフィードバックは非常に役立つので、ユーザーエクスペリエンスに関する返信またはPMにお気軽にお書きください。楽しんでください!