音楽が好きなら、テキストプロンプトから高品質の音楽を作成する人工知能のウェブアプリ「MusicLM」をチェックしてみてください。このアプリは、階層的な配列間モデリングによって、条件付き音楽の作成プロセスをまったく新しいレベルに引き上げています。音質とテキスト説明の遵守という点で、このアプリの開発者であるAndrea Agostinelli、Timo I. Denk、Zalán Borsos、Jesse Engel、Mauro Verzetti、Qingqing Huang、Aren Jansen、Marco Tagliasacchi、Matt Sharifi、Neil Zeghidour、Christian Frankは以前のシステムより優れた24kHzでの音楽制作に素晴らしい仕事をした。

口笛や鼻歌のようなメロディーを、テキストキャプションで指定されたスタイルに沿った音楽にする機能は、MusicLMの最も魅力的な機能の一つです。MusicLMで条件付けをする際にメロディーの埋め込みを追加することで、提供されたメロディーに沿いながらテキストプロンプトに準拠した音楽を作成することができます。

制作者のご厚意により、人間の専門家が提供した豊富なテキスト説明を持つ5.5kの音楽とテキストのペアからなるデータセット「MusicCaps」を公開し、さらなる研究の支援を行っています。

リッチテキストキャプションは、MusicLMを使った音楽制作に利用することができます。