Check out MusicLM, de Artificial Intelligence web-app die hoogwaardige muziek creëert van tekstuele aanwijzingen als je van muziek houdt. De app tilt het proces van het maken van voorwaardelijke muziek naar een heel nieuw niveau met zijn hiërarchische sequence-to-sequence model. In termen van audio kwaliteit en naleving van de tekstuele beschrijving hebben de ontwikkelaars van de app, Andrea Agostinelli, Timo I. Denk, Zalán Borsos, Jesse Engel, Mauro Verzetti, Qingqing Huang, Aren Jansen, Marco Tagliasacchi, Matt Sharifi, Neil Zeghidour, en Christian Frank, fantastisch werk geleverd met het produceren van muziek met een frequentie van 24kHz die beter presteert dan eerdere systemen.

De mogelijkheid van MusicLM om gefloten en geneuriede melodieën om te zetten in muziek dat de aangegeven stijl volgt in een tekstuele beschrijving is een van de meest intrigerende kenmerken ervan. Je kunt muziek creëren die voldoet aan tekstuele aanwijzingen terwijl je een gegeven melodie volgt door melodie-embeds toe te voegen voor conditionering met MusicLM.

De makers hebben vriendelijk MusicCaps, een dataset van 5.5k muziek-tekst paren met uitgebreide tekstuele beschrijvingen geleverd door menselijke experts, openbaar beschikbaar gemaakt om verder onderzoek te ondersteunen.

Rijke tekstuele beschrijvingen kunnen worden gebruikt om muziek te creëren met behulp van MusicLM.