MusicLM

Das MusicLM-Tool ist ein Modell zur Erzeugung von originalgetreuer Musik aus Textbeschreibungen. Das Modell ist eine hierarchische Sequenz-zu-Sequenz-Modellierungsaufgabe, die Musik mit 24 kHz erzeugt, die über mehrere Minuten hinweg konsistent bleibt. Das Tool kann die erzeugte Musik sowohl auf den Text als auch auf die Melodie konditionieren, so dass es gepfiffene und gesummte Melodien entsprechend dem in einer Textbeschreibung beschriebenen Stil umwandeln kann. Das Tool ist auch in der Lage, Musik aus Bildbeschreibungen, Instrumenten, Genres, Erfahrungsstufen von Musikern, Orten und Epochen zu generieren. Darüber hinaus ist das Tool in der Lage, verschiedene Versionen der gleichen Textaufforderung und der gleichen semantischen Token zu erzeugen.