Musiclm

MusicLM est un logiciel d’intelligence artificielle novateur qui se concentre sur la génération conditionnelle de musique. Il aborde cette tâche en utilisant un modèle de modélisation séquence à séquence hiérarchique, permettant de générer de la musique cohérente pendant plusieurs minutes à une fréquence d’échantillonnage de 24 kHz. Les expériences réalisées avec MusicLM démontrent qu’il surpasse les systèmes précédents en termes de qualité audio et de respect des descriptions textuelles.

Une caractéristique intéressante de MusicLM est sa capacité à être conditionné à la fois par du texte et par une mélodie. Par exemple, il peut transformer des mélodies sifflées ou fredonnées en respectant le style décrit dans une légende textuelle. Cette fonctionnalité permet une grande flexibilité dans la création de musique personnalisée et adaptée à différents besoins artistiques.

Pour soutenir la recherche future dans le domaine, les créateurs de MusicLM ont publié un ensemble de données appelé MusicCaps. Cet ensemble de données est composé de 5 500 paires de musique et de texte, où les descriptions textuelles riches sont fournies par des experts humains. Cela offre aux chercheurs et aux développeurs un ensemble de ressources précieuses pour explorer davantage les capacités de la génération musicale basée sur l’intelligence artificielle.