Essayez ça:
Entre dans le répertoire Musique, faites un clic droit n'importe où dans ce dossier et sélectionnez "Personnaliser ce dossier...".
Là, dans la liste déroulante, sélectionnez soit "Icônes de fichiers de musique", soit "Images et vidéos", puis cocher la case "Appliquer également ce modèle à tous les sous-dossiers".