Glissez vers le bas sur la notification pour la développer et vous pourrez voir le bouton précédent. Il n'est visible que dans la notification développée, pas dans la version résumée. Pour autant que je sache, il n'y a aucun moyen de modifier cela.
Notez toutefois que cela ne semble pas fonctionner si votre écran de verrouillage est configuré pour masquer les informations de notification "sensibles" :
[...] Les notifications de l'écran de verrouillage sont réglées pour masquer les informations sensibles, ce qui bloque les commandes complètes du lecteur de musique. Lorsque je fais glisser le curseur vers le bas, j'obtiens le clavier de déverrouillage, car Lollipop veut que je déverrouille mon téléphone pour pouvoir accéder à l'intégralité du lecteur de musique. [...] - Derek
À gauche, l'image "avant", à droite, après avoir glissé vers le bas sur la notification :
Cliquez sur l'une des images pour obtenir la pleine résolution