Mi consejo sería:
1 Sube un video en donde solo este la imagen; créditos, o contraportada de tu álbum (tres segs. de duración o menos).
Si lo prefieres, sube la miniatura personalizada a ese video.
2 Subes y agregas tus videos a una lista de reproducción.
3 El video que solo dura un segundo, y que tiene la imagen de tu portada, la pones en la primer o última posición de la lista de reproducción (da igual, ya que solo perderás un seg. antes de la primer canción, o hasta que finalice toda la lista (Reproducción automática))
4 En opciones de lista, seleccionas el video de un seg. de duración como portada de la lista.
No sé ve muy profesional, pero es una solución viable.
Saludos!!!