Eigentlich geschieht dies in der neuesten Version (sprich WMP11) automatisch.
WMP bezieht das Song Cover automatisch, aber ob man ein Cover einstellen kann, kann ich dir nichts sagen, scheint nicht möglich zu sein.

Btw. Warum benutzt du nicht iTunes!?