Sur la vm il vous faudra installer le packet suivant:
apt-get install spice-vdagent
Redémarrer et le tour est joué !