Ich glaube du verstehst da was falsch. Was du gerade versuchst ist der VM eine virtuelle Grafikkarte hinzuzufügen. Das hat aber nichts mit echten Grafikkarten zutun. Willst du deine neue Grafikkarte in einer VM nutzen muss du erst IOMMU aktivieren etc und dann die GPU per PCI Passthrough in eine VM durchreichen. Ist ziemlich kompliziert.
Hier ist beschrieben wie das geht. Und nicht vergessen das eine Grafikkarte immer nur von einem Betriebsystem benutzt werden kann. Für jede VM, die eine GPU nutzen soll, musst du also eine eigene Grafikkarte kaufen. Und der Host kann diese auch nicht mehr benutzen, sobald du sie in eine VM durchgereicht hast.