Depende do que prentede usar.
Se for usar o vCenter para gerenciar apenas, fazendo backups, migrações, clones, configurações, o consumo será relativamente baixo.
Agora se for ficar usando o Console para ficar usando Visualmente as telas das VMs, dai o consumo é bem maior, com certeza.
Administro redes com links pequenos com VPN, e varios hosts espalhados, e nunca tive problema.
Claro que as vezes voce percebe algum delay ou atraso, mas nada que impossibilite usar as ferramentas.