Думаю, что тут основная проблема в том, что порт вы отключаете через управление. Если вы физически провод оторвёте, то всё сработает как надо.
Тут тонкий момент в определении наличия обрыва провода. По умолчанию стоит LINK STATUS. А оинк, похоже, остаётся активным после обрубания порта через менеджмент свитча. Вот и получается, что мониторинг вмвары этого не понимает и продолжает слать пакеты в нерабочий порт.
Если уж так хочется испытать фэйловер выключая порт через управлялку свитча, то надо:
1. В настройках тиминга виртуального свитча обе сетевушки перекинуть в группу Active
2. Поставить метод обнаружения обрыва как Beacon probing
В реальной жизни я посоветовал бы оставить метод обнаружения обрыва как LINK STATUS