Entwurf virtueller Netzwerke unter Hyper-V: SET, VLAN und Verkehrstrennung

Verwaltungs-, Cluster-, Livemigrations- und Speicherverkehr auf dem Hyper-V-Host mit SET trennen: VLAN, Gewichtung, RDMA, DCB, MTU und Kontrollen auf Switchseite, mit PowerShell.
Technische Zusammenfassung
Technologie
Hyper-V, Switch Embedded Teaming, VLAN, RDMA, SMB Direct, DCB, PowerShell
Thema
Virtuelles Netzwerk und Verkehrstrennung auf dem Hyper-V-Host
Niveau
Mittel bis fortgeschritten
Voraussetzungen
  • Hyper-V-Host mit Windows Server 2016 oder höher
  • Grundkenntnisse zu VLAN und Trunks
In diesem Beitrag8 Abschnitte

Dauert die Livemigration länger als erwartet, steigt die CSV-Latenz tagsüber, oder verliert der Host die Verwaltungsverbindung, sobald ein einzelnes Kabel gezogen wird, liegt das Problem meist nicht an der Hardware, sondern am Entwurf des virtuellen Netzwerks. Ein Hyper-V-Host transportiert Verwaltung, Clusterkommunikation, Livemigration, Speicher und VM-Verkehr über dieselben physischen Karten; wie dieser Verkehr getrennt wird, entscheidet, ob der Host bei einem NIC-Ausfall weiterläuft. Im Folgenden bauen wir mit Switch Embedded Teaming (SET) ein konvergentes (converged) virtuelles Netzwerk mit PowerShell-Beispielen und den Anforderungen an die physischen Switches auf.

Zuerst den Verkehr dokumentieren

Halten Sie, bevor Sie ein Kabel anfassen, für jeden Host der Server- und Systeminfrastruktur schriftlich fest, welcher Verkehr fließt und welcher davon latenz- oder bandbreitenempfindlich ist:

Verkehr Merkmal Typische Trennung
Verwaltung Geringe Bandbreite, hohe Verfügbarkeit Eigenes VLAN, Host-vNIC
Cluster (Heartbeat, CSV-Umleitung) Latenzempfindlich Eigenes VLAN, mindestens zwei Pfade
Livemigration Kurzzeitig hohe Bandbreite Eigenes VLAN, nach Möglichkeit SMB/RDMA
Speicher (SMB3 / iSCSI) Latenz und Bandbreite kritisch Eigenes VLAN; für iSCSI wird eine separate physische NIC bevorzugt
VM-Verkehr Variabel, viele VLANs Trunk-Port, VLAN-Tag je VM

In der 1-GbE-Ära wurde für jeden Verkehr ein eigenes physisches NIC-Paar verwendet; daher stammen Hosts mit sechs bis acht Ports. Mit 10/25 GbE ist das verbreitete Modell, zwei (manchmal vier) schnelle Ports unter einem SET-Switch zusammenzufassen und den Verkehr über Host-vNICs, VLANs und QoS zu trennen. iSCSI ist die Ausnahme: Da es für Multipath-Betrieb mit MPIO ausgelegt ist, bleibt es meist außerhalb des Teams auf separaten physischen Ports. Details im Beitrag zur Wahl des gemeinsam genutzten Speichers für Hyper-V.

Wechsel von LBFO zu SET

Das mit Windows Server 2012 eingeführte LBFO (NIC Teaming) bildet ein Team auf Betriebssystemebene, auf dem dann der virtuelle Switch aufgebaut wurde. SET verlagert die Teaming-Funktion ab Windows Server 2016 dagegen direkt in den virtuellen Hyper-V-Switch. Die Unterschiede für die Entscheidung:

Merkmal LBFO + vSwitch SET
Teaming-Modus Switchunabhängig, statisch, LACP Nur switchunabhängig
RDMA auf Host-vNICs Keine Vorhanden
NIC-Kompatibilität Unterschiedliche Modelle mischbar Gleiches Modell, gleicher Treiber und gleiche Firmware
Maximale Mitgliederzahl 32 8
Microsofts Richtung für Hyper-V Wird abgekündigt Empfohlene Methode

Unter Windows Server 2022 ist das Erstellen eines virtuellen Hyper-V-Switches auf einem LBFO-Team standardmäßig blockiert; der Hyper-V-Manager bietet diese Option nicht an. Planen Sie beim Upgrade LBFO-basierter Hosts ein, den virtuellen Switch als SET neu aufzubauen. Führen Sie die Umstellung durch, nachdem der Host in den Wartungsmodus versetzt und die VMs verschoben wurden, denn beim Löschen des vSwitch verlieren die angebundenen VM-Adapter die Netzwerkverbindung. Überspringen Sie die Reihenfolge nicht.

SET erstellen und Lastausgleichsmodi

SET kennt zwei Lastausgleichsalgorithmen:

  • HyperVPort: Jeder VM-Adapter und jede Host-vNIC wird an einen physischen Port gebunden. Der Verkehr einer VM verlässt den Host über einen Port; der physische Switch sieht die MAC-Adresse an einem Port. Ab Windows Server 2019 ist dies der Standard.
  • Dynamic: Ausgehender Verkehr wird pro Datenfluss auf die Ports verteilt, eingehender Verkehr nach der HyperVPort-Logik zugeordnet. In Umgebungen mit wenigen VMs mit hohem Verkehr kann so die ausgehende Last besser verteilt werden.

In den meisten Umgebungen ist das standardmäßige HyperVPort die richtige Wahl. Da SET nur switchunabhängig arbeitet, wird am physischen Switch kein Port-Channel und kein LACP konfiguriert; Sie schließen die beiden Ports an zwei verschiedene physische Switches an und erreichen so Switch-Redundanz.

# SET-Switch mit zwei 25-GbE-Ports erstellen
New-VMSwitch -Name "SETswitch" `
  -NetAdapterName "SLOT2-P1","SLOT2-P2" `
  -EnableEmbeddedTeaming $true `
  -AllowManagementOS $false `
  -MinimumBandwidthMode Weight

# Lastausgleichsalgorithmus prüfen / einstellen
Get-VMSwitchTeam -Name "SETswitch" | Format-List
Set-VMSwitchTeam -Name "SETswitch" -LoadBalancingAlgorithm HyperVPort

-MinimumBandwidthMode wird nur beim Erstellen des Switches festgelegt. Eine spätere Änderung bedeutet, den Switch neu aufzubauen. Wenn Sie Host-vNICs gewichten wollen, wählen Sie von Anfang an Weight.

Host-vNICs und VLAN-Konfiguration

Das Host-Betriebssystem geht über virtuelle Adapter (Host-vNICs), die am SET-Switch hängen, ins Netz. Legen Sie für jede Verkehrsart eine eigene vNIC an und geben Sie jeder ihr eigenes VLAN. Die folgenden VLAN-Nummern sind Beispiele; passen Sie sie an Ihren eigenen Adressplan an. Betrachten Sie die Verkehrstrennung unter Hyper-V zusammen mit dem Plan für Unternehmens-VLANs und Netzwerksegmentierung auf den physischen Switches.

# Host-vNICs
Add-VMNetworkAdapter -ManagementOS -SwitchName "SETswitch" -Name "Management"
Add-VMNetworkAdapter -ManagementOS -SwitchName "SETswitch" -Name "Cluster"
Add-VMNetworkAdapter -ManagementOS -SwitchName "SETswitch" -Name "LiveMigration"

# VLAN-Tags (ein VLAN im Access-Modus)
Set-VMNetworkAdapterVlan -ManagementOS -VMNetworkAdapterName "Management" -Access -VlanId 10
Set-VMNetworkAdapterVlan -ManagementOS -VMNetworkAdapterName "Cluster" -Access -VlanId 20
Set-VMNetworkAdapterVlan -ManagementOS -VMNetworkAdapterName "LiveMigration" -Access -VlanId 30

# Bandbreitengewichtungen (relative Werte)
Set-VMNetworkAdapter -ManagementOS -Name "Management" -MinimumBandwidthWeight 10
Set-VMNetworkAdapter -ManagementOS -Name "Cluster" -MinimumBandwidthWeight 10
Set-VMNetworkAdapter -ManagementOS -Name "LiveMigration" -MinimumBandwidthWeight 30

# VLAN für den VM-Adapter
Set-VMNetworkAdapterVlan -VMName "APP01" -Access -VlanId 110

Gewichtungen sind keine Obergrenze, sondern der bei Überlast garantierte relative Anteil. Ist die Leitung frei, kann jede vNIC die gesamte Bandbreite nutzen. Für nicht zugewiesene VM-Adapter gilt der Switch-Wert DefaultFlowMinimumBandwidthWeight; Entwürfe, die vergessen, dem VM-Verkehr einen Anteil zu lassen, kommen bei intensiver Livemigration mit Beschwerden der Anwender zurück.

Die Verwaltungs-vNIC erhält Standardgateway und DNS. Auf Cluster- und Livemigrations-vNICs wird kein Gateway definiert und die DNS-Registrierung deaktiviert. Genau hier liegt ein häufiger Fehler: Jede vNIC bekommt ein Gateway, der Host erhält mehrere Standardrouten, und der Verwaltungsverkehr verlässt ihn über eine unerwartete Schnittstelle. Danach wird ein Ticket eröffnet: „RDP bricht gelegentlich ab“.

Set-DnsClient -InterfaceAlias "vEthernet (Cluster)" -RegisterThisConnectionsAddress $false
Set-DnsClient -InterfaceAlias "vEthernet (LiveMigration)" -RegisterThisConnectionsAddress $false

RDMA und SMB Direct

RDMA ermöglicht es, SMB-Verkehr nahezu ohne Prozessorbeteiligung direkt zwischen Arbeitsspeichern zu übertragen (SMB Direct). In Hyper-V-Umgebungen profitieren SMB3-Speicher, Storage Spaces Direct und SMB-basierte Livemigration direkt davon. SET ist die einzige Teaming-Methode, die RDMA auf Host-vNICs unterstützt.

Es gibt zwei verbreitete RDMA-Typen. iWARP arbeitet über TCP; eine verlustfreie Netzwerkkonfiguration ist nicht zwingend. RoCEv2 arbeitet über UDP und erfordert eine durchgängige DCB-Konfiguration (PFC und ETS). Bei RoCE müssen die DCB-Einstellungen von Switch und Host exakt übereinstimmen; eine falsche Prioritätsnummer auf einer Seite erzeugt keine Fehlermeldung, sondern senkt nur still die Leistung. Das ist die am schwersten zu findende Störung.

# Zwei RDMA-fähige Host-vNICs für SMB
Add-VMNetworkAdapter -ManagementOS -SwitchName "SETswitch" -Name "SMB1"
Add-VMNetworkAdapter -ManagementOS -SwitchName "SETswitch" -Name "SMB2"
Set-VMNetworkAdapterVlan -ManagementOS -VMNetworkAdapterName "SMB1" -Access -VlanId 711
Set-VMNetworkAdapterVlan -ManagementOS -VMNetworkAdapterName "SMB2" -Access -VlanId 712
Enable-NetAdapterRdma -Name "vEthernet (SMB1)","vEthernet (SMB2)"

# Jede SMB-vNIC an einen eigenen physischen Port binden
Set-VMNetworkAdapterTeamMapping -ManagementOS -VMNetworkAdapterName "SMB1" -PhysicalNetAdapterName "SLOT2-P1"
Set-VMNetworkAdapterTeamMapping -ManagementOS -VMNetworkAdapterName "SMB2" -PhysicalNetAdapterName "SLOT2-P2"

# DCB-Beispiel für RoCEv2 (Priorität 3 = SMB)
Install-WindowsFeature Data-Center-Bridging
New-NetQosPolicy "SMB" -NetDirectPortMatchCondition 445 -PriorityValue8021Action 3
Enable-NetQosFlowControl -Priority 3
Disable-NetQosFlowControl -Priority 0,1,2,4,5,6,7
New-NetQosTrafficClass "SMB" -Priority 3 -BandwidthPercentage 50 -Algorithm ETS
Set-NetQosDcbxSetting -Willing $false
Enable-NetAdapterQos -Name "SLOT2-P1","SLOT2-P2"

Da RDMA-Verkehr den Softwarepfad des virtuellen Switches umgeht, begrenzen vSwitch-Gewichtungen den SMB-Direct-Verkehr nicht; dessen Anteil bestimmt die DCB-Verkehrsklasse. Der ETS-Bandbreitenwert im Beispiel ist ein Konfigurationsbeispiel; wählen Sie ihn nach der Verkehrsverteilung in Ihrer Umgebung. Referenzdokument von Microsoft ist die Seite RDMA and Switch Embedded Teaming.

Seite des physischen Switches

Wie sauber die Hostseite auch ist: Solange der gegenüberliegende Switchport nicht geprüft ist, gilt der Entwurf nicht als abgeschlossen. Für die Konsistenz mit dem VLAN-Plan auf Campusseite ergänzt der Beitrag VLAN-Entwurf im Unternehmensnetz.

Anforderung Grund
Trunk-Port, Liste erlaubter VLANs ausdrücklich definiert Host-vNIC- und VM-VLANs kommen getaggt an
Kein Port-Channel / LACP SET arbeitet nur switchunabhängig
Edge-Port-Verhalten (z. B. bei Cisco spanning-tree portfast trunk) Verhindert STP-Verzögerung beim Link-Aufbau
Durchgängig gleiche MTU Inkonsistente Jumbo Frames führen zu Fehlern bei Livemigration und SMB
Für RoCE PFC und ETS, gleiche Priorität wie am Host Verlustfreier RDMA-Verkehr

Werden Jumbo Frames verwendet, werden die erweiterte Adaptereigenschaft „Jumbo Packet“ unter Windows (bei den meisten Treibern 9014 Byte) und die MTU auf Switchseite gemeinsam eingestellt. Jumbo nur in den Speicher- und Livemigrations-VLANs zu aktivieren und für Verwaltungs- und VM-Verkehr die Standard-MTU zu belassen, erleichtert die Fehlersuche. Fehlt die MTU auf einem einzigen Switch in der Mitte des Pfades, werden große Pakete verworfen und kleine durchgelassen; Ping funktioniert, aber die Livemigration hängt. Ein durchgängiger Test ist Pflicht.

Prüfung vor dem Hinzufügen zum Cluster

Führen Sie auf jedem Host die folgenden Kontrollen aus und hängen Sie die Ausgabe an das Änderungsprotokoll an:

# Team-Mitglieder und Algorithmus
Get-VMSwitchTeam -Name "SETswitch" | Format-List Name, NetAdapterInterfaceDescription, TeamingMode, LoadBalancingAlgorithm

# Host-vNICs, VLANs und physische Zuordnung
Get-VMNetworkAdapter -ManagementOS | Format-Table Name, SwitchName, MacAddress
Get-VMNetworkAdapterVlan -ManagementOS
Get-VMNetworkAdapterTeamMapping -ManagementOS

# RDMA und SMB Multichannel
Get-NetAdapterRdma | Format-Table Name, Enabled
Get-SmbClientNetworkInterface
Get-SmbMultichannelConnection

# Durchgängiger Jumbo-Frame-Test (8972 Byte Nutzlast für 9014-Byte-Adaptereinstellung)
ping 10.0.71.12 -f -l 8972

Checkliste:

  • Alle SET-Mitglieder haben dasselbe Modell, denselben Treiber und dieselbe Firmware-Version.
  • Jede Host-vNIC ist im richtigen VLAN; ein Standardgateway gibt es nur auf der Verwaltungs-vNIC.
  • Wird ein physisches Kabel gezogen, laufen Verwaltungszugang und VM-Verkehr ohne Unterbrechung weiter. Führen Sie diesen Test nicht auf dem Papier durch, sondern ziehen Sie das Kabel tatsächlich.
  • Wird RDMA genutzt, erscheinen in der Ausgabe von Get-SmbMultichannelConnection RDMA-fähige Verbindungen.
  • Im Failover Cluster sind die Rollen der Clusternetze (nur Cluster, Cluster und Client, keine) richtig zugewiesen; festgelegt ist, welche Netze die Livemigration nutzt.

Zur Diagnose netzwerkbedingter Fehler bei der Livemigration siehe den Beitrag zu Fehlern bei der Hyper-V-Livemigration, für den gesamten Clusterentwurf die Checkliste zur Failover-Cluster-Planung. Für eine Überprüfung Ihrer vorhandenen Host-Netzwerkkonfiguration gibt es unsere Serviceseite Virtualisierung und Datenmanagement.

Häufig gestellte Fragen

Muss ich bei SET am physischen Switch LACP konfigurieren?

Nein. SET arbeitet nur im switchunabhängigen Modus; die physischen Ports werden nicht in einen Port-Channel oder eine LACP-Gruppe aufgenommen, sondern jeweils als unabhängiger Trunk-Port konfiguriert. So können Sie die beiden Mitglieder an zwei verschiedene physische Switches anschließen.

Kann ich SET NICs unterschiedlicher Marke oder Geschwindigkeit hinzufügen?

Microsoft verlangt, dass SET-Mitglieder von demselben Hersteller stammen und dasselbe Modell, denselben Treiber und dieselbe Firmware-Version haben. Ein Team mit unterschiedlichen Karten wird nicht unterstützt, und bei Funktionen wie RDMA kann es zu unvorhersehbarem Verhalten kommen.

Sollte ich HyperVPort oder Dynamic wählen?

Ab Windows Server 2019 ist das standardmäßige HyperVPort für die meisten Umgebungen die richtige Wahl; jede VM wird an einen Port gebunden, und am physischen Switch gibt es keine MAC-Bewegungen. Füllt der ausgehende Verkehr weniger VMs einen einzelnen Port aus, kann Dynamic in Betracht gezogen werden.

Sollte ich auch den iSCSI-Verkehr über SET führen?

Technisch ist iSCSI über Host-vNICs möglich. Da die Redundanz von iSCSI jedoch über MPIO hergestellt wird, ist es verbreitet und empfohlen, iSCSI auf separaten physischen Ports außerhalb des Teams zu betreiben. Prüfen Sie auch die vom Speicherhersteller unterstützte Konfiguration.

Support

Kontaktieren Sie uns für Support oder eine Bestandsaufnahme zu diesem Thema.

Kontaktformular
[email protected]

Eretek Systembetreuung

Serverinstallation, Konfiguration, Störungsbehebung und regelmäßige Wartung. Active Directory, Virtualisierung und Datensicherung werden mit derselben Disziplin betrieben.

Wissenszentrum

Weitere Beiträge