HCI oder klassisches SAN? S2D, vSAN und dreischichtige Architektur

HCI oder SAN? Vergleichen Sie S2D/Azure Local, vSAN und Ceph mit der dreischichtigen Architektur nach Skalierung, Kapazitätseffizienz, Ausfallrisiko während der Wartung und Lebenszyklus.
Technische Zusammenfassung
Technologie
Storage Spaces Direct, Azure Local, VMware vSAN, Ceph, SAN, iSCSI, Fibre Channel
Thema
Auswahl der Speicherarchitektur für die Virtualisierung
Niveau
Mittel bis fortgeschritten
Voraussetzungen
  • Vorhandene Kapazitäts- und Leistungsdaten
  • Entscheidung oder Shortlist zur Virtualisierungsplattform
In diesem Beitrag8 Abschnitte

Der Support des Speicherarrays läuft bald aus, und die Hosts sind veraltet: Erneuern Sie die dreischichtige Architektur, oder wechseln Sie zu einer hyperkonvergenten Infrastruktur (HCI), die den Speicher in die Server integriert? In Herstellerpräsentationen wird diese Frage meist in einem Satz beantwortet. In der Praxis hängt die Antwort von Wachstumsprofil, Knotenzahl, Netzwerk und davon ab, was das Team betreiben kann. Dieser Ratgeber vergleicht beide Ansätze nach Skalierung, Kapazitätseffizienz, Ausfallbereich, Eignung für Arbeitslasten und Lebenszyklus und endet mit einem Entscheidungsbaum.

Der grundlegende Unterschied beider Architekturen

In der dreischichtigen Architektur sind Rechenleistung (Hypervisor-Hosts), Netzwerk (iSCSI/FC/SMB) und Speicher (SAN- oder NAS-Array) getrennte Schichten. Das Array ist mit eigenen Controllern, RAID-Struktur, Cache und Software ein eigenständiges System; die Hosts greifen über das Netz darauf zu.

Bei HCI trägt jeder Server seine eigenen lokalen Festplatten. Die softwaredefinierte Speicherschicht stellt diese Festplatten clusterweit als einen Pool bereit und schützt die Daten, indem sie sie zwischen den Knoten kopiert. Es gibt kein separates Array; die Aufgabe des „Controllers“ übernimmt Software, die auf den Hypervisor-Hosts läuft. Wichtige Beispiele:

  • Storage Spaces Direct (S2D) — Speicherschicht von Windows Server Datacenter und Azure Local
  • VMware vSAN — in den ESXi-Kernel integriert
  • Ceph — in Proxmox VE integrierter oder eigenständig genutzter verteilter Speicher
  • Nutanix AOS — verteilte Speicherschicht der Nutanix-Plattform

Die praktische Folge dieses Unterschieds: An die Stelle des Speichernetzes tritt das Netz zwischen den Knoten. Bei HCI wird jeder Schreibvorgang auf mindestens einen anderen Knoten kopiert; deshalb begegnen uns Anforderungen wie 25 GbE und RDMA häufiger. Ist das Netz schwach, ist auch der Speicher schwach.

Skalierung und Kapazitätseffizienz

In der dreischichtigen Architektur skalieren Rechenleistung und Speicher unabhängig: Wird Kapazität gebraucht, kommt ein Festplatteneinschub ans Array, wird Rechenleistung gebraucht, ein Host hinzu. Bei HCI ist die Skalierungseinheit der Knoten; jeder neue Knoten bringt Prozessor, Arbeitsspeicher und Festplatten mit. In einer Umgebung, die vor allem an Festplattenkapazität wächst (etwa Archiv- oder Dateiserverdaten), bedeutet das unnötige Prozessor- und kernbasierte Lizenzkosten. Manche HCI-Lösungen bieten reine Speicherknoten oder das Hinzufügen einzelner Festplatten an; fragen Sie danach bei der Bewertung.

Die Kapazitätseffizienz hängt von der Ausfallsicherheitsmethode ab. Werte für S2D laut Microsoft-Dokumentation:

S2D-Ausfallsicherheitstyp Tolerierte Ausfälle Kapazitätseffizienz Mindestanzahl Knoten
Zwei-Wege-Spiegelung 1 %50 2
Drei-Wege-Spiegelung 2 %33,3 3
Duale Parität 2 50–80 % (je nach Knotenzahl) 4
Spiegelungsbeschleunigte Parität 2 Abhängig vom Verhältnis Spiegelung/Parität 4

In einem klassischen Array liefert RAID 6 oder die verteilte RAID-Struktur des Herstellers in der Regel ein höheres Netto-/Rohverhältnis; Datenreduktion (Deduplizierung, Komprimierung) ist bei den meisten Arrays in die Controller-Software integriert. Beispielrechnung: In einer Umgebung mit 100 TB Nettobedarf benötigt HCI mit Drei-Wege-Spiegelung ohne Cache-Festplatten etwa 300 TB Rohkapazität; derselbe Bedarf wird auf einem Array mit 10+2-RAID-6-Gruppen ohne Ersatzfestplatten mit etwa 120 TB Rohkapazität gedeckt (100 × 12/10). Parität bei HCI erhöht die Effizienz, senkt aber die Schreibleistung und erfordert mehr Knoten. Vergleichen Sie Angebote nicht nach Roh-TB, sondern mit derselben Nettokapazität und demselben Ausfallsicherheitsziel.

Ausfallbereiche und Ausfallsicherheit nach Knotenzahl

Bei HCI ist der Ausfallbereich standardmäßig der Knoten. Einen Server für Wartung neu zu starten bedeutet, dass alle Festplatten dieses Knotens vorübergehend ausfallen. Ein Cluster mit Zwei-Wege-Spiegelung ist, während ein Knoten in Wartung ist, gegen einen zweiten Festplattenausfall ungeschützt. Auch geplante Wartung ist ein Risiko.

Anzahl Knoten S2D vSAN (FTT=1 / FTT=2) Ceph (size=3)
2 Zwei-Wege- oder verschachtelte (nested) Spiegelung + Witness 2 Knoten + externer Witness Nicht empfohlen
3 Drei-Wege-Spiegelung FTT=1 RAID-1 Funktioniert, aber kein Reserveknoten für die Selbstheilung
4–5 Drei-Wege-Spiegelung, duale Parität FTT=1 RAID-5; für FTT=2 RAID-1 5 Hosts Empfohlener Einstieg
6+ Alle Optionen FTT=2 RAID-6 Erasure-Coding-Optionen

Um mit Spiegelung in vSAN n Ausfälle zu tolerieren, sind 2n+1 Hosts nötig. In der vSAN-ESA-Architektur unterscheidet sich die für RAID-5 benötigte Hostzahl von OSA (ESA verwendet je nach Clustergröße ein 2+1- oder 4+1-Schema); versionsspezifische Details prüfen Sie in der Broadcom-Dokumentation. In HCI-Clustern mit zwei Knoten wird für S2D ein Dateifreigabe-, Cloud- oder USB-Witness, für vSAN ein separater Witness-Host benötigt. Den Witness in denselben Cluster zu legen, ist ein Entwurfsfehler, der in der Praxis noch immer vorkommt.

In der dreischichtigen Systeminfrastruktur sind die Ausfallbereiche getrennt: Der Neustart eines Hosts beeinflusst die Ausfallsicherheit des Speichers nicht. Dafür ist das Array ein einzelnes System; auch mit zwei Controllern kann ein Fehler in der Controller-Software (Firmware) oder ein fehlerhaftes Upgrade den gesamten Cluster treffen. Zwei Controller, eine Software.

S2D/Azure Local, vSAN und Ceph im Vergleich

Kriterium S2D / Azure Local vSAN Ceph
Hypervisor Hyper-V ESXi Proxmox VE, KVM, weitere
Hardware Zertifizierte Lösung/Katalog vSAN ReadyNode / HCL Flexibel, Enterprise-Festplatten Pflicht
Netz RDMA empfohlen 10/25 GbE Getrenntes Public- und Cluster-Netz empfohlen
Lizenz WS Datacenter oder Azure-Abonnement Abhängig vom VMware-Paket Open Source, Support separat
Betrieb PowerShell, WAC, Azure-Portal vCenter Proxmox-Oberfläche oder ceph-CLI

S2D und vSAN sind vom Hersteller konzipierte und in das Verwaltungswerkzeug integrierte Produkte. Ceph ist sehr flexibel, erfordert im Betrieb aber mehr Wissen. Gibt es im Team niemanden, der Placement Groups, die CRUSH-Map und das Rebalancing-Verhalten versteht, verläuft die Erholung nach einem Festplatten- oder Knotenausfall lang und belastend. Ein häufiger Fehler bei Ceph ist auch der Einsatz von Consumer-SSDs; bei Festplatten ohne Stromausfallschutz (PLP) bricht die synchrone Schreibleistung ein. Zur Ceph-Einrichtung und Netztrennung unter Proxmox siehe den Beitrag Einrichtung eines Proxmox-VE-Clusters.

Eignung für Arbeitslasten

  • Allgemeine Servervirtualisierung (AD, Anwendungen, Dateien, mittelgroße SQL-Instanzen): Beide Architekturen sind geeignet; entschieden wird nach Betriebsmodell und Kosten.
  • Niederlassungen und entfernte Standorte: HCI mit zwei bis drei Knoten ist ein starker Kandidat, weil separates Array und SAN-Switch entfallen.
  • VDI: Der mit der Benutzerzahl linear wachsende Bedarf an Rechenleistung und Speicher passt gut zur knotenbasierten Skalierung von HCI.
  • Kapazitätslastige Daten (Archiv, große Dateiserver, Video): Ein unabhängig skalierendes Array oder ein separater Datei-/Objektspeicher ist meist wirtschaftlicher.
  • Speicher, den auch physische Server nutzen müssen: Sollen nicht virtualisierte Datenbankcluster oder andere Systeme denselben Speicher verwenden, ist das Array die natürliche Wahl.
  • Datenbanken mit sehr niedrigen Latenzanforderungen: In beiden Architekturen möglich. Zwischen NVMe-basierter HCI und einem All-Flash-Array entscheidet die gemessene Latenz, nicht das Architekturetikett.

Lebenszyklus und Upgrades

Bei HCI müssen Betriebssystem, Hypervisor, Speichersoftware, Festplatten- und NIC-Firmware sowie Treiber gemeinsam validiert werden. Ein inkompatibler NIC-Treiber verursacht nicht nur ein Netzwerkproblem, sondern auch Probleme bei der Speicher-Neusynchronisierung. Deshalb kommen HCI-Produkte mit zertifizierten Hardwarelisten und Werkzeugen für Sammelupdates (Cluster-Aware Updating, vSphere Lifecycle Manager, Update-Ablauf von Azure Local). Nach jedem Knotenupdate muss man warten, bis die Daten neu synchronisiert sind; wer das überspringt und zum nächsten Knoten wechselt, lässt zwei Knoten gleichzeitig unvollständig zurück. In großen Clustern wird das Updatefenster länger.

In der dreischichtigen Architektur sind die Lebenszyklen von Servern und Array getrennt: Das Array wird fünf bis sieben Jahre genutzt, während die Server zwischendurch erneuert werden können oder umgekehrt. Dennoch müssen Sie die Kompatibilitätsmatrix zwischen Array-Firmware, HBA/NIC-Treibern und Hypervisor-Version gesondert verfolgen. Ein Arraywechsel wiederum ist meist ein großes Projekt, das die Speichermigration aller VMs erfordert.

Entscheidungsbaum

  1. Läuft der Support des vorhandenen Arrays noch länger als 3 Jahre? Wenn ja, ist es meist der risikoärmste Weg, die dreischichtige Architektur beizubehalten und die Hosts zu erneuern.
  2. Nutzen auch physische Server oder andere Plattformen den Speicher? Wenn ja, ist ein Array erforderlich; HCI deckt nur virtuelle Arbeitslasten ab.
  3. Wächst der Kapazitätsbedarf deutlich schneller als der Prozessorbedarf? Wenn ja, ist ein Array oder eine separate Speicherschicht wirtschaftlicher.
  4. Will das Team kein separates Speichersystem betreiben und bevorzugt eine einzige Konsole? Wenn ja, steht HCI im Vordergrund.
  5. Erfüllen Knotenzahl und Netzwerk die Ausfallsicherheitsanforderungen von HCI? Lassen sich mindestens drei Knoten (bei zwei Knoten ein Witness), 25 GbE und bei Bedarf RDMA nicht budgetieren, schrumpft der Vorteil von HCI.
  6. Steht die Hypervisor-Entscheidung fest? Das HCI-Produkt bestimmt den Hypervisor (S2D → Hyper-V, vSAN → ESXi). Zur Plattformentscheidung siehe den Beitrag Plattformwahl nach VMware.

Haben Sie sich für den Verbleib bei der dreischichtigen Architektur entschieden, fahren Sie für die Protokollwahl mit dem Beitrag Gemeinsam genutzter Speicher für Hyper-V: iSCSI, SMB3 und FC fort. Bei der Analyse vorhandener Kapazitäts- und Leistungsdaten und bei der Hardwareauswahl können wir im Rahmen unserer Dienste Hardwareberatung und Virtualisierung und Datenmanagement zusammenarbeiten.

Häufig gestellte Fragen

Ist HCI immer günstiger als SAN?

Nein. HCI spart die Kosten für ein separates Array und ein Speichernetz, doch spiegelungsbasierte Ausfallsicherheit erfordert mehr Rohkapazität; die knotenbasierte Skalierung kann bei kapazitätsgetriebenem Wachstum zudem unnötige Prozessor- und Lizenzkosten verursachen. Vergleichen Sie mit derselben Nettokapazität und demselben Ausfallsicherheitsziel.

Ist ein HCI-Cluster mit zwei Knoten in der Produktion sicher?

Mit richtiger Witness-Konfiguration wird er unterstützt und ist in kleinen Umgebungen wie Niederlassungen verbreitet. Befindet sich jedoch ein Knoten in Wartung, liegen die Daten nur noch in einer Kopie vor; Optionen wie die verschachtelte (nested) Ausfallsicherheit in S2D verringern dieses Risiko, senken dafür aber die Kapazitätseffizienz.

Kann ich das vorhandene SAN an einen HCI-Cluster anbinden?

Viele Hypervisoren können gleichzeitig HCI- und externen Speicher nutzen, doch Lösungen wie S2D und Azure Local unterstützen externen Speicher nur eingeschränkt. In der Übergangsphase ist es ein klarerer Ansatz, das SAN in einem separaten Cluster oder nur für die Migration zu verwenden.

Reicht ein 10-GbE-Netz für HCI?

In kleinen Clustern mit geringer Schreiblast kann es reichen. Da jeder Schreibvorgang auf andere Knoten kopiert wird und die Neusynchronisierung nach einem Festplattenausfall über das Netz läuft, werden 25 GbE und, wo geeignet, RDMA empfohlen. Maßgeblich ist die minimale Netzwerkanforderung des Herstellers für das jeweilige Produkt.

Support

Kontaktieren Sie uns für Support oder eine Bestandsaufnahme zu diesem Thema.

Kontaktformular
[email protected]

Eretek Systembetreuung

Serverinstallation, Konfiguration, Störungsbehebung und regelmäßige Wartung. Active Directory, Virtualisierung und Datensicherung werden mit derselben Disziplin betrieben.

Wissenszentrum

Weitere Beiträge