Der Aufbau des FastTrack sieht wie folgt aus:

Enthalten sind zwei Hyper-V Hosts, die diverse virtuelle Maschinen betreiben. Wir haben als Beispiel einen Exchange Server, einen SQL Server, einen SharePoint Server sowie einen Domänencontroller genommen. Die beiden Hosts sind mit jeweils einer Switch verbunden, die wiederum eine Verbindung zum SAN hält. Im oberen Teil des Bildes ist ein weiterer Server vorhanden, ein Backup- und Verwaltungsserver. Hier wird ein System Center Virtual Machine Manager, ein System Center Data Protection Manager sowie ein weiterer Domänencontroller betrieben.

Das komplette Bundle inkl. der weiter unten beschriebenen Hard- und Software sowie der Dienstleistung können wir zu einem Gesamtpreis von

32.500 € netto

anbieten.

Falls Sie interessiert sind, hier nun eine Auflistung der einzelnen Server, Lizenzen und Komponenten, die in dem FastTrack enthalten sind:

Hyper-V Hosts

Zwei HP DL380 G7 mit jeweils zwei Intel Xeon E5649 CPUs (6-core/2.53GHz/12MB/80W), 24 GB DDR3 RDIMM RAM, zwei 146GB 15k 2.5” SFF SAS HDDs, einem P410i Controller mit 512MB FBWC, zwei 460W Netzteile, acht 1GBit-Netzwerkports und 36 Monaten HP Vor-Ort-Garantie (Next Business Day).

Das System benötigt nur zwei Festplatten für das Betriebssystem, die Daten der virtuellen Server liegen auf dem SAN. Der Server hat vier GBit-Ports auf dem Mainboard, vier weitere Ports werden durch eine Quad-Port-Karte hinzugefügt, damit ausreichend Anschlüsse für die Cluster-Konfiguration zur Verfügung stehen.

Management Server

Ein HP DL180 G6 mit einer Intel Xeon E5620 CPU (4-core/2.4GHz/12MB/80W), 16GB DDR3 RDIMM RAM, zwei 300GB 15k 3.5” SAS HDDs sowie vier 2TB 7.2k 3.5” SATA HDDs, zwei 460W Netzteile, zwei GBit-Netzwerkports und 36 Monaten HP Vor-Ort-Garantie (Next Business Day).

Die 300GB sind für die Windows-Installation sowie für die beiden VMs des Domänencontroller und des Virtual Machine Managers. Der restliche Speicherplatz wird für den Data Protection Manager genutzt, damit die Backup2Disk-Daten hier abgelegt werden können.

iSCSI-SAN

Als Netzwerkspeicher kommt eine HP P2000 G3 mit iSCSI zum Einsatz. Das Gerät hat zwei iSCSI-Controller und Platz für 24 2.5” Festplatten, zwölf 300GB 10k SFF HDDs sind bereits verbaut. Somit stehen insgesamt 3.6TB Speicherplatz zur Verfügung.

Netzwerk

Ebenfalls in diesem Bundle enthalten sind zwei HP-Switche V1810-24G mit jeweils 24 Anschlüssen sowie ein kompletter Netzwerkkabel-Satz in unterschiedlichen Farben. Wir haben uns ein System überlegt bei dem jedes Netzwerk des Clusters eine eigene Farbe hat, damit man schon an der physikalischen Verkabelung erkennen kann, um welches Netzwerk es sich handelt.

Lizenzen

An Lizenzen sind in unserem FastTrack für die Hyper-V Hosts zwei Windows Server 2008 R2 Datacenter 2CPU in der System Builder-Variante enthalten sowie ein Windows Server 2008 R2 Enterprise mit zehn CALs, ebenfalls in der System Builder-Variante. Diese Lizenz ist für den Management-Server, somit sind die beiden virtuellen Maschinen für den Virtual Machine Manager und den Domänencontroller ebenfalls korrekt lizenziert.

Für das Management wird eine System Center Virtual Machine Manager Workgroup-Lizenz mitgeliefert sowie zwei System Center Data Protection Manager Enterprise-Lizenzen, um die virtuellen Server im Cluster zu sichern.

Dienstleistung

Dieses Bundle enthält nicht nur die Hardware und die Lizenzen, zusätzlich sind drei Manntage Dienstleistung (innerhalb Deutschlands) inkl. Übernachtung und Anreise enthalten. Der Aufbau des Clusters wird wenn gewünscht in einer Art Workshop gestaltet, so das schon während der Installation möglichst viel Know-how übermittelt wird. Ziel der Installation ist die Inbetriebnahme eines Hyper-V Clusters, die Installation von ein oder zwei VMs sowie die Schulung der Techniker vor Ort.

Da wir wissen das keine Umgebung einer zweiten ähnelt wissen wir auch, dass wir kein “Passt-Überall”-Bundle anbieten und zusammenstellen können. Ziel dieses FastTracks ist es, eine Grundkonfiguration zu haben, die als Einstieg in die Welt der Virtualisierung dient und die eine solide, performante und kostengünstige Hochverfügbarkeitslösung präsentiert. Falls Sie weitere Fragen bzgl. der technischen Daten haben stehen wir natürlich gerne zur Verfügung.

Natürlich sind auch gerne bereit, an Hand dieser Aufstellung ein individuellen Angebot für Sie zu erstellen, dass exakt Ihren Wünschen entspricht. Dies kann entweder weitere Komponenten enthalten (Software Assurance für die Lizenzen, eine unterbrechungsfreie Stromversorgung, eine Backup-to-Tape-Lösung usw.) oder Sie haben bereits Lizenzen, die dann natürlich nicht doppelt angeschafft werden müssen. Wir stehen Ihnen gerne zur Seite, sei es in der Planungs-, in der Verkaufs- oder in der Implementierungsphase. Nutzen Sie dazu die Kontaktmöglichkeiten per Telefon oder per Email

…

• Leise, da Einsatz mehrerer Maschinen in einem Schulungsraum
• Der Einsatz von Hyper-V muss möglich sein (d.h. Hardwareunterstützte Virtualisierung)
• Möglichst performante Festplatten

Nach einiger Recherche und Suche von Hardware begann die Diskussion der verschiedenen Möglichkeiten. Wir haben die unterschiedlichen Arten von Festplatten durchgespielt, die Vor- und Nachteile abgewägt und natürlich auch die Kosten nicht außer Acht gelassen. Herausgekommen ist ein extrem leises, sehr performantes System, welches ich hier gerne näher beschreiben möchte.

Als erstes eine Liste der verbauten Komponenten inkl. der aktuellen Preise:

Artikel	Einzelpreis (netto)	Gesamtpreis (netto)
Intel Core i5 2400S	147,34 €	147,34 €
Arctic Fusion 550 Watt Netzteil	46,96 €	46,96 €
LG 22x8x16x DVD-RW-Laufwerk	15,05 €	15,05 €
Asus P8B WS Mainboard	144,58 €	144,58 €
Intel E1G44HTBLK Quad Port Ethernet Adapter	183,06 €	183,06 €
Thermalright CPU-Kühler Macho	35,72 €	35,72 €
Sandberg Hard Disk Mounting Kit	5,83 €	5,83 €
2x Intel 510 120GB SSD	216,35 €	432,70 €
Artic Silentium T11-B Gehäuse	32,44 €	32,44 €
4x Kingston 4GB DDR3 1333MHz ECC DIMM	28,06 €	112,24 €

Die einzelnen Produkte sehen wie folgt aus:

Zusammengebaut sieht der PC wie folgt aus:

Der PC ist äußerst leise. In einem leeren Schulungsraum ohne eine andere Lärmquelle und mit geschlossenem Fenster nimmt man das Gerät nicht wahr. Die Lüfter laufen auf ca. 450 Umdrehungen pro Minute (Gehäuse) und knapp 600 Umdrehungen pro Minute (CPU). Die CPU-Temperatur bewegt sich im Idle-Betrieb bei ca. 28°, unter Volllast geht die Temperatur auf (bisher) maximal 33° hoch. Ein Betrieb ohne CPU-Lüfter funktioniert auch, der riesige Kühlkörper leitet die Wärme schnell genug ab bzw. der Luftzug im Gehäuse reicht für die Kühlung aus.

Das Mainboard hat zwei SATA3-Schnittstellen, hier sind die beiden SSDs angeschlossen. Weiterhin hat das System neben den acht USB2.0-Schnittstellen zwei USB3.0-Schnittstellen, um mehr als 240 MBit/s hinzubekommen.

Ein weiterer Vorteil der CPU und dem Mainboard ist, dass keine eigene Grafikkarte benötigt wird. Das Mainboard hat einen DVI-Ausgang und mit der integrierten GPU kann man das System ohne eigene Grafikkarte nutzen. Der Einbau einer Grafikkarte ist natürlich problemlos möglich, z.B. wenn man mehrere Monitore nutzen möchte oder RemoteFX testen möchte.

Das System hat zwei Intel 1GBit-Ethernet-Ports auf dem Mainboard, zusätzlich ist noch eine Intel Quad-Port-Karte verbaut. Diese wird bei Hyper-V Schulungen benötigt, wenn Cluster eingerichtet werden sollen. Die Karte ist iSCSI-optimiert und ermöglicht so eine performante iSCSI-Verbindung zu unserer NetApp.

Wir sind mit dem Ergebnis mehr als zufrieden, die PCs sind dank aktueller CPU und einem SSD-Raid0 in der Lage, problemlos 10 Maschinen gleichzeitig auszuführen. Das System läuft stabil, nahezu lautlos und hat im Normalbetrieb eine Leistungsaufnahme von knapp 50 Watt.

Bei Fragen zu der Konfiguration oder den einzelnen Produkten stehen wir Ihnen natürlich gerne zur Verfügung, einfach eine Email an hyper-v@rachfahl.de schicken, alternativ können Sie uns auch gerne versuchen telefonisch zu erreichen. Eine Aussage zur Performance der SSDs ist hier übrigens bewusst nicht vorhanden, auf Grund der enormen Leistung haben wir entschlossen, dazu einen eigenen Beitrag zu schreiben inkl. Vergleich zu anderen Festplatten.

Das ist ein Videointerview, auf das ich richtig stolz bin. Nicht wegen meinem “makellosen Englischs”, sondern weil ich die Gelegenheit hatte, mit Hans Vredevoort seines Zeichens Hyper-V Aktivist und Microsoft Cluster MVP zu sprechen. Hans gehört schon seit einiger Zeit zu meinen “Hyper-V Vorbildern“, mit denen ich schon lange ein Interview machen möchte. Als ich in im Osterurlaub mit meiner Familie in den Niederlanden war, habe ich Hans einfach angetwittert, ob er Lust auf ein Interview hat. Er war sofort dazu bereit und hier seht Ihr das Ergebnis unseres Gesprächs. Da das Interview insgesamt um die 40 Minuten dauert und ich es nicht “über das Herz gebracht habe” etwas herauszuschneiden, möchte ich euch eine grobe Richtung geben, wo wir über was Reden.

1. der Microsoft Cluster und Hyper-V (0:00 bis 4:43)
2. der Hyper-V Cluster (4:44 bis 8:08)
3. die Hyper-V Community Hyper-V.nu (8:09 bis 12:41)
4. Virtual Machine Manager 2012 Beta (12:42 bis 39:27)
5. Microsoft iSCSI Target 3.3 (30:28 bis 35:06)
6. iSCSI oder Fibre Channel? (35:07 bis 40:42)

Ich wünsche viel Spaß beim Anschauen.

GreenBytes GB-1000 als iSCSI-SAN im Failover-Cluster (Review)

Die GreenBytes ist wieder weg, aktuell haben wir eine HP P2000G3 hier. Diese wurde uns freundlicherweise auf Grund unserer HP Preferred Partnerschaft durch unseren jahrelangen Partner und Distributor Actebis Peacock zur Verfügung gestellt, an dieser Stelle erneut ein Dankeschön! Wie auch schon bei der anderen Hardware haben wir das Gerät als iSCSI-SAN genutzt, um ein Failover-Cluster zu erstellen. Bevor wir dazu kommen hier allerdings erst ein kleiner Überblick über die verwendete Hardware.

Über die eingebaute CPU und den RAM kann ich leider nichts sagen, da das Gehäuse verschlossen ist und man in der Management-Konsole sowie in den Datenblättern keine Info findet. Als Festplatten sind 12 x 300GB 15k U/min verbaut, das Gerät hat redundante Netzteile und redundante Controller mit jeweils zwei FC-Ports, zwei iSCSI-Ports, einem Management-Port und einem Expansion Port. In der Konsole sieht dies wie folgt aus:

Verwaltet wird das Gerät per Web-Management:

Das Gerät erreicht bei einem Benchmark-Test mit dem Tool “CrystalDiskMark” die folgenden Werte:

Die Volume-Einstellungen in der Konsole sehen bei diesen Werten wie folgt aus:

Wenn man die Einstellungen ein wenig ändert bekommt man die folgenden Werte:

Der nächste Test war der Betrieb der P2000 als Speicherort für virtuelle Maschinen auf einem Hyper-V Host. Hierzu habe ich mehrere virtuelle Maschinen erstellt und die virtuellen Festplatten auf dem iSCSI-Laufwerk gespeichert. Die Maschinen wurden gleichzeitig gestartet, durchliefen alle einen Sysprep und standen dann zur Verfügung. Wie ich in dem anderen Artikel schon erwähnt habe kann ich diesen Test nicht mit Testergebnissen oder –Werten unterlegen, allerdings hat man beim Betrieb einer oder mehrerer solcher Maschinen ein Gefühl dafür, ob die Performance der Maschine eher hoch oder eher schleppend ist.

Im Fall der P2000 war das arbeiten mit den virtuellen Servern nicht zu unterscheiden mit dem Betrieb eines Systems auf lokalen Festplatten, sämtliche getesteten Vorgänge liefen gleich oder ziemlich ähnlich schnell ab. Unterschiede zu dem GreenBytes-System habe ich keine feststellen können, beide Systeme erlauben einen performanten Betrieb von virtuellen Maschinen. Anmerkung: Ich habe allen virtuellen Systemen eine vhd-Datei als Festplatte hinzugefügt und diese auf dem per iSCSI angebundenen Laufwerk gespeichert. Eine weitere Möglichkeit der Performance-Steigerung wäre der Betrieb der Server mit “physikalischen Festplatten”.

Das Failover-Cluster

Nachdem die Performance-Tests abgeschlossen wurde habe ich ein Failover-Cluster erstellt. Es wurden zwei virtuelle Server erstellt und in dem Cluster betrieben, in der Konsole sieht das ganze wie folgt aus:

Zum Zeitpunkt der Screenshots war einer der beiden Server heruntergefahren, taucht also unter “Knoten” als “Inaktiv” auf. Das in der deutschen Server-Version recht komisch klingende “Datenträgerzeuge im Quorum”, also das Quorum-Laufwerk, wäre im Produktiv-Einsatz deutlich zu groß angelegt mit 464,72 GB, der Richtwert liegt hier bei 100 MB. Wie man in den Screenshots sieht laufen die beiden Testmaschinen “vMigrationsTest1” und “vMigrationsTest2” aktuell auf dem Knoten der online ist. Auf beiden Systemen ist ein Windows Server 2008 R2 installiert. Eine Live-Migration ist problemlos möglich, die Dauer beträgt knapp 30 Sekunden, bei einem Ping auf die virtuelle Maschine geht durchschnittlich ein Ping ins Leere, teilweise war auch ein nahtloser Ping möglich. Eine Schnellmigration dauert ein wenig länger, bedingt durch eine Speicherung des virtuellen Systems liegen die Zeiten hier bei knapp 120 Sekunden. Das Arbeiten mit dem Cluster und den virtuellen Maschinen macht einen guten Eindruck, sowohl Betrieb als auch Migration funktionieren performant und ohne Aussetzer. Bei Nutzung des Gerätes als NAS sind die Werte ebenfalls überzeugend, kommen allerdings nicht ganz an die Werte der GreenBytes heran. Die SSD der GreenBytes wird hier die Performance wahrscheinlich positiv beeinflussen.

Von uns gibt es eine Empfehlung für das Gerät, die Technik dahinter stammt von HP, also einem der “Global Player” im Server- und Storage-Segment. Das hier vorgestellte Modell kostet Liste 9910 € ohne Festplatten, für 12 x 300GB 15k U/min Festplatten kämen noch knapp 4700 € (HP Listenpreis) hinzu. Man kann die P2000 auch mit SATA-Festplatten betreiben, aber… näääh :)

Laut Datenblatt hat die GreenBytes eine Quad Core CPU, 12 GB RAM, eine 32 GB große SSD für das Betriebssystem, zwei 25 GB große SSDs für den Cache und acht 500 GB große Festplatten, allesamt 2,5” groß. Zur Anbindung an das Netzwerk sind zwei 1 GbE-Adapter vorhanden sowie einen weiteren 1 GbE-Adapter für das Management. Weitere Daten stellt das Datenblatt bereit.

Nach dem Start des Geräts wird man von einem OpenSolaris begrüßt. Man kann sich zwar an der Konsole anmelden, kann dort aber nichts GreenBytes-relevantes einstellen. Administriert wird das Gerät über den “GreenBytes Storage Manager”, ein MMC-SnapIn. Das sieht dann wie folgt aus:

Die Benchmark-Tests:

Der erste Test, den ich durchgeführt habe”, war das Messen der Geschwindigkeit mit dem Programm “CrystalDiskMark”.

Hier ein Test der Geschwindigkeit auf ein 500 GB großes Volume, inkl. aktivierter Kompression und De-Duplizierung (hierzu später mehr):

Hier der gleiche Test, allerdings mit deaktivierter Kompression und De-Duplizierung:

Hier zum Vergleich die beiden lokalen 300 GB SAS 15k-Festplatten:

Was sich extrem bemerkbar macht sind die hohen Werte bei den Tests “4K” und “4k QD32”. Vergleichen kann man die Werte mit den folgenden: Hyper-V-Server.de: Ein guter Server zum Virtualisieren

Als nächstes habe ich neun virtuelle Server auf einem unserer Hyper-V-Hosts hinzugefügt und die Festplatten auf dem verbundenem iSCSI-Volume gespeichert. Da das größte Problem bei solchen externen Speicher-Systemen die Performance und die Latenz ist, wollte ich mir einen Eindruck darüber verschaffen, wie sich diese Server verhalten im Betrieb. Genaue, messbare Werte konnte ich nicht ermitteln, allerdings hat man ja ein Gefühl dafür, ob ein System nun träge ist oder ob sich das Verhalten mit einem System auf direkt angeschlossenen Festplatten vergleichen lässt.

Mit aktivierter Kompression und De-Duplizierung war das Verhalten dieser neun Maschinen schon beachtenswert, Operationen mit einer gewissen Anzahl von I/O-Vorgängen (Starten der Maschine, Herunterfahren, Suchen nach allen Dateien auf Laufwerk C…) waren zufriedenstellend, selbst bei dieser Art des Betriebs.

Einen weiteren Performance-Schub habe ich bekommen, nachdem ich die Maschinen auf einem Volume gespeichert habe, auf dem sowohl die Kompression als auch die De-Duplizierung deaktiviert war. Wie schon an den Benchmark-Werten oben sichtbar steigen die Werte je nach Art des Benchmark-Tests um fast das fünffache im Schreib-Modus.

Eine noch weiter verbesserte Performance bekommt man, wenn man pro virtuellem System ein (oder mehrere) Volume(s) erstellt und diese direkt mit der virtuellen Maschine verbindet. Hierdurch verliert man allerdings einige Vorteile, z.B. die Möglichkeit eines Exports, der Verlust wird aber weitestgehend durch die Snapshot-Möglichkeit der GB-1000 wett gemacht.

Das Hyper-V Failover-Cluster:

Als nächstes stand das Einrichten eines Failover-Clusters auf dem Plan. Aus Zeitgründen konnten wir bis zum aktuellen Zeitpunkt nur zwei Maschinen hochverfügbar machen, allerdings ergibt sich hierbei schon ein interessantes Detail:

Aktuell sind 13,7 GB genutzt, und zwar durch zwei Windows Server 2008 R2. Nur durch die Kompression und die De-Duplizierung schafft die GB-1000 eine Reduzierung des Speicherplatzes von 22,36 GB auf 13,7 GB. Wie man in dem Screenshot erkennt sind das 38,73 %. Wenn das Verhältnis so bleibt könnten auf den eigentlich nur 3,16 TB großen Festplatten insgesamt 5,16 TB an Daten gespeichert werden. Für die Virtualisierung aus Performance-Gründen nicht ganz sinnvoll, für ein NAS-System allerdings schon ein geiles Feature :)

Die Maschinen liefen sehr performant und ohne kleine Hänger/Aussetzer im Betrieb, wie es manchmal bei langsamen iSCSI-Volumes der Fall ist. Hier einige Screenshots des Clusters und eines Umzugs einer virtuellen Maschine:

Das hier vorgestellte Modell GB-1000 mit 8 x 500 GB plus SSD kostet Liste 13200 €. Vergleichbare Systeme anderer Hersteller bewegen sich teilweise in weitaus höheren Regionen, von daher ist dieses Gerät an sich schon ziemlich günstig. Trotz des geringen Preises schlägt sich die GreenBytes sehr gut und liefert sehr souveräne Werte ab. Wir hatten während der Teststellung einen durchweg positiven Eindruck von dem Gerät und können das Gerät als NAS oder SAN empfehlen.

Als iSCSI Target dient der von Microsoft bereit gestellte iSCSI, welcher über MSDN Abo bezogen werden kann. Nähere Information wie man ein solches MSDN Abo bekommt gibt es hier.

Nach erfolgreicher Installation wird unter Server Manager -> Storage die Microsoft iSCSI Software Target aufgelistet.

Mit „rechtsklick“ auf ISCSI Target kann ein neuer Target angelegt werden.

Hier muss der Name des iSCSI Targets vergeben werden. Optional kann noch eine Beschreibung hinzugefügt werden.

Im nächsten Schritt müssen die iSCSI Initiator ausgewählt werden welche Zugriff auf den Target bekommen sollen:

Anschließend ist der Wizard durchlaufen und die Virtual Disk für den iSCSI Target können erstellt werden.

Dazu machen wir wieder einen „rechtsklick“ auf unseren gerade erstellten iSCSI Target (in meinem Beispiel „Storage1“) und wählen den Punkt „Create Virtual Disk for iSCSI Target“.

Wieder öffnet sich ein Wizard der bei der Erstellung der Virtuellen Festplatte hilft.

Dies ist der Pfad wo die Virtuellen Disk gespeichert werden.

Größe der Virtuellen Festplatte.

Anschließend kann noch eine Beschreibung angegeben werden und der Wizard ist durchlaufen.

Für die Live Migration werden Mindestens zwei iSCSI Bereiche benötigt.

Ein Teil muss nicht größer als ca. 100MB sein, dieser wird als Quorum verwendet. Darauf werden die „Cluster internen“ Daten abgelegt,

Der zweite(und dritte, vierte, fünfte etc. ) Bereich wird für die Daten verwendet.

Konfiguration des iSCSI Initialtor

 
Auf dem Hyper-V Server muss nun der iSCSI-Initiator konfiguriert werden, eine grafische Oberfläche bekommt man mit der Eingabe von “iscsicpl”, hier von Carsten Rachfahl erklärt.

Im Feld Ziel wird die IP Adresse, DNS Name oder IQN Name des iSCSI Target eingetragen.

Konfiguration der Datenträger

Bei der Datenträger Konfiguration kommt unser Windows 7 mit RemoteTools ins Spiel.
Per WMI greifen wir auf die Datenträgerverwaltung des Hyper-V-Servers zu, wo nun die zwei neuen Datenträger erscheinen sollten. Die iSCSI Ressourcen sind von „normalen“ Festplatten nicht zu unterscheiden, deshalb sollte hier mit Vorsicht gehandelt werden!
Die neuen Datenträger müssen nun noch Online geschaltet werden damit diese Formatiert werden können. Es ist nicht nötig einen Laufwerksbuchstaben zu vergeben, da dieses ohnehin bei der Clusterinstallation modifiziert wird.

Ausblick Teil 5: Installation des Clusters