MegaRAID on TRUE IT STORIES

EX-Server mit VMware ESXi und LSI MegaRAID? Wöchentlich Kernel-Log checken!

Tue, 26 Mar 2013 10:13:50 +0000

Hetzner liefert die MegaRAIDs in den EX-Servern mit vorkonfiguriertem wöchentlichem Konsistenzcheck aus. Der Zeitpunkt kann variieren; bei meinen beiden Servern startet er in der Nacht von Freitag auf Samstag, um 3 Uhr UTC (4 Uhr aktuelle Deutschlandzeit). Er dauert üblicherweise bis 10:00-10:30, je nach sonstiger Festplattenlast.
Der Check hinterläßt seine Spuren im Kernel-Log. Ein Blick in dieses Log kann also – unabhängig von sonstigem Monitoring – verraten, ob mit den Platten alles okay ist. Der Kernel-Log findet sich in /scratch/log/vmkernel.log auf dem ESXi-Host.
Der Ablauf sieht im Idealfall gekürzt so aus:

VMware ESXi 5.0 Known Issues at Hetzner

Fri, 18 Jan 2013 08:52:54 +0000

Keine RAID-Informationen mehr im vSphere Client

Von Zeit zu Zeit kann es vorkommen, daß der Hardware Monitor im vSphere Client keine Informationen mehr über den RAID-Controller anzeigt. Möglicherweise verschwinden die einzelnen Einträge nach und nach, bis der Controller irgendwann gar nicht mehr auftaucht.
Dieser Fehler könnte mit der aktuellen Version des CIM/SMIS Providers von LSI behoben worden sein.
Ansonsten gibt es einen Workaround. Wir loggen an der SSH-Konsole des ESXi ein und führen diesen Befehl aus:

Informations Anzeige mit MegaCLI

Fri, 18 Jan 2013 08:36:58 +0000

/opt/lsi/MegaCLI # ./MegaCli -AdpAllInfo -aAll

==============================================================================

 Versions

 ================

Product Name : LSI MegaRAID SAS 9260-4i

Serial No : SV22820638

FW Package Build: 12.12.0-0111

Mfg. Data

 ================

Mfg. Date : 07/12/12

Rework Date : 00/00/00

Revision No : 86B

Battery FRU : N/A

Image Versions in Flash:

 ================

FW Version : 2.130.353-1663

BIOS Version : 3.24.00_4.12.05.00_0x05160000

Preboot CLI Version: 04.04-020:#%00009

WebBIOS Version : 6.0-49-e_45-Rel

NVDATA Version : 2.09.03-0032

Boot Block Version : 2.02.00.00-0000

BOOT Version : 09.250.01.219

Pending Images in Flash

 ================

None

PCI Info

 ================

Controller Id : 0000

Vendor Id : 1000

Device Id : 0079

SubVendorId : 1000

SubDeviceId : 9260

Host Interface : PCIE

ChipRevision : B4

Number of Frontend Port: 0

Device Interface : PCIE

…

ESXi 5.x LSI MegaRAID SAS 9260-4i Raid-1 Rebuild

Fri, 18 Jan 2013 08:34:00 +0000

In diesem Abschnitt dokumentieren wir den Testlauf für einen Fall, den man als Serverbetreiber am liebsten nie haben möchte: Ausfall einer Platte im RAID-1.
Alle Aktionen in diesem Abschnitt führen wir mit dem MegaCli auf der Shell des Hosts durch.

Erkennung eines Plattenausfalls

Ein Plattenausfall äußert sich darin, daß das Virtual Drive 0 nicht mehr als “Optimal” angezeigt wird. Ersichtlich wird dies im vSphere-Client unter Configuration / Health Status:

Außerdem läßt es sich in der Host-Shell mittels MegaCli abfragen:

VMware ESXi 5.0 auf 5.1 Updaten ohne KVM Zugriff

Fri, 18 Jan 2013 07:42:13 +0000

Nach der Auslieferung des ESXi-Servers von Hetzner kann man Überlegen, ob man die Updates für 5.0 Update 1 Updates einspielt, oder wie hier jetzt dargestellt das Update auf ESXi 5.1.
Dabei ist zu bedenken, daß möglicherweise noch nicht alle Drittanbieter-Software, die Verwendung finden soll, (vollständig) mit ESXi 5.1 kompatibel ist. Als Beispiel sei die Backup-Software “Veeam Backup & Replication” genannt, bei der noch nicht alle Funktionen unter 5.1 korrekt laufen.
Viele Dritthersteller erhalten offenbar von VMware erst sehr spät, quasi gleichzeitig mit der Allgemeinheit, Zugriff auf neue Major Releases, so daß einige Zeit vergeht, bis diese ihre Produkte angepaßt haben.
Wir empfehlen daher, mit dem Update auf 5.1 zu warten, bis Kompatibilität hergestellt ist und die üblicherweise vorhandenen “Kinderkrankheiten” ausgeräumt sind.

(Raid-)Monitoring in Zabbix LSI MegaRAID SAS 9260-4i

Tue, 15 Jan 2013 09:46:55 +0000

Beim Betrieb eines RAID-1 möchte man üblicherweise über einen Ausfall einer Platte möglichst sofort informiert werden, um sie schnellstmöglich tauschen lassen zu können.
Nach Installation des CIM-Providers von LSI für den LSI MegaRAID SAS 9260-4i wird auf der Hardware-Monitoring-Seite im vSphere-Client der Status des RAID angezeigt. Eine aktive Alarmierung ist aber nur in der kostenpflichtigen Version und bei Betrieb eines vCenter möglich – der vSphere-Client allein hat keine Alarmierungsfunktionalität.
Als Alternative installieren wir das “MegaCli” (ein Kommandozeilentool zum Management des RAID-Controllers) auf dem Host und richten ein Skript ein, das regelmäßig Hardwarestatus-Informationen zusammenstellt und per SCP an einen Server schickt, auf dem die Informationen weiter ausgewertet werden können.
In unserem Beispiel verwenden wir die Monitoring-Software “Zabbix”, für die wir ein Skript, User-Parameter und ein Template zur Verfügung stellen. Mit etwas Erfahrung sollten sich die Skripts aber auch für andere Monitoring-Systeme anpassen lassen.