ESX 6.7 ohne RAID /SSD-Platten stürzen ab….

[oschi4711]

Hallo liebe Forumsmitglieder,
Kurz zur Hardware:
NoNameServer
Board: Intel S2600STB
Prozessor: 16 CPUs x Intel(R) Xeon(R) Silver 4208 CPU @ 2.10GHz
RAM 256 GB
NVEM zum booten
SSD Festplatten: 2 X Samsung 860 PRO 4TB

Software:
ESXi-Version: 6.7.0
ESXi-Build-Nummer: 15160138

Es ist ein NAS-Server mit SSDS als Datastore angebunden..
Nun zum Problem. Weil der NAS-Server Probleme gemacht hat, habe ich 2 SSD’s da herausgenommen und in den ESX-Server gesteckt. (Natürlich ESX heruntergefahren.)
ESX hat diese 2 Festplatten erkannt, und dann als datastores (je Platte einen) eingebunden.
Die Platten laufen NICHT als RAID!
Pro Platte habe ich 2 bis 3 Maschinen zurückkopiert.
Die erste Platte lief ca. einen Tag, danach waren 2 der 3 Maschinen nicht mehr erreichbar.
Die VMs liessen sich auch nicht herunterfahren. Nach services.sh restart, waren die VMs
dann als „17“ bzw. „23“ zu sehen. Datastore war ebenfalls nicht erreichbar.
Als Nächstes einen Neustart des ESX versucht. Diese blieb hängen mit der Meldung:
„Stopping SCSI periodic probe…..“ - Server hart ausgeschaltet Festplatte ausgebaut und neu gebootet.
Die 2 Platte war immer anstandslos im Betrieb. Deswegen habe ich zunächst einen evtl. defekt der ersten vermutet, bis dann gestern,
also nach ca. 2 Tagen dann auch die 2. SSD genau so wie die erste ausfiel, bzw. nicht mehr erreichbar ist.

Es waren Maschinen mit viel I/O. (ExchangeServer und Oracle-Server) auf den SSD’s.

Habe keine Erklärung für diese Fehler. Hat jemand eine Idee ?
Bin für wirklich jeden Ratschlag dankbar..
Vielen Dank.

Viele Grüße
Bleibt gesund.

Oschi

[~thc]

Es ist ein NAS-Server mit SSDS als Datastore angebunden..

Nicht jedes NAS kommt aufgrund der verbauten Hardware und Firmware mit SSDs zurecht - das kann man nicht voraussetzen.

Verstehe ich das richtig, dass der Server unter ESXi 6.7 bisher mit dem NAS als Datastore problemlos funktionierte?
Oder ist das ein System im Aufbau, dass mit dem Konzept "SSD im NAS" nicht funktionierte wie gedacht?

Weil der NAS-Server Probleme gemacht hat, habe ich 2 SSD’s da herausgenommen und in den ESX-Server gesteckt. (Natürlich ESX heruntergefahren.)

Die S2600 Serie ist in der HCL von VMWare ESXi ganz gut vertreten, aber dein Modell (STB) nicht. Damit ist dein System eine Whitebox, die funktionieren kann, aber nicht muss. Das betrifft auch ESXi-Versionen: Ein Dell Proliant DL350p Gen7 hat nur die Freigabe bis ESXi 6.0 und schmiert bei höheren Versionen (6.5 U3) ab.

Das Nutzen von lokal angeschlossenen Platten/SSDs als Datastore ist von VMWare aus nicht vorgesehen. Es kann funktionieren, muss aber nicht.

Der neue "native" AHCI-Treiber sorgt für Ärger mit SSDs. Er lässt sich so deaktivieren:

ESXi 6.5 includes a new native driver (vmw_ahci) for SATA AHCI controllers, but that introduces performance problems with a lot of controllers and/or disks.

Try to disable the native driver and revert to the older sata-ahci driver by running

esxcli system module set --enabled=false --module=vmw_ahci

in an ESXi shell. Reboot the host to make the change effective.

Du kannst auch ESXi 6.5 oder 6.0 probieren.

[oschi4711]

Hallo,
erstmal vielen Dank für Deine Rückmeldung....
Also: Das mit dem Nas hat sich z. Zt. erledigt, da das Ding einen Hardwarefehler hatte und eingeschickt wurde.
Deswegen kam ich ja auf die Idee, die Platten daraus direkt in den ESX zu schieben....

Zitat: Die S2600 Serie ist in der HCL von VMWare ESXi ganz gut vertreten, aber dein Modell (STB) nicht. Damit ist dein System eine Whitebox, die funktionieren kann, aber nicht muss. Das betrifft auch ESXi-Versionen: Ein Dell Proliant DL350p Gen7 hat nur die Freigabe bis ESXi 6.0 und schmiert bei höheren Versionen (6.5 U3) ab."

Ok, das muss ich so hinnehmen, dass das möglicherweise nicht kompatibel ist.....allerdings lief das System mit dem NAS (eben bis auf die NAS-eigenen Probleme) super, über ein Jahr nun fast.

Zitat: "Das Nutzen von lokal angeschlossenen Platten/SSDs als Datastore ist von VMWare aus nicht vorgesehen. Es kann funktionieren, muss aber nicht."
Kann dazu nur sagen, dass es bisher mit einem baugleichen Server mit lokalen Magnetfestplatten als datastore einwandfrei läuft. Aber das hilft warscheinlich auch nicht wirklich weiter....

...das mit dem AHCI-Treiber kann ich ja mal probieren...
Vielen Dank nochmals
oschi

[Dayworker]

Zu den Fakten. Wenn ich dem Web glauben darf, haben deine zugegeben nicht ganz billigen Desktop-SSDs 860 Pro eine Schreibleistung (TBW) von 2400TB oder 5 Jahre Garantie je nachdem was zuerst eintritt. Pro Tag wären das dann doch recht satte ~1,2TB. Als Leistungsverbrauch beim Schreiben werden für heutige SSDs recht geringe 2W aufgerufen und die werden leider dauerhaft verbraucht, weil der ESXi keinerlei Stromsparfunktionen am Storage unterstützt. Damit stehen auch nie die "theoretischen" 50mW Leerlaufverbrauch an, bei der sich die SSD wieder etwas erholen/abkühlen könnte. Ohne ausreichende Kühlung hält das kaum eine SSD dauerhaft aus und erst recht keine Desktop-SSD.

Als Bonbon zum Abschluß finde ich für diese SSD auch keine 24/7-Freigabe bzw Server-Betrieb. Mit etwas Glück startet die SSD wieder nach dem vollständigen Abkühlen oder die hohen, inneren Temperaturen habe die SSD dauerhaft beschädigt. Ja die SSD wird unter anderem für den NAS-Einsatz und für hohe Schreibleistungen beworben, aber das ist trotzdem keine 24/7-Freigabe. Die meisten NAS (Desktop, NB etc) schalten ohne Zugriffe meist in einen Stromsparzustand, den es auf dem ESXi nicht gibt. Von daher finde ich es immer ganz witzig, wenn irgendwelche Webseiten, Magazine etc sich beim Review von Server-Mainboards darüber muckieren, daß die Bretter kein Suspend-2-RAM bzw Suspend-2-Disk unterstützen