DELL R720 nutzt nur eine CPU mit vSphere 5

[derhoeppi]

Hallo,

ich habe ein Konfigurationsproblem. Wir haben neue DELL PowerEdge R720 mit Intel E5-2690. Die Server sind richtige PowerServer, aber sobald die Virtualisierung aufgesetzt wird, ist von der Power nicht mehr viel zu spüren. Folgendes Problem konnten wir inzwischen identifizieren. Von den beiden verbauten Prozessoren wird nur ein Prozessor angesprochen.
Zum Testen habe ich ein paar VM's genommen und mit entsprechenden vCPU's ausgestattet. Ich habe insgesamt 20 vCPU's zugeteilt, so dass rein technisch der 2 physische Prozessor angesprochen wird, wenn ich 100% Last auf den Kernen erzeuge. Leider kann ich mit den 20 vCPU's nur einen Prozessor mit ca. 46400 MHz belegen. Mit esxtop sehe ich extreme Wartezeiten, so dass er mit dem abarbeiten nicht hinterherkommt.

Im vCenter kann man sich den Hardwarestatus des Host's ansehen. Dort wird die erste CPU mit dem Status OK und die zweite mit dem Status Inaktiv ausgelesen.

Hat jemand von euch einen R720 und kann die Daten mal vergleichen.

Gruß
derhoeppi

[vMario156]

Da hast du das Problem ja schon selbst gefunden. Es müssen natürlich beide CPUs auf normal stehen unter Hardware Status.

Ist ein Sockel vielleicht schon im Bios deaktivert?

Gruß Mario

[derhoeppi]

Hallo vMario156,

laut BIOS sind beide CPU's enabled. VMware sieht in der Übersicht auch das 2 Prozessoren mit 8 Cores verbaut sind. Trotz der kontrolle mit DELL (richtige BIOS Einstellungen) gibt mir VMware aus, dass eben nur eine CPU mit dem Status OK vorhanden ist.

Deshalb war meine Frage, ob es hier jemanden gibt der einen R720 in Besitz hat und bei diesem den Hardwarestatus kontrollieren kann. Dell und VMware sind in der Bearbeitung leider etwas träge.

Gruß
derhoeppi

[vMario156]

Du kannst auch im ESXTOP prüfen wieviele Kerne aktiv sind.

Wenn die Standard-View nicht verändert wurde ist es direkt auf dem Schirm nach eingabe von ESXTOP auf der CLI (ansonsten ein mal c drücken).

Da gibt es relativ weit oben den Punkt CORE UTIL%. Dahinter sind die einzelnen Kerne aufgelistet mit der entsprechenden Auslastung.

Gruß Mario

[Supi]

vielleicht ja so was profanes wie nur eine free ESXI Lizenz?

Wie ist denn die genaue Config des Servers und der VMWare Lizenzen?

[PeterDA]

Hi,
ich habe 3 R720 im Einsatz. Im Hardwarestatus werden beie CPUs als Normal angezeigt!




Gruß Peter

[~thc]

Hi.

Eine meiner freien Lizenzen (auf einem Intel 5500) nutzt brav beide CPU's.

[derhoeppi]

Hallo,

also die Lizenzen möchte ich ausschließen. Die Hosts sind mit der Enterprise Version lizensiert.

@vMario156: Im esxtop kann ich 16 Kerne zählen, wobei 8 eine Auslastung anzeigen.

@PeterDA: Sei bitte so gut und klappe beim Hardwarestatus mal CPU1 und CPU2 auf. Dort siehst du den Status. Hast du in deinen Servern ebenfalls E5-2690 oder welche CPU's habt Ihr verbaut? Hast du Konfiguration -> Prozessoren auf einem ESX Host auch stehen, dass Hyperthreading deaktiviert ist?

Gruß
derhoeppi

[PeterDA]

Hi,
wenn ich den den 2. aufklappe, steht da auch Inaktiv.
Es sind E5-2630

In der Übersicht sehe ich
CPU-Kerne: 12 CPUs x 2,299 GHz
Prozessor-Sockets: 2
Kerne pro Socket: 6
Logische Prozessoren: 24
Hyper-Threading: Aktiv

Gruß Peter

[irix]

Mach mal HA aus so das du fuer die vCPU eine Affinity definieren kannst. Somit sollte sich doch mal Last auf die 2 CPU geben lassen.

Gruss
Joerg

[derhoeppi]

Hallo irix,

entschuldigt bitte die Verzögerung. Leider habe ich jetzt nicht ganz verstanden was ich versuchen soll. Bis letzten Freitag habe ich die R720 zwar im Cluster organisiert, aber DRS und HA war abgeschaltet. Verbirgt sich hiner der Affinity eine Ressourcenzuweisung oder wie und wo kann ich etwas definieren.

@PeterDA: Habt Ihr noch ältere R710 laufen? Wenn ja würde mich interessieren, ob das Problem dort auch auftritt, dass nur die erste CPU aktiv ist. Wir haben noch vier R810, die das selbe Problem aufweisen. Leider hat sich DELL dazu noch nicht gemeldet.

Gruß
derhoeppi

[MarcelMertens]

R710 ohne Probleme. (ESXi 5.0 Build 623860)



Ich vermute ja dass dort irgendwas bei dir im Server faul ist.
BIOS Einstellung o.ä.
Hast du schon mal den OMSA installiert und geschaut ob der irgendwas ausspuckt?

[derhoeppi]

Hallo MarcelMertens,

die Befürchtung das irgend eine Einstellung nicht korrekt ist, habe ich auch. Das Problem ist folgendes. Das Ergebnis eines Support Call's bei VMware war, das der Hypervisor also der ESXi und die Konfiguration keine Probleme darstellt. Damit ist VMware erst einmal raus. DELL hat sich die BIOS Einstellungen angesehen und gibt genau dasselbe von sich. Damit stehen wir als Kunde dazwischen und müssen selbst Recherchen durchführen.

In dem Kontext finde ich es eben komisch das auch PeterDA mit einem R720 dasselbe Erscheinungbild zeigt. Bei einem Vergleich zwischen R720 und R810 ist mir eben das selbe Ergebnis aufgefallen, weshalb ich mal nach einem R710 aus der selben Servergeneration gefragt habe.

Den OMSA habe ich bisher nicht auf den ESXi Hosts installiert.

Gruß
derhoeppi

[MarcelMertens]

Installiere mal den OMSA (geht über den Update Manager) und schau dort mal ins Log. Ansonsten evtl mal mit einer LiveLinux CD booten und schauen was dort top sagt.

So kann man schon mal VMware bzw. die Hardware ausschließen.

[irix]

Hallo irix,

entschuldigt bitte die Verzögerung. Leider habe ich jetzt nicht ganz verstanden was ich versuchen soll. Bis letzten Freitag habe ich die R720 zwar im Cluster organisiert, aber DRS und HA war abgeschaltet. Verbirgt sich hiner der Affinity eine Ressourcenzuweisung oder wie und wo kann ich etwas definieren.

Du kannst in den Settings der VM eine CPU Affinity definieren. Somit sollte es moeglich sein eine VM auf deine 2. CPU zu "pinnen". Nur um mal zu sehen ob da auch Last dann abgearbeitet wird. Die Einstellung sieht man im letzten Tab "Resources" unter Adv. CPU.

Gruss
Joerg

[Supi]

Also ich muss mich mal auch einklinken, da dies scheinbar generell ein Problem ist:

Meine Konfig: 2x R610 je 2xE5540 ESXi 4.1 U2 702113


hier stand immer bei Kapazität 40.528 Mhz Als Summe von 2x4+ (+2x >HT) CPUs > 16x 2533Mhz.


Ebenso ist meine zweite CPU inaktiv?! Houston, haben wir da jetzt ein Problem?

[PeterDA]

Hi,
wenn du die CPU Affinity konfigurien willst geht das allerdings nur, wenn du DRS aus hast!

Gruß Peter

[PeterDA]

Um es deutlich zumachen was Joerg meint:

VM Edit Settings -> Resources bei eingeschaltetem DRS:



VM Edit Settings -> Resources bei ausgeschaltetem DRS:



Gruß Peter

[MarcelMertens]

Kann es sein dass ESXi die 2. CPU einfach schlafen legt? (so wie bei mir) und das mal als "dormant" und mal als inaktiv anzeigt?

[derhoeppi]

Hallo,

also die Affinität habe ich getestet. Ich habe mir einfach die letzten Cores herausgesucht (28-31). Dann habe ich die CPU's belastet und habe mir in den Leistungen alle CPU's in "Echtzeit" anzeigen lassen. Ich sehe das alle Cores bzw. logischen Prozessoren angesprochen werden, so dass die Anzeige Inaktiv scheinbar eine Fehlinterpretation vom ESXi sein muss.

Ich habe die Frage jetzt an VMware weitergegeben. Mal schauen, ob ich dort eine Antwort erhalte. Eine Energiespareinstellung mag ich an dieser Stelle ausschließen. In VMware sind die Energisparreinstellung auf Hochleistung und im BIOS vom Server sind Sie abgeschaltet und die CPU Einstellung auf Performance.

Gruß
derhoeppi

[JustMe]

hier stand immer bei Kapazität 40.528 Mhz Als Summe von 2x4+ (+2x >HT) CPUs > 16x 2533Mhz.

Das bezweifele ich.

Ich habe zwar mit Dell nix am Hut, aber bei den Herstellern die ich kenne wird (bisher) an dieser Stelle nur die tatsaechliche Anzahl der "echten" Kerne (ohne die HyperThreading-Nachgeburt) angezeigt. Auch in aelteren ESX/ESXi-Versionen.

Das mit dem "inaktiv" duerfte mal wieder ein Uebersetzungs-Lapsus in der deutschen vSphere-Client-Variante sein. "Dormant" ist da viel bildhafter, und duerfte den Zustand treffender beschreiben.

[Supi]

hier stand immer bei Kapazität 40.528 Mhz Als Summe von 2x4+ (+2x >HT) CPUs > 16x 2533Mhz.

Das bezweifele ich.

Das kannst du, es war aber definitv so. Habe leider hier keine Zeit mal einen der ESXi mit einem USB Stick und ESXi 4.1 ohne U1/2 zu starten.
Auf den 2 R610 lief ab 06/2009 ESX 4.0 16xxx... sprich ab dem ersten Vsphere 4.0 Build... 2 Wochen nach Release durch Vmware. Und daher würde ich dafür mene Oma verwetten... oder auch nicht..



Vielleicht war dies wohl immer beim ESX(i) 4.0 so (mit den von mir genanten Mhz)?

Hat hier noch wer einen ESX(i) 4.0 am laufen?

[JustMe]

Schauen wir mal, ob noch jemand 4.0 am Start hat, und antwortet. Da kann das durchaus noch "falsch" dargestellt worden sein.

Ich haette hier deutlicher "altere ESX/ESXi-4.1-Versionen" schreiben sollen.

[Dash]

Hi,

gesucht, gefunden Zwar nur R510 aber DELL und Version 4.0
Zwei Vierkerner.

Merkwürdige Meldung wenn man was Attachen will......

"Attachment kann nicht hinzugefügt werden, da die maximale Anzahl von 0 Attachments in dieser Nachricht erreicht wurde"

Ok dann anders.

[MarcelMertens]

http://kb.vmware.com/selfservice/micros ... Id=1023032

Symptoms
The status of one or more CPUs shows up as Dormant on the Hardware Status tab.
Resolution
The dormant CPU state indicates that the CPU is currently idle. This is a valid CPU status and is not indicative of a problem.