ESX stürzt ab, beim hinzufügen einer Netzwerkkarte zur VM

[oftecs]

Hi,

ein Kunde hat das Problem, das, sobald er einer VM eine Netzwerkkarte hinzufügen möchte, egal ob die VM ein oder ausgeschaltet ist, der gesamte ESX host sich komplett aufhängt. Nur noch ein manuelles Ausschalten am Server direkt ist möglich, um das Gerät neuzustarten.

in der hostd.log Datei finde ich das hier, kurz bevor der Host abstürzt:

[2009-11-17 10:09:02.984 'vm:/vmfs/volumes/45cc9449-ef5827fd-32dc-0018fe7d9618/windows_xp_vw/windows_xp_vw.vmx' 18275248 info] State Transition (VM_STATE_ON -> VM_STATE_RECONFIGURING)
[2009-11-17 10:09:03.237 'BaseLibs' 19336112 info] Disconnect check in progress: /vmfs/volumes/45cc9449-ef5827fd-32dc-0018fe7d9618/windows_xp_vw/windows_xp_vw.vmx
[2009-11-17 10:09:03.238 'vm:/vmfs/volumes/45cc9449-ef5827fd-32dc-0018fe7d9618/windows_xp_vw/windows_xp_vw.vmx' 121187248 info] Question info: Failed to initialize ethernet0.
, Id: 7 : Type : 2, Default: 0, Number of options: 1
[2009-11-17 10:09:03.238 'vm:/vmfs/volumes/45cc9449-ef5827fd-32dc-0018fe7d9618/windows_xp_vw/windows_xp_vw.vmx' 18807728 warning] Received a duplicate transition from foundry: 1
[2009-11-17 10:09:10.864 'ha-eventmgr' 45435824 info] Event 1952 : User logged event: Remote console on VW WerWiSo disconnected.
[2009-11-17 10:09:11.071 'VmMisc' 118234032 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:11.073 'VmMisc' 118234032 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:11.079 'VmMisc' 20687792 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:11.147 'vm:/vmfs/volumes/45cc9449-ef5827fd-32dc-0018fe7d9618/VWBK/VWBK.vmx' 18541488 info] Ticket issued for mks connections to user: umeyer
[2009-11-17 10:09:12.014 'ha-eventmgr' 50686896 info] Event 1953 : User logged event: Remote console on VW BK Server connected.
[2009-11-17 10:09:12.371 'ha-eventmgr' 20687792 info] Event 1954 : User logged event: Remote console on VW BK Server disconnected.
[2009-11-17 10:09:18.767 'VmMisc' 18541488 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:25.019 'VmMisc' 45435824 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:31.262 'App' 21216176 error] AdapterServer caught unexpected exception: vector::reserve
[2009-11-17 10:09:31.262 'Vmomi' 21216176 info] Activation [N5Vmomi10ActivationE:0xa13ac48] : Invoke done [setLatestPageSize] on [vim.event.EventHistoryCollector:session[520dc776-a02a-60a3-1fa8-38154e368b8d]52a08778-114b-8cea-8c74-55bd317773a1]
[2009-11-17 10:09:31.263 'Vmomi' 21216176 info] Throw vmodl.fault.SystemError
[2009-11-17 10:09:31.263 'Vmomi' 21216176 info] Result:
(vmodl.fault.SystemError) {
dynamicType = <unset>,
reason = "",
msg = ""
}
[2009-11-17 10:09:34.313 'App' 18541488 error] AdapterServer caught unexpected exception: vector::reserve
[2009-11-17 10:09:34.313 'Vmomi' 18541488 info] Activation [N5Vmomi10ActivationE:0xa585938] : Invoke done [setLatestPageSize] on [vim.event.EventHistoryCollector:session[520dc776-a02a-60a3-1fa8-38154e368b8d]52d00ed4-dbfb-fb44-aa97-afccf1c402a3]
[2009-11-17 10:09:34.313 'Vmomi' 18541488 info] Throw vmodl.fault.SystemError
[2009-11-17 10:09:34.313 'Vmomi' 18541488 info] Result:
(vmodl.fault.SystemError) {
dynamicType = <unset>,
reason = "",
msg = ""
}
[2009-11-17 10:09:39.340 'VmMisc' 58903472 warning] Failed to validate VM IP address: unknown
[2009-11-17 10:09:39.400 'App' 49765296 error] AdapterServer caught unexpected exception: vector::reserve
[2009-11-17 10:09:39.400 'Vmomi' 49765296 info] Activation [N5Vmomi10ActivationE:0x9cce6c8] : Invoke done [setLatestPageSize] on [vim.event.EventHistoryCollector:session[520dc776-a02a-60a3-1fa8-38154e368b8d]52e9ca6f-919c-7f07-c8a9-5b67a66e13c8]
[2009-11-17 10:09:39.400 'Vmomi' 49765296 info] Throw vmodl.fault.SystemError
[2009-11-17 10:09:39.400 'Vmomi' 49765296 info] Result:
(vmodl.fault.SystemError) {
dynamicType = <unset>,
reason = "",
msg = ""
}

jemand eine Idee, was das sein kann, bzw. in welchen Log Dateien man noch suchen sollte ?

[Tschoergez]

was steht denn im vmkernel log?

und ist die Hardware supportet?

viele grüße,
jörg

[oftecs]

Guten Morgen,

du meinst die vmkernel. dateien, im ordner /var/log/, richtig ?


dort finde ich auch folgendes zu den netzwerkkarten.

Nov 17 10:07:09 esx1 vmkernel: 49:20:26:56.023 cpu0:1481)World: vm 1592: 900: Starting world vmm0:VW_WerWiSo with flags 8
Nov 17 10:07:09 esx1 vmkernel: 49:20:26:56.024 cpu0:1481)Sched: vm 1592: 5333: adding 'vmm0:VW_WerWiSo': group 'host/user/pool3': cpu: shares=-3 min=0 minLimit=-1 max=2000
Nov 17 10:07:09 esx1 vmkernel: 49:20:26:56.024 cpu0:1481)Sched: vm 1592: 5352: renamed group 75 to vm.1481
Nov 17 10:07:09 esx1 vmkernel: 49:20:26:56.024 cpu0:1481)Sched: vm 1592: 5366: moved group 75 to be under group 18
Nov 17 10:07:09 esx1 vmkernel: 49:20:26:56.038 cpu0:1481)Swap: vm 1592: 2169: extending swap to 1048576 KB
Nov 17 10:07:15 esx1 vmkernel: 49:20:27:02.152 cpu3:1481)VSCSI: 4059: Creating Virtual Device for world 1592 vscsi0:0 (handle 9237)
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:02.560 cpu2:1483)World: vm 1593: 900: Starting world vmware-vmx with flags 44
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:02.562 cpu2:1483)World: vm 1594: 900: Starting world vmware-vmx with flags 44
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:02.564 cpu3:1592)Init: 1048: Received INIT from world 1592
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:02.617 cpu3:1592)Net: 1027: can't connect device: VM Network: Out of resources
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:03.277 cpu1:1592)VSCSI: 2803: Reset request on handle 9237 (0 outstanding commands)
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:03.277 cpu2:1057)VSCSI: 3019: Resetting handle 9237 [0/0]
Nov 17 10:07:16 esx1 vmkernel: 49:20:27:03.277 cpu2:1057)VSCSI: 2871: Completing reset on handle 9237 (0 outstanding commands)
Nov 17 10:07:22 esx1 vmkernel: 49:20:27:08.620 cpu0:1592)VSCSI: 2803: Reset request on handle 9237 (0 outstanding commands)
Nov 17 10:07:22 esx1 vmkernel: 49:20:27:08.621 cpu0:1057)VSCSI: 3019: Resetting handle 9237 [0/0]
Nov 17 10:07:22 esx1 vmkernel: 49:20:27:08.621 cpu0:1057)VSCSI: 2871: Completing reset on handle 9237 (0 outstanding commands)
Nov 17 10:09:03 esx1 vmkernel: 49:20:28:49.548 cpu2:1592)Net: 1027: can't connect device: VM Network: Out of resources

Die Hardware ist VMWare zertifiziert. Ist ein etwas älterer HP DL380 Server. Auf ihm laufen ca 30 VMs. Die alten VMs haben alle eine Netzwerkkarte. Oder gibt es ein Limit, an maximal möglichen Virtuellen Maschienen pro Physikalische Netzwerkkarte ?

[irix]

Oder gibt es ein Limit, an maximal möglichen Virtuellen Maschienen pro Physikalische Netzwerkkarte ?

Was es gibt ist ein Limit an Ports pro vSwitch. Wenn es der vSwitch ist welcher bei der Installation angelegt worden ist dann hat dieser 32-8 = freie Ports.

Legt man spaeter vSwitche an so benutzt er 64-8 = freie Ports als default. Die Ports kann man erhoehen. Dazu darf aber keine VM auf dem Switch Laufen und evtl. braucht der ESX einen reboot (Ich meine letzteres)

Aber das dieses zum Absturz des ESX fuehrt halte ich fuer unwahrscheinlich... aber ein Versuch ist es Wert oder?

Gruss
Joerg

[oftecs]

also da laufen definitiv mehr als 24 Virtuelle Maschienen auf dem vSwitch ^^

Habe dem Kunden nun befohlen, er solle doch eine weitere Leitung legen, das wir die zweite Interne Netzwerkkarte anschließen können. Werde dies nächste Woche dann versuchen.


Andere Gründe, warum der Server abstürzt ?

[irix]

Andere Gründe, warum der Server abstürzt ?

Magst du nichmal den VMware Support befragen?

Gruss
Joerg

[oftecs]

mh das ist das Problem, der Kunde hat keinen Support für seinen ESX der ist ausgelaufen.

Aber werd ich wohl mal bei VMWare anrufen und schauen ob es nien einmal Call gibt.