Failed to connect ethernet

[chrish]

Hi zusammen,
seit Mittwoch letzte Woche haben wir ein Problem das einzelne virtuelle Maschinen einfach ihre Netzwerkverbindung verlieren.
Dies passiert ohne Aktionen davor oder danach. In verschiedenen unserer 4 Cluster.
Ich habe derzeit leider keine Erklärung dafür.

Kennt jemand so ein Phänomen oder hatte sowas schon mal?

Wir haben ESXi 4.1.0 320137 im Einsatz

http://picpaste.de/2011-02-22_092401-ZHRgqO55.png

Danke schon mal für Antworten

[irix]

Frage:
Hat ein vMotionen (DRS) stattgefunden und trat danach das Problem auf?

Frage:
Sind nur VMs betroffen welche an einer PG auf vSwitch0 liegen?

Frage:
Was ist die hoehste Anzahl an VM welche auf einem vSwitch liegen? Bitte auch an Maintanence denken.

Gruss
Joerg

[chrish]

Frage:
Hat ein vMotionen (DRS) stattgefunden und trat danach das Problem auf?

Nein es hat kein vMotion zuvor stattgefunden. Der letzte war 3 Tage davor.

Frage:
Sind nur VMs betroffen welche an einer PG auf vSwitch0 liegen?

Die VM´s liegen alle an Ditributed Switch.
vSwitch 0 ist unser Management Network mit Active/Standby Adapter
vSwitch1 vMotion mit Active Standby.

Frage:
Was ist die hoehste Anzahl an VM welche auf einem vSwitch liegen? Bitte auch an Maintanence denken.

Die höchste Anzahl in dem einen DC sind 583 im anderen 111. In beiden war das Problem.

Ciao Christian

[irix]

...

Die höchste Anzahl in dem einen DC sind 583 im anderen 111. In beiden war das Problem.

Ciao Christian

Kannst du mal Pruefen was ihr an Portanzahlen konfiguiert habt? Ich kenne die Meldung nur im Zusammenhang wenn der vSwitch keine freien Ports mehr hat aber man mit gewalt noch VMs anschliesst.

Gruss
Joerg

[chrish]

Das hatte ich gerpüft passt aber.

Sollte aber auch kein Problem sein wenn die Maschine zuvor lief.?

[Dayworker]

Jetzt würde ich eigentlich eine genaue Zahl und kein "passt aber" erwarten.

[Tschoergez]

welche Einstellung für Port Binding habt Ihr für den Switch?
Wie viele Ports? (wurde ja schon gefragt )

Andere Idee: Evtl. doppelte MAC-Adressen in den VMs?
(z.b. durch klonen, templates mit manuell vergebenen adressen, die gerade vom VUM upgedated werden, ....)

grüße,
jörg

[chrish]

Du meinst diese Zahlen ?
http://picpaste.de/2011-02-22_125218-AEl5ES8o.png
http://picpaste.de/2011-02-22_125417-CuCJ8ZXL.png

[irix]

..
Andere Idee: Evtl. doppelte MAC-Adressen in den VMs?
(z.b. durch klonen, templates mit manuell vergebenen adressen, die gerade vom VUM upgedated werden, ....)

Wuerde aber nicht erwarten das dann so eine Fehlermeldung produziert wird.

Hast du mal das vmkernel Log angeschaut?

Gruss
Joerg

[chrish]

Also die Logs (vmkernel) etc enthalten nichts
Lediglich die logs der vm´s

hier ein Beispiel, Der Fehler

Code: Alles auswählen

vmware.log:Feb 16 03:03:44.405: vcpu-0| [msg.ethernet.vlance.connectFailed] Failed to connect ethernet1.
vmware.log:Feb 16 03:03:44.504: vcpu-0| [msg.ethernet.vlance.connectFailed] Failed to connect ethernet0.

Hier mal die Zeilen davor und danach.

Code: Alles auswählen

vmware.log-Feb 09 16:07:34.450: mks| SVGA: display status changed, using optimizations for local consoles.
vmware.log-Feb 09 16:08:30.160: vmx| GuestRpcSendTimedOut: message to toolbox-dnd timed out.
vmware.log-Feb 16 03:03:01.057: vcpu-1| TOOLS autoupgrade protocol version 0
vmware.log-Feb 16 03:03:01.064: vcpu-1| TOOLS ToolsCapabilityGuestTempDirectory received 0
vmware.log-Feb 16 03:03:01.064: vcpu-1| GuestRpc: Reinitializing Channel 0(toolbox)
vmware.log-Feb 16 03:03:01.065: vcpu-1| GuestRpc: Channel 0 reinitialized.
vmware.log-Feb 16 03:03:22.359: vcpu-0| TOOLS installed legacy version 8290, available legacy version 8290
vmware.log-Feb 16 03:03:22.359: vcpu-0| TOOLS manifest update status is 2 (1-out of date, 2-ok, 3-no tools, 4-unmanaged, 5-unknown)
vmware.log-Feb 16 03:03:22.359: vcpu-0| TOOLS will not be autoupgraded.
vmware.log-Feb 16 03:03:44.405: vcpu-0| Msg_Post: Error
vmware.log:Feb 16 03:03:44.405: vcpu-0| [msg.ethernet.vlance.connectFailed] Failed to connect ethernet1.
vmware.log-Feb 16 03:03:44.405: vcpu-0| ----------------------------------------
vmware.log-Feb 16 03:03:44.504: vcpu-0| Msg_Post: Error
vmware.log:Feb 16 03:03:44.504: vcpu-0| [msg.ethernet.vlance.connectFailed] Failed to connect ethernet0.
vmware.log-Feb 16 03:03:44.504: vcpu-0| ----------------------------------------
vmware.log-Feb 16 03:03:44.714: mks| SVGA: Sync FIFO with SVGA disabled
vmware.log-Feb 16 03:03:44.721: vcpu-0| CPU reset: soft (mode 1)
vmware.log-Feb 16 03:03:44.721: vcpu-1| CPU reset: soft (mode 1)
vmware.log-Feb 16 03:03:44.724: vcpu-0| PCIBridge4: ISA/VGA decoding enabled (ctrl 0004)
vmware.log-Feb 16 03:03:44.724: vcpu-0| pciBridge4:1: ISA/VGA decoding enabled (ctrl 0004)
vmware.log-Feb 16 03:03:44.724: vcpu-0| pciBridge4:2: ISA/VGA decoding enabled (ctrl 0004)
vmware.log-Feb 16 03:03:44.724: vcpu-0| pciBridge4:3: ISA/VGA decoding enabled (ctrl 0004)
vmware.log-Feb 16 03:03:44.724: vcpu-0| pciBridge4:4: ISA/VGA decoding enabled (ctrl 0004)
vmware.log-Feb 16 03:03:44.724: vcpu-0| pciBridge4:5: ISA/VGA decoding enabled (ctrl 0004)

EDIT
http://picpaste.de/2011-02-22_130723-t3PIh1Lm.png

[Tschoergez]

nutzt ihr den vCloud Director oder LAbmanager?
http://kb.vmware.com/selfservice/micros ... Id=1028151

Wie sind die Einstellungen fürs Port Binding?

[chrish]

Weder vCloud Director noch LAbmanager.
Die Bindings stehen auf Static

[Tschoergez]

AHA

Wie viele VMs existieren denn insgesamt im Cluster?

Funktionierts, wenn Du das Portbinding umschaltest?
http://kb.vmware.com/selfservice/micros ... Id=1010593

(Vorher mit der Netzwerktruppe absprechen: die aktuellen VM<->Port-Zuordungen gehen dabei verloren. )

[chrish]

In dem einem Cluster 586 in dem anderen 111

Das mit den Portbindings ist so eine Frage....
Weil sich der Fehler nicht reproduzieren läßt.
So dann geh ich in kürze auch mal heim