Wegen Konnektivitätsproblemen kann nicht mehr auf Volume XXX zugegriffen werden.
Verfasst: 16.11.2016, 17:18
Hallo Forum,
ich habe auf einem ESX 6.0 Host seit kurzem ein „Wegen Konnektivitätsproblemen kann nicht mehr auf Volume XXX zugegriffen werden.“ Problem.
Den Forum Beitrag vom 24.05.2016 sowie VM Ware KB2113956 diesbezüglich habe ich gelesen. Trotzdem bin ich mir nicht sichrer, ob es bei mir nicht um eine falsche RAID bzw. LUN Konfiguration oder sogar ein defekten SCSI Kontroller handelt.
Hier einpaar Eckdaten:
ESX Host : Fujitsu PRIMERGY RX 2540 M2
SCSI MegaRaid EP420i
10x Server interne Festplatten – RAD 10
2x Datastore – VMFS5
Kein SAN, kein Switch
Hier ist die Meldung von den ESX Host:
„Wegen Konnektivitätsproblemen kann nicht mehr
auf Volume
580e4ef3-7159f633-b2e6-901b0e98db00
(Datastore2) zugegriffen werden. Es wird
versucht, eine Wiederherstellung durchzuführen.
Das Ergebnis liegt demnächst vor.
Info
16.11.2016 02:44:38
Datastore2“
vobd.log - „2016-11-16T01:44:38.860Z: [vmfsCorrelator] 302171263516us: [esx.problem.vmfs.heartbeat.timedout] 580e4ef3-7159f633-b2e6-901b0e98db00 Datastore2
2016-11-16T01:44:42.866Z: [vmfsCorrelator] 302175269109us: [esx.problem.vmfs.heartbeat.recovered] 580e4ef3-7159f633-b2e6-901b0e98db00 Datastore2“
vmkwarning.log - „2016-11-16T01:44:37.973Z cpu2:35619)WARNING: lsi_mr3: mfiIoctl_FWCmd:315: waiting for controller reset to finish
2016-11-16T01:44:40.863Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:41.864Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...”
vmkernel.log –“2016-11-16T01:38:27.584Z cpu1:32816)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x439d8c790240, 0) to dev "mpx.vmhba38:C0:T0:L0" on path "vmhba38:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:44:37.860Z cpu12:33188)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt abort for device: vmhba2:C2:T1:L0
2016-11-16T01:44:37.860Z cpu12:33188)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:37.973Z cpu2:35619)WARNING: lsi_mr3: mfiIoctl_FWCmd:315: waiting for controller reset to finish
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:38.860Z cpu12:33188)lsi_mr3: fusionWaitForOutstanding:2531: megasas: [ 0]waiting for 1 commands to complete
2016-11-16T01:44:40.863Z cpu20:32858)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x2a (0x43a58ddacb40, 36005) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x8 D:0x0 P:0x0 Possible sense data: 0x0 0x0 0x0. Act:EVAL
2016-11-16T01:44:40.863Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:40.863Z cpu20:32858)ScsiDeviceIO: 2595: Cmd(0x43a58ddacb40) 0x2a, CmdSN 0x80000079 from world 36005 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x8 D:0x0 P:0x0
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:41.864Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:41.864Z cpu20:32858)ScsiDeviceIO: 2595: Cmd(0x43a580bf03c0) 0x28, CmdSN 0x80000012 from world 36005 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x8 D:0x0 P:0x0
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:42.865Z cpu20:32858)HBX: 276: 'Datastore2': HB at offset 4038656 - Reclaimed heartbeat [Timeout]:
2016-11-16T01:44:42.865Z cpu20:32858) [HB state abcdef02 offset 4038656 gen 81 stampUS 302175268874 uuid 58271dd7-96bbb858-ff73-901b0e98db00 jrnl <FB 1320600> drv 14.61 lockImpl 3]
2016-11-16T01:45:27.580Z cpu13:33406)NMP: nmp_ResetDeviceLogThrottling:3349: last error status from device naa.60030057026728b01fa0f48e935b1363 repeated 1 times
2016-11-16T01:48:27.585Z cpu14:32829)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x439d80c4a1c0, 0) to dev "mpx.vmhba38:C0:T0:L0" on path "vmhba38:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:49:25.871Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x43a580c39fc0, 0) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE
2016-11-16T01:49:25.876Z cpu23:33497)ScsiDeviceIO: 2651: Cmd(0x43a580c39fc0) 0x1a, CmdSN 0x1f11 from world 0 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
2016-11-16T01:49:25.876Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x85 (0x43a580c39fc0, 34678) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:49:25.876Z cpu23:33497)ScsiDeviceIO: 2651: Cmd(0x43a580c39fc0) 0x4d, CmdSN 0x541 from world 34678 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0.
2016-11-16T01:49:25.876Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x43a580c39fc0, 34678) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE”
Ich wäre sehr dankbar für jede Info.
Mit freundlichen Grüßen / Kind regards
Enis Al-Ubaydi
ich habe auf einem ESX 6.0 Host seit kurzem ein „Wegen Konnektivitätsproblemen kann nicht mehr auf Volume XXX zugegriffen werden.“ Problem.
Den Forum Beitrag vom 24.05.2016 sowie VM Ware KB2113956 diesbezüglich habe ich gelesen. Trotzdem bin ich mir nicht sichrer, ob es bei mir nicht um eine falsche RAID bzw. LUN Konfiguration oder sogar ein defekten SCSI Kontroller handelt.
Hier einpaar Eckdaten:
ESX Host : Fujitsu PRIMERGY RX 2540 M2
SCSI MegaRaid EP420i
10x Server interne Festplatten – RAD 10
2x Datastore – VMFS5
Kein SAN, kein Switch
Hier ist die Meldung von den ESX Host:
„Wegen Konnektivitätsproblemen kann nicht mehr
auf Volume
580e4ef3-7159f633-b2e6-901b0e98db00
(Datastore2) zugegriffen werden. Es wird
versucht, eine Wiederherstellung durchzuführen.
Das Ergebnis liegt demnächst vor.
Info
16.11.2016 02:44:38
Datastore2“
vobd.log - „2016-11-16T01:44:38.860Z: [vmfsCorrelator] 302171263516us: [esx.problem.vmfs.heartbeat.timedout] 580e4ef3-7159f633-b2e6-901b0e98db00 Datastore2
2016-11-16T01:44:42.866Z: [vmfsCorrelator] 302175269109us: [esx.problem.vmfs.heartbeat.recovered] 580e4ef3-7159f633-b2e6-901b0e98db00 Datastore2“
vmkwarning.log - „2016-11-16T01:44:37.973Z cpu2:35619)WARNING: lsi_mr3: mfiIoctl_FWCmd:315: waiting for controller reset to finish
2016-11-16T01:44:40.863Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:41.864Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...”
vmkernel.log –“2016-11-16T01:38:27.584Z cpu1:32816)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x439d8c790240, 0) to dev "mpx.vmhba38:C0:T0:L0" on path "vmhba38:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:44:37.860Z cpu12:33188)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt abort for device: vmhba2:C2:T1:L0
2016-11-16T01:44:37.860Z cpu12:33188)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:37.973Z cpu2:35619)WARNING: lsi_mr3: mfiIoctl_FWCmd:315: waiting for controller reset to finish
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:38.860Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:38.860Z cpu12:33188)lsi_mr3: fusionWaitForOutstanding:2531: megasas: [ 0]waiting for 1 commands to complete
2016-11-16T01:44:40.863Z cpu20:32858)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x2a (0x43a58ddacb40, 36005) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x8 D:0x0 P:0x0 Possible sense data: 0x0 0x0 0x0. Act:EVAL
2016-11-16T01:44:40.863Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:40.863Z cpu20:32858)ScsiDeviceIO: 2595: Cmd(0x43a58ddacb40) 0x2a, CmdSN 0x80000079 from world 36005 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x8 D:0x0 P:0x0
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:40.863Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:41.864Z cpu20:32858)WARNING: NMP: nmp_DeviceRequestFastDeviceProbe:237: NMP device "naa.60030057026728b01fa0f48e935b1363" state in doubt; requested fast path state update...
2016-11-16T01:44:41.864Z cpu20:32858)ScsiDeviceIO: 2595: Cmd(0x43a580bf03c0) 0x28, CmdSN 0x80000012 from world 36005 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x8 D:0x0 P:0x0
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T1:L0
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 33623736
2016-11-16T01:44:41.864Z cpu20:32858)lsi_mr3: mfi_TaskMgmt:262: ABORT
2016-11-16T01:44:42.865Z cpu20:32858)HBX: 276: 'Datastore2': HB at offset 4038656 - Reclaimed heartbeat [Timeout]:
2016-11-16T01:44:42.865Z cpu20:32858) [HB state abcdef02 offset 4038656 gen 81 stampUS 302175268874 uuid 58271dd7-96bbb858-ff73-901b0e98db00 jrnl <FB 1320600> drv 14.61 lockImpl 3]
2016-11-16T01:45:27.580Z cpu13:33406)NMP: nmp_ResetDeviceLogThrottling:3349: last error status from device naa.60030057026728b01fa0f48e935b1363 repeated 1 times
2016-11-16T01:48:27.585Z cpu14:32829)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x439d80c4a1c0, 0) to dev "mpx.vmhba38:C0:T0:L0" on path "vmhba38:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:49:25.871Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x43a580c39fc0, 0) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE
2016-11-16T01:49:25.876Z cpu23:33497)ScsiDeviceIO: 2651: Cmd(0x43a580c39fc0) 0x1a, CmdSN 0x1f11 from world 0 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
2016-11-16T01:49:25.876Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x85 (0x43a580c39fc0, 34678) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
2016-11-16T01:49:25.876Z cpu23:33497)ScsiDeviceIO: 2651: Cmd(0x43a580c39fc0) 0x4d, CmdSN 0x541 from world 34678 to dev "naa.60030057026728b01fa0f48e935b1363" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0.
2016-11-16T01:49:25.876Z cpu23:33497)NMP: nmp_ThrottleLogForDevice:3298: Cmd 0x1a (0x43a580c39fc0, 34678) to dev "naa.60030057026728b01fa0f48e935b1363" on path "vmhba2:C2:T1:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE”
Ich wäre sehr dankbar für jede Info.
Mit freundlichen Grüßen / Kind regards
Enis Al-Ubaydi