Die Foren-SW läuft ohne erkennbare Probleme. Sollte doch etwas nicht funktionieren, bitte gerne hier jederzeit melden und wir kümmern uns zeitnah darum. Danke!

10G Netzwerk

Alles zum Thema vSphere 6.7, ESXi 6.7 und vCenter Server.

Moderatoren: irix, Dayworker

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

10G Netzwerk

Beitragvon bemat » 01.12.2018, 12:08

Hallo guten Tag,
ich bin blutiger Anfänger, habe gegoogelt finde aber keine Worte für mein Problem und somit bisher auch keine Lösung und bin nun hier gelandet und wäre für einen Tipp, wie ich weiter suchen soll, sehr dankbar.

Ich habe 2 Hosts mit 1G Netzwerkkarten mit jeweils 6.7 installiert, danach in jeden Host eine 10G Karte eingebaut, jeweils eine Verbindung zum Switch, Treiber installiert, die Karten werden mit 10G als Physischer Adapter erkannt, den VMs VMXNET 3 zugeordnet, wird im Netzwerkstatus der jeweiligen VM auch als 10G angezeigt, die VM können von Host zu Host auch mit 10G, (Kopierprozesse mit 450-600 MB/s, also alles, was die Festplatten hergeben) kommunizieren, also alles chick..., und jetzt kommts, im VCenter beiben Kopierprozesse von Host zu Host bei 112 MB/S also 1G stecken... :-(

Wo habe ich was nicht gelesen, nicht verstanden und somit auch nicht konfiguriert?
Wäre für einen Tipp sehr dankbar
viele Grüße Matthias

Guru
Beiträge: 2731
Registriert: 23.02.2012, 12:26

Re: 10G Netzwerk

Beitragvon ~thc » 01.12.2018, 12:23

Solche Kopierprozesse werden im ESXi über die internen Netzwerkstacks (Management, vMotion etc.) abgewickelt, die bei deinem Setup durchaus noch an den alten 1G-Netzwerkkarten hängen könnten - du hast nicht geschrieben, ob die alten Netzwerkadapter nicht mehr benutzt werden (können).

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 12:35

Vielen Dank für die prompte Antwort,
alle anderen Netzwerkverbindungen sind deaktivert und weder mit dem vSwitch verbunden und mit dem physikalisch Switch verbunden. Es hängen also nur die 2 Leitungen von den 10G Karten am Switch. Boot und Restart Network Management hatte bisher leider keine Besserung gebracht.

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 01.12.2018, 13:15

Also in den VM hast du vorher schon 10G gesehen sofern VMXNET3 als vNIC der VM hinzu konfiguriert wurden. Mit den tatsaechlichen vorhanden VMNICs hat das nichts zu tun gehabt. Darum konnte, wenn man innerhalb des Hosts zwischen VMs einen vSwitches komuniziert auch > 10Gbit/s sehen.

Aber nun zu deinem Setup. Zeig uns mal die Ausgabe von

Code: Alles auswählen

esxcfg-nics -l
esxcfg-vmknics -l
esxcfg-vswitch -l


Dann starte deinen Kopiervorgang nochmal und beschreibe wer wohin auf was kopiert und gucke gleichzeitig mit "esxtop" und dann "v", "V", "n", "d" wo denn Traffic langfliesst und was das entsprechende Devise gerade ausweisst an Auslastung und Latenz.

Anonsten sei gesagt das man entwieder einen Disk- oder Networkbenchmark macht. Wenn einer kommt und sagt er "kopiert" was und es ist langsam dann kann das ja auch immer noch zig andere Gruende haben weil bei diesem Vorgang ja noch ganz andere mit im Spiel sind.
Leider hat der ESXi das eingebaue iperf wieder verloren :(

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 14:22

...ich habs geahnt es ist doch kompliziert::

1. Host:

Code: Alles auswählen

[root@IMESO-ESX:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:03:00.0 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:75 1500   Intel Corporation I350 Gigabit Network Connection
vmnic1  0000:03:00.3 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:76 1500   Intel Corporation I350 Gigabit Network Connection
vmnic2  0000:84:00.0 ixgben      Down 0Mbps      Half   a0:36:9f:20:a2:f8 1500   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2
vmnic3  0000:84:00.1 ixgben      Up   10000Mbps  Full   a0:36:9f:20:a2:fa 1500   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2

[

Code: Alles auswählen

root@IMESO-ESX:~] esxcfg-vmknics -l
-sh: esxcfg-vmknics: not found

Code: Alles auswählen

[root@IMESO-ESX:~] esxcfg-vswitch -l
Switch Name      Num Ports   Used Ports  Configured Ports  MTU     Uplinks
vSwitch0         5376        10          128               1500    vmnic3

  PortGroup Name        VLAN ID  Used Ports  Uplinks
  Management Network    0        1           vmnic3
  VM Network            0        6           vmnic3


2.Host


Code: Alles auswählen

[root@IMESO-ESXI-HP380e:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:02:00.0 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:48 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic1  0000:02:00.1 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:49 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic2  0000:02:00.2 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4a 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic3  0000:02:00.3 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4b 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic4  0000:03:00.0 nqlcnic     Up   10000Mbps  Full   d8:9d:67:34:62:10 1500   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter
vmnic5  0000:03:00.1 nqlcnic     Down 0Mbps      Half   d8:9d:67:34:62:14 1500   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter

[root@IMESO-ESXI-HP380e:~] esxcfg-vmknics -l
-sh: esxcfg-vmknics: not found

Code: Alles auswählen

[root@IMESO-ESXI-HP380e:~] esxcfg-vswitch -l
Switch Name      Num Ports   Used Ports  Configured Ports  MTU     Uplinks
vSwitch0         6656        20          128               1500    vmnic4

  PortGroup Name        VLAN ID  Used Ports  Uplinks
  Management Network    0        1           vmnic4
  VM Network            0        16          vmnic4



Das folgende verstehe ich leider nicht..
"Dann starte deinen Kopiervorgang nochmal und beschreibe wer wohin auf was kopiert und gucke gleichzeitig mit "esxtop" und dann "v", "V", "n", "d" wo denn Traffic langfliesst und was das entsprechende Devise gerade ausweisst an Auslastung und Latenz."

Zum Kopieren, auf dem Host selbst geht kopieren 450 MB/s, zwischen den Host ist sowohl Disk als Netzwerk 112 Mb/s
Ist ESXTOP auch in der Konsole einzugeben??

Danke für die Mühe
viele Grüße
Matthias

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 01.12.2018, 14:31

Sorry.... esxcfg-vmknic -l heist der Befehl.

Ich hab nicht verstanden was du mit kopieren ueber das vCenter meinst. Redest du von einem Cloning?

Ja "esxtop" ist auch auf der CMD des ESXi und vergleichbar mit dem "top" eines UnixOS. Mit den Tasten "n" fuer Network, "c" fuer CPU und "d" fuer Device" kann man sich halten die Echtzeitdaten angucken. Fuer VMs gibt es "v" und "V".

Die anderen Ausgaben zeigen schon mal soweit das du die "Wahrheit" erzaehlst bzw. bestaetigen das einzig eine 10G vmnic zur Anwendung kommt.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 14:34

wären das die richtigen Informationen??


Code: Alles auswählen

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/
  33554433 Management                            n/a vSwitch0              0.0
  33554434 vmnic3                                  - vSwitch0           4778.3
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.0
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.9
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              2.1
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              0.0
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.0
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.0
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0              8.0
  33554447 vmk0                               vmnic3 vSwitch0           4767.2



0.04, 0.03

Code: Alles auswählen

ADAPTR PATH                 NPTH   CMDS/s  READS/s WRITES/s MBREAD/s MBWRTN/s
 vmhba0 -                       0     0.00     0.00     0.00     0.00     0.00
 vmhba1 -                       0     0.00     0.00     0.00     0.00     0.00
 vmhba2 -                       3     2.85     0.00     2.85     0.00     0.02
 vmhba3 -                       1   675.95   670.06     5.89    83.76     0.03
vmhba32 -                       1     0.00     0.00     0.00     0.00     0.00
vmhba33 -                       2     0.00     0.00     0.00     0.00     0.00
vmhba34 -                       2     0.00     0.00     0.00     0.00     0.00
vmhba36 -                       1     0.00     0.00     0.00     0.00     0.00
 vmhba4 -                       1     2.47     0.00     2.47     0.00     0.01

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 14:37

esxcfg-vmknic -l liefert dieses Ergebnis

Code: Alles auswählen

[root@IMESO-ESX:~] esxcfg-vmknic -l
Interface  Port Group/DVPort/Opaque Network        IP Family IP Address                              Netmask         Broadcast       MAC Address       MTU     TSO MSS   Enabled Type                               NetStack
vmk0       Management Network                      IPv4      192.168.75.11                           255.255.255.0   192.168.75.255  a0:36:9f:20:a2:fa 1500    65535     true    STATIC                             defaultTcpipStack
vmk0       Management Network                      IPv6      fe80::a236:9fff:fe20:a2fa               64                              a0:36:9f:20:a2:fa 1500    65535     true    STATIC, PR               EFERRED   defaultTcpipStack

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 14:41

Ein kopieren innerhalb von 2 VM von Host zu Host liefert das Ergebnis

Code: Alles auswählen

1:40:23pm up 1 day 19:26, 738 worlds, 6 VMs, 50 vCPUs; CPU load average: 0.05, 0.05, 0.04

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554434 vmnic3                                  - vSwitch0           3646.85  469.76 16883.00    7301.33    3.72   66.00   0.00   0.00
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   64.00   0.00   0.00
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              0.00    0.00    0.00      41.96    0.03   84.00   0.00   0.00
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              0.00    0.00    0.00      22.89    0.01   74.00   0.00   0.00
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.00    0.00    0.00      41.96    0.03   80.00   0.00   0.00
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.00    0.00    0.00      41.96    0.03   80.00   0.00   0.00
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0             26.70    0.01   67.00      45.78    0.03   78.00   0.00   0.00
  33554447 vmk0                               vmnic3 vSwitch0           3616.33  469.26 17008.00    7236.48    3.69   66.00   0.00   0.00

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 14:55

DIe letzte Nachricht war verkehrt, hier noch mal ein Kopiervorgang einer Datei von VM von einem Host zu VM auf dem anderen Host


33554433 Management n/a vSwitch0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
33554434 vmnic3 - vSwitch0 7040.58 2222.42 41373.00 7672.48 3.72 63.00 0.00 0.00
33554435 Shadow of vmnic3 n/a vSwitch0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
33554447 vmk0 vmnic3 vSwitch0 43.08 0.22 659.00 46.67 0.03 80.00 0.00 0.00
33554448 2118127:IMESO-60_testa vmnic3 vSwitch0 5985.04 2223.07 48685.00 7640.17 3.69 63.00 0.00 0.00

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 01.12.2018, 14:56

Bitte mal das Code Tag verwenden wenn du hier was rein kopiert weil sonst geht die Formatierung kaputt.

Code: Alles auswählen

ADAPTR PATH                 NPTH   CMDS/s  READS/s WRITES/s MBREAD/s MBWRTN/s
 vmhba3 -                       1   675.95   670.06     5.89    83.76     0.03


Ueber den Controller kommen 83.76MB/s lesen rein. Dann kann ja auch nicht mehr weggehen.
Ich habe immer noch nicht verstanden was du mit kopieren im vCenter meinst.

Und dann nochmal... Endweder einen Netzwerkbenchmark (iperf von VM zu VM) oder einen Diskbenchmark (ioMeter) machen.

Gruss
Joerg

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 01.12.2018, 15:00

Ach nochwas. Sind alle 6VM aktiv auf dem Host... weil du hast 50 vCPUs vergeben und der Host hat doch viel weniger Cores oder? Ein esxtop mit v oder V sollte bei den ReadyTimes zeigen ob die VM ueberhaupt alle Resoucen bekommt welche sie gerne haette.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 15:04

Vielen Dank für die Geduld,
Kopieren mit dem VCENTER meine ich eine VM verschieben, Migrieren, oder Clonen, oder einfach eine Datei von einem Host auf den anderen kopieren
Kopieren mit VM meine ich in einer VM Windows server eine Datei auf dem einen Host in eine andere VM Windows Server kopieren.
Nach meiner Logik müßte das VCENTER ja auch die 10G ausnutzen, und nicht nur die VM, darüber bin ich gestolpert.

Was für ein "Code Tag " tag soll ich verwenden?

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 01.12.2018, 15:12

Naja das ist ja in meiner Logik, die VMS machen ja was sie sollen, ich hatte Ihnen Resourcen gegeben.
Aber wenn ich ganze VMS kopiern, MIgrieren oder Clonen will, bleibt die NEtzwerkgeschwindigkeit konstant bei 112 MB/s
Hat das VCEnter dann zu wenig Resource, hat das VCenter nicht die Netzwerktreiber für 10G, das ist ja der Punkt, den ich gar nicht verstehe.
Im Internet habe ich gefunden, dass die Hosts mit 10 G kommunizieren, aber die VMS nicht, bei mir ist es nun anders herum und das habe ich gar nicht im Internet gefunden, das heißt ich habe irgendwas ganz normales nicht richtig gemacht...

Welche Information wäre jetzt von mir hilfreich?
viele Grüße
Matthias

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 01.12.2018, 15:23

Wenn du hier einen Post schreibst dann hast du oberhalb des Eingabefeldes so Formatierungstags fuer Groesse,Farbe und fuer formatieren Text (Code). Einfach deinen Text markieren und dann oben "Code" auswaehlen.

Die vCenter VM muss dafuer keine Ressourcen aufwenden weil sie nur dem ESXi einen Befehl gibt und den Rest machen die Hosts. Ein Clonevorgang ist aber was ganz anderes als wenn du innerhalb deiner VM etwas machst. Starte deinen Kopiervorgang nochmal und gucke die die CMD/s = IOPS an und basierend auf der Blocksize welche der Prozess verwendet kommen da ganz unterschiedliche MB/s heraus.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 02.12.2018, 11:55

Hallo Joerg,
gestern konnte ich nicht weiter werkeln, heute morgen habe ich die Versuche noch einmal gemacht und versucht mit Deinen neuen Tipps und Befehlen den Versuch umzusetzen. Die Testdatei ist 6 Gbyte groß, das Ergebenis ist auch nach mehrmaligem Durchführen reproduzierbar.
Vielleicht gibts ja doch eine Erklärung dafür dass offensichtlich das VCenter zwischen den Hosts bei Kopier vorgängen die 10G nicht wirklich nutzt.
viele Grüße
Matthias

Code: Alles auswählen

VM IMESO-60_test_a auf Platte  INTEL SSD 970 1 2 T auf Host IMESO-EXI
VM IMESO-171 Repository auf Platte HP RAID 2 4T auf Host  Host IMESO-ESXI-HP380e

Versuch 1: Kopieren mit VM Windows Server  TESTDATEI.DMP von  IMESO-60\e in Verzeichnis IMESO-171\e
Versuch 2: Kopieren mit VCenter TESTDATEI.DMP aus Verzeichnis der VM IMESO-60 in Verzeichnis der VM IMESO-171

-> also gleiche Platten gleicher Host gleiche Netzwerkverbindung (?)

-------------------------------------------------------




IMESO-ESXI-HP380e und Host IMESO-EXI verbunden mit:
-------------------------------------------------------

[root@IMESO-ESXI-HP380e:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:02:00.0 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:48 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic1  0000:02:00.1 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:49 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic2  0000:02:00.2 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4a 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic3  0000:02:00.3 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4b 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic4  0000:03:00.0 nqlcnic     Up   10000Mbps  Full   d8:9d:67:34:62:10 1500   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter
vmnic5  0000:03:00.1 nqlcnic     Down 0Mbps      Half   d8:9d:67:34:62:14 1500   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter
[root@IMESO-ESXI-HP380e:~] esxcfg-vmknics -l
-sh: esxcfg-vmknics: not found
[root@IMESO-ESXI-HP380e:~] esxcfg-vswitch -l
Switch Name      Num Ports   Used Ports  Configured Ports  MTU     Uplinks
vSwitch0         6656        20          128               1500    vmnic4

  PortGroup Name        VLAN ID  Used Ports  Uplinks
  Management Network    0        1           vmnic4
  VM Network            0        16          vmnic4
-------------------------------------------------------
[root@IMESO-ESX:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:03:00.0 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:75 1500   Intel Corporation I350 Gigabit Network Connection
vmnic1  0000:03:00.3 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:76 1500   Intel Corporation I350 Gigabit Network Connection
vmnic2  0000:84:00.0 ixgben      Down 0Mbps      Half   a0:36:9f:20:a2:f8 1500   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2
vmnic3  0000:84:00.1 ixgben      Up   10000Mbps  Full   a0:36:9f:20:a2:fa 1500   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2
[root@IMESO-ESX:~] esxcfg-vmknics -l
-sh: esxcfg-vmknics: not found
[root@IMESO-ESX:~] esxcfg-vswitch -l
Switch Name      Num Ports   Used Ports  Configured Ports  MTU     Uplinks
vSwitch0         5376        11          128               1500    vmnic3

  PortGroup Name        VLAN ID  Used Ports  Uplinks
  Management Network    0        1           vmnic3
  VM Network            0        7           vmnic3

-------------------------------------------------------

IMESO-60_test_a
VM verbunden mit VXMNET3

Windows-IP-Konfiguration
Hostname  . . . . . . . . . . . . : IMESO-60
Primäres DNS-Suffix . . . . . . . :
   Knotentyp . . . . . . . . . . . . : Hybrid
   IP-Routing aktiviert  . . . . . . : Nein
   WINS-Proxy aktiviert  . . . . . . : Nein

Ethernet-Adapter Ethernet1:

   Verbindungsspezifisches DNS-Suffix:
   Beschreibung. . . . . . . . . . . : vmxnet3 Ethernet Adapter
   Physische Adresse . . . . . . . . : 00-50-56-98-44-09
   DHCP aktiviert. . . . . . . . . . : Nein
   Autokonfiguration aktiviert . . . : Ja
   Verbindungslokale IPv6-Adresse  . : fe80::a842:b611:f8f4:4ca1%16(Bevorzugt)
   IPv4-Adresse  . . . . . . . . . . : 192.168.75.60(Bevorzugt)
   Subnetzmaske  . . . . . . . . . . : 255.255.255.0
   Standardgateway . . . . . . . . . : 192.168.75.50
   DHCPv6-IAID . . . . . . . . . . . : 419450966
   DHCPv6-Client-DUID. . . . . . . . : 00-01-00-01-23-30-4E-76-00-0C-29-1D-A2-F6
   DNS-Server  . . . . . . . . . . . : 192.168.75.1
                                       192.168.75.2
   NetBIOS über TCP/IP . . . . . . . : Aktiviert


-------------------------------------------------------
IMESO-171 Repository
VM verbunden mit VXMNET3

Windows-IP-Konfiguration
Windows-IP-Konfiguration

   Hostname  . . . . . . . . . . . . : IMESO-171
   Primäres DNS-Suffix . . . . . . . : imeso.net
   Knotentyp . . . . . . . . . . . . : Hybrid
   IP-Routing aktiviert  . . . . . . : Nein
   WINS-Proxy aktiviert  . . . . . . : Nein
   DNS-Suffixsuchliste . . . . . . . : imeso.net

Ethernet-Adapter Ethernet0 2:

   Verbindungsspezifisches DNS-Suffix:
   Beschreibung. . . . . . . . . . . : vmxnet3 Ethernet Adapter
   Physische Adresse . . . . . . . . : 00-50-56-98-51-75
   DHCP aktiviert. . . . . . . . . . : Nein
   Autokonfiguration aktiviert . . . : Ja
   Verbindungslokale IPv6-Adresse  . : fe80::394d:e1d6:d984:bb83%15(Bevorzugt)
   IPv4-Adresse  . . . . . . . . . . : 192.168.75.171(Bevorzugt)
   Subnetzmaske  . . . . . . . . . . : 255.255.255.0
   Standardgateway . . . . . . . . . :
   DHCPv6-IAID . . . . . . . . . . . : 251678806
   DHCPv6-Client-DUID. . . . . . . . : 00-01-00-01-23-22-E1-86-00-0C-29-3A-65-B7
   DNS-Server  . . . . . . . . . . . : 192.168.75.1
                                       192.168.75.2
   NetBIOS über TCP/IP . . . . . . . : Aktiviert



-------------------------------------------------------

Versuch 1: Kopieren mit VM Windows Server  TESTDATEI.DMP von  IMESO-60\e in Verzeichnis IMESO-171\e
Versuch 2: Kopieren mit Vcenter TESTDATEI.DMP aus Verzeichnis IMESO-60 in Verzeichnis IMESO-171

-------------------------------------------------------

Versuch 1: Kopieren mit VM


[root@IMESO-ESXI-HP380e:~] esxtop

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554444 vmnic4                                  - vSwitch0           4951.48    2.65   70.00  306040.44 3534.00 1513.00   0.00   0.00
  33554445 Shadow of vmnic4                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554447 2100009:VMware vCenter Server      vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   60.00   0.00   0.00
  33554450 2100382:IMESO-003                  vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   60.00   0.00   0.00
  33554451 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554452 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554455 2100594:IMESO-BUG                  vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   60.00   0.00   0.00
  33554456 2100616:IMESO-GITlab               vmnic4 vSwitch0              2.54    0.00   60.00       5.09    0.00   64.00   0.00   0.00
  33554457 2100767:imeso-git-update           vmnic4 vSwitch0              2.54    0.00   60.00       5.09    0.00   64.00   0.00   0.00
  33554458 2100781:IMESO-220                  vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554459 2100853:IMESO-CLIENT1              vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554460 2101015:IMESO-CLIENT2              vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554461 2101041:IMESO-176-1                vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554463 2105096:IMESO-170 Backup           vmnic4 vSwitch0              2.54    0.00   60.00      10.17    0.00   64.00   0.00   0.00
  33554468 2107502:IMESO-L2                   vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   60.00   0.00   0.00
  33554470 2127022:IMESO-62                   vmnic4 vSwitch0              0.00    0.00    0.00       7.63    0.00   64.00   0.00   0.00
  33554475 2154887:IMESO-SRV                  vmnic4 vSwitch0             71.21    0.09  158.00      73.75    0.09  159.00   0.00   0.00
  33554477 vmk0                               vmnic4 vSwitch0             45.78    0.10  281.00       5.09    0.00   60.00   0.00  81.82
  33554478 2183641:IMESO-171 Repository       vmnic4 vSwitch0           4987.08    2.38   62.00   22692.36 3995.20 23076.00   0.00   0.00




[root@IMESO-ESX:~] esxtop

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554434 vmnic3                                  - vSwitch0           8386.23 2996.62 46835.00    2304.08    1.30   74.00   0.00   0.00
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.05    0.00   64.00   0.00   0.00
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.05    0.00   64.00   0.00   0.00
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              3.05    0.00  175.00       9.16    0.02  306.00   0.00   0.00
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.00    0.00    0.00       6.10    0.01  117.00   0.00   0.00
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.00    0.00    0.00       6.10    0.01  117.00   0.00   0.00
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0              0.00    0.00    0.00       6.10    0.01  121.00   0.00   0.00
  33554447 vmk0                               vmnic3 vSwitch0             21.36    0.06  378.00       9.16    0.00   60.00   0.00   0.00
  33554448 2118127:IMESO-60_testa             vmnic3 vSwitch0           2996.83 2994.34 130963.00    2288.82    1.28   73.00   0.00   0.00







-------------------------------------------------------

Versuch 2: Kopieren mit VCenter

[root@IMESO-ESXI-HP380e:~] esxtop

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554444 vmnic4                                  - vSwitch0          12032.64    6.14   66.00   72300.50  791.72 1435.00   0.00   0.00
  33554445 Shadow of vmnic4                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554447 2100009:VMware vCenter Server      vmnic4 vSwitch0              4.36    0.02  554.00      10.90    0.02  250.00   0.00   0.00
  33554450 2100382:IMESO-003                  vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   60.00   0.00   0.00
  33554451 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554452 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554455 2100594:IMESO-BUG                  vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   60.00   0.00   0.00
  33554456 2100616:IMESO-GITlab               vmnic4 vSwitch0              2.18    0.00   60.00       4.36    0.00   64.00   0.00   0.00
  33554457 2100767:imeso-git-update           vmnic4 vSwitch0              2.18    0.00   60.00       4.36    0.00   64.00   0.00   0.00
  33554458 2100781:IMESO-220                  vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554459 2100853:IMESO-CLIENT1              vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554460 2101015:IMESO-CLIENT2              vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554461 2101041:IMESO-176-1                vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554463 2105096:IMESO-170 Backup           vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554468 2107502:IMESO-L2                   vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   60.00   0.00   0.00
  33554470 2127022:IMESO-62                   vmnic4 vSwitch0              0.00    0.00    0.00       6.54    0.00   64.00   0.00   0.00
  33554475 2154887:IMESO-SRV                  vmnic4 vSwitch0              2.18    0.00   97.00       8.72    0.00   64.00   0.00   0.00
  33554477 vmk0                               vmnic4 vSwitch0          12008.67    6.11   66.00   12078.42  760.61 8253.00   0.00   0.13
  33554478 2183641:IMESO-171 Repository       vmnic4 vSwitch0              0.00    0.00    0.00       2.54    0.00   60.00   0.00   0.00


[root@IMESO-ESX:~] esxtop

   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554434 vmnic3                                  - vSwitch0           6450.65  787.64 16004.00   12340.55    6.24   66.00   0.00   0.00
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   64.00   0.00   0.00
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   64.00   0.00   0.00
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   64.00   0.00   0.00
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   60.00   0.00   0.00
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   60.00   0.00   0.00
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   64.00   0.00   0.00
  33554447 vmk0                               vmnic3 vSwitch0           6454.47  788.12 16004.00   12344.36    6.24   66.00   0.00   0.00
  33554448 2118127:IMESO-60_testa             vmnic3 vSwitch0              0.00    0.00    0.00       3.81    0.00   60.00   0.00   0.00





King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 02.12.2018, 12:05

Oehm...... VCenter TESTDATEI.DMP?

Willst du sagen das du den Datastorebrowser verwendest um Daten zu bewegen? Bitte mal einen Screenshot da wenn du deinen Kopiervorgang anstoesst. Mich wuerde es nicht wundern wenn diese Daten erstmal zu einem Client heruntergehen und dann wieder hoch.

Bitte mach mal per vCenter einen Clone von einer deiner VMs von ESX1 auf ESX2 und guck dir dann die Transferraten per esxtop an was "d" und "n" angeht.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 02.12.2018, 12:59

HAllo Joerg,
hiermit sende ich das Bild der Netzwerküberwachung, die Ausschläge vom Vormittag waren die Kopiervorgänge von den VMs
Jetzt der Klonvorgang ein VM von einem Host auf den anderen Host...


https://drive.google.com/file/d/1iCRpd5k9_j4Fy89_6TIs15hMZZVWJiN2/view?usp=sharing

Code: Alles auswählen


[root@IMESO-ESXI-HP380e:~] esxtop


   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554444 vmnic4                                  - vSwitch0          10748.73 1329.18 16208.00   21268.57   10.85   66.00   0.00   0.00
  33554445 Shadow of vmnic4                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554447 2100009:VMware vCenter Server      vmnic4 vSwitch0             28.34    0.05  219.00      26.16    0.08  424.00   0.00   0.00
  33554450 2100382:IMESO-003                  vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  366.00   0.00   0.00
  33554451 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  370.00   0.00   0.00
  33554452 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  370.00   0.00   0.00
  33554455 2100594:IMESO-BUG                  vmnic4 vSwitch0              0.00    0.00    0.00       4.36    0.00   60.00   0.00   0.00
  33554456 2100616:IMESO-GITlab               vmnic4 vSwitch0              2.18    0.00   60.00       2.18    0.00   64.00   0.00   0.00
  33554457 2100767:imeso-git-update           vmnic4 vSwitch0              0.00    0.00    0.00       4.36    0.00   64.00   0.00   0.00
  33554458 2100781:IMESO-220                  vmnic4 vSwitch0              0.00    0.00    0.00       4.36    0.00   64.00   0.00   0.00
  33554459 2100853:IMESO-CLIENT1              vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  370.00   0.00   0.00
  33554460 2101015:IMESO-CLIENT2              vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554461 2101041:IMESO-176-1                vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  370.00   0.00   0.00
  33554463 2105096:IMESO-170 Backup           vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  370.00   0.00   0.00
  33554468 2107502:IMESO-L2                   vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  366.00   0.00   0.00
  33554470 2127022:IMESO-62                   vmnic4 vSwitch0              2.18    0.00   60.00       6.54    0.00   66.00   0.00   0.00
  33554475 2154887:IMESO-SRV                  vmnic4 vSwitch0              2.18    0.00  105.00      32.70    0.09  346.00   0.00   0.00
  33554477 vmk0                               vmnic4 vSwitch0           8385.79 1328.59 20766.00   21209.72   10.68   66.00   0.00   0.05
  33554478 2183641:IMESO-171 Repository       vmnic4 vSwitch0              0.00    0.00    0.00      30.52    0.09  366.00   0.00   0.00


 ADAPTR PATH                 NPTH   CMDS/s  READS/s WRITES/s MBREAD/s MBWRTN/s DAVG/cmd KAVG/cmd GAVG/cmd QAVG/cmd
 vmhba0 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba1 -                       2  1258.85  1210.53    48.32   148.30     0.38     0.12     0.01     0.12     0.00
vmhba32 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00



[root@IMESO-ESX:~] esxtop


   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554434 vmnic3                                  - vSwitch0          20874.02   10.58   66.00  109952.80 1209.18 1441.00   0.00   0.00
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   64.00   0.00   0.00
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   64.00   0.00   0.00
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   64.00   0.00   0.00
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   60.00   0.00   0.00
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   60.00   0.00   0.00
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0              4.07    0.00   66.00       8.14    0.00   64.00   0.00   0.00
  33554447 vmk0                               vmnic3 vSwitch0          20861.82   10.58   66.00   22648.11 1164.80 6741.00   0.00   0.00
  33554448 2118127:IMESO-60_testa             vmnic3 vSwitch0              0.00    0.00    0.00       8.14    0.00   60.00   0.00   0.00


  PortGroup Name        VLAN ID  Used Ports  Uplinks
  Management Network    0        1           vmnic3
  VM Network            0        7           vmnic3



 ADAPTR PATH                 NPTH   CMDS/s  READS/s WRITES/s MBREAD/s MBWRTN/s DAVG/cmd KAVG/cmd GAVG/cmd QAVG/cmd
 vmhba0 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba1 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba2 -                       3     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba3 -                       1  1475.61   165.15  1310.46     3.06   375.97     0.21     0.01     0.21     0.00
vmhba32 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba33 -                       2     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba34 -                       2     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba36 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba4 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00





King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 02.12.2018, 13:23

Also wie du siehst ist deine vCenter VM da nicht gross beteiligt was den Datentransfer angeht, da im Falle eines Clonings nur ein Auftrag initiert wird und den Rest machen die Hosts da untereinander aus.

Du hast 1300 Mbit ausgehenden Traffic und das ist ja nur schon mal mehr als 1000Mbit. Die Frage was der Bottleneck ist... RAID von ESX1, RAID von ESX2 oder einfach das vSphere dem Clone Vorgang nicht alle Ressourcen gibt damit fuer die lfd. VMs noch ausreichend uebrig bleibt.

Fragen:
Was zeigt denn esxtop fuer eine Latenz an bei "d" auf beiden ESX fuer den entsprechenden HBA?
Wenn du in die andere Richtung kopierst ist es da genau so?

Ich gucke mal ob ich das hier testen kann. Allerdings hab ich wenig Lokalstorage sonder nur SAN und da muss man gucken das VAAI die ergebnisse nicht verfaelscht.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 02.12.2018, 13:45

Hallo Joerg,
ich verstehe die Fragen nicht ganz

Fragen:
Was zeigt denn esxtop fuer eine Latenz an bei "d" auf beiden ESX fuer den entsprechenden HBA?
"n" und "d" hatte ich Dir in den letzten Ausgaben geschickt erst "n" unterhalb dann "D" jeweils für die beiden Hosts

Wenn du in die andere Richtung kopierst ist es da genau so?
ja, immer konstant, keine Veränderung bei Änderung des Kopierobjektes, keine Veränderung bei Änderung der Richtung

beim Kopieren der VM über VCenter sind 1300Mbit sind ziemlich genau 100mByt Netzwerktraffic,
bei dem Kopieren zwischen den VMS kam 3534 Mbit zu Stande irgenwas von 280 mByte Netzwerktraffic

wie gesagt nach meiner Vorstellung müßt der Traffic im VCenter ebenso schnell sein wie zwischen den VMs, vielleicht ist diese Annahme falsch?

viele Grüße
Matthias

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 02.12.2018, 13:53

bemat hat geschrieben:Hallo Joerg,
ich verstehe die Fragen nicht ganz



Ahh... sorry. Ich hatte da in dem Fensterchen nicht nach unten gescrollt.

Also der HBA beim lesen macht 148.3MB/s.... und der welcher schreiben muss macht 375,97MB/s.
Ich glaube das hier der begrenzende Faktor liegt und nicht beim Netzwerk.

Wenn du in die andere Richtung kopierst ist es da genau so?
ja, immer konstant, keine Veränderung bei Änderung des Kopierobjektes, keine Veränderung bei Änderung der Richtung


OK.


beim Kopieren der VM über VCenter sind 1300Mbit sind ziemlich genau 100mByt Netzwerktraffic,


Macht nach meinem Adamriese aber 162,5MB/s da du durch 8.0x teilen must

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 02.12.2018, 13:58

Stimmt durch 8 teilen :-(

Auf dem Bild ist aber zu sehen, dass der Netztwerk Traffic durch das KLonen sehr viel geringer ist, als bei den Kopiervorgängen zwischen den VMs,

Sie benutzten ja die gleichen Platten und geleiche Netzwerkstruktur?

Also ist meine Erwartung falsch, dass das Vcenter ähnlich schnell kopiert, wie die Windoof Maschinen??
Also ist das alles gar kein Problem?

viele Grüße
Matthias

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 02.12.2018, 13:59

Frage.... da man sieht das der ESXi Traffic ueber VMK0 abgehandelt wird die Frage ob JumboFrames hier helfen koennten? Konfiguriert sind fuer alle Komponenten in deinem ESXi die MTU 1500.

Die Frage ob man mit MTU 9000 mehr erreichen kann.

1. Auf dem pSwitch Jumbos aktivieren
2. auf dem vSwitch0 MTU 9000 auf beiden Hosts
3. auf dem VMK0 MTU9000 auf beiden Hosts

dann mal mit esxcfg-* da vom Anfang nochmal pruefen.

Gruss
Joerg

King of the Hill
Beiträge: 12942
Registriert: 02.08.2008, 15:06
Wohnort: Hannover/Wuerzburg
Kontaktdaten:

Re: 10G Netzwerk

Beitragvon irix » 02.12.2018, 14:06

bemat hat geschrieben:Stimmt durch 8 teilen :-(

Auf dem Bild ist aber zu sehen, dass der Netztwerk Traffic durch das KLonen sehr viel geringer ist, als bei den Kopiervorgängen zwischen den VMs,

Sie benutzten ja die gleichen Platten und geleiche Netzwerkstruktur?


Das schon aber.. du fehlen ein paar unbekannte Variablen

- Blockgroesse
- Caching
- Prioritaet

Der ESXi cached genau 0 damit er kein Risiko eingehen muss und das sieht bei deinem GuestOS und seinen Filebuffern ja schonmal gleich ganz anders aus.

Wenn du in deinem GuestOS mal ioMeter installierst dann siehst du das die Transferraten abhaengen von
- Blocksize, Blockzise und nochmal der Blocksize
- CPU Leistung je nach anzahl der IOPS eine ganz andere ist
- Latenz
- Sequentiell oder Random


Also ist meine Erwartung falsch, dass das Vcenter ähnlich schnell kopiert, wie die Windoof Maschinen??


Ja deine Erwartung ist falsch in sofern das ESXi es anders macht bzw machen muss. Des weiteren es ist niemals das vCenter was etwas kopiert.

Also ist das alles gar kein Problem?


Aus meiner Sicht nicht. Man koennte trotzdem mal wegen Jumbos gucken.

Gruss
Joerg

Member
Beiträge: 18
Registriert: 01.12.2018, 06:13

Re: 10G Netzwerk

Beitragvon bemat » 02.12.2018, 14:24

UUUIIIHHHH

1. Auf dem pSwitch Jumbos aktivieren

->... das finde ich leider nicht ist das auf dem physikalischen Switch?


2. auf dem vSwitch0 MTU 9000 auf beiden Hosts

->...habe ich gemacht

3. auf dem VMK0 MTU9000 auf beiden Hosts

->...habe ich gemacht

dann mal mit esxcfg-* da vom Anfang nochmal pruefen
-> ok

Habe den Klone vorgang noch einmal gestartet... jetzt geht irgendwie gar nichts mehr....
viele Grüße
Matthias


Code: Alles auswählen


[root@IMESO-ESXI-HP380e:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:02:00.0 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:48 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic1  0000:02:00.1 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:49 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic2  0000:02:00.2 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4a 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic3  0000:02:00.3 igbn        Down 0Mbps      Half   2c:59:e5:49:ff:4b 1500   Intel Corporation Ethernet 1Gb 4-port 366i Adapter
vmnic4  0000:03:00.0 nqlcnic     Up   10000Mbps  Full   d8:9d:67:34:62:10 9000   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter
vmnic5  0000:03:00.1 nqlcnic     Down 0Mbps      Half   d8:9d:67:34:62:14 1500   QLogic Corp HP NC523SFP 10GbE 2-port Ethernet Server Adapter



[root@IMESO-ESX:~] esxcfg-nics -l
Name    PCI          Driver      Link Speed      Duplex MAC Address       MTU    Description
vmnic0  0000:03:00.0 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:75 1500   Intel Corporation I350 Gigabit Network Connection
vmnic1  0000:03:00.3 igbn        Down 0Mbps      Half   00:1e:67:d8:bc:76 1500   Intel Corporation I350 Gigabit Network Connection
vmnic2  0000:84:00.0 ixgben      Down 0Mbps      Half   a0:36:9f:20:a2:f8 1500   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2
vmnic3  0000:84:00.1 ixgben      Up   10000Mbps  Full   a0:36:9f:20:a2:fa 9000   Intel Corporation Ethernet Controller 10 Gigabit X540-AT2



[root@IMESO-ESXI-HP380e:~] esxtop


   PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554444 vmnic4                                  - vSwitch0             78.84    0.13  216.00      78.84    0.04   64.00   0.00   0.00
  33554445 Shadow of vmnic4                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554447 2100009:VMware vCenter Server      vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554450 2100382:IMESO-003                  vmnic4 vSwitch0             12.72    0.01   74.00      12.72    0.01   74.00   0.00   0.00
  33554451 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00      10.17    0.01   72.00   0.00   0.00
  33554452 2100394:IMESO-VMS                  vmnic4 vSwitch0              0.00    0.00    0.00      10.17    0.01   72.00   0.00   0.00
  33554455 2100594:IMESO-BUG                  vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554456 2100616:IMESO-GITlab               vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554457 2100767:imeso-git-update           vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554458 2100781:IMESO-220                  vmnic4 vSwitch0              0.00    0.00    0.00      10.17    0.01   72.00   0.00   0.00
  33554459 2100853:IMESO-CLIENT1              vmnic4 vSwitch0             10.17    0.01  155.00      22.89    0.01   64.00   0.00   0.00
  33554460 2101015:IMESO-CLIENT2              vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554461 2101041:IMESO-176-1                vmnic4 vSwitch0              0.00    0.00    0.00      20.35    0.01   82.00   0.00   0.00
  33554463 2105096:IMESO-170 Backup           vmnic4 vSwitch0              0.00    0.00    0.00      22.89    0.01   80.00   0.00   0.00
  33554468 2107502:IMESO-L2                   vmnic4 vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554470 2127022:IMESO-62                   vmnic4 vSwitch0              0.00    0.00    0.00      10.17    0.01   72.00   0.00   0.00
  33554475 2154887:IMESO-SRV                  vmnic4 vSwitch0             12.72    0.01  152.00      33.06    0.02   70.00   0.00   0.00
  33554477 vmk0                               vmnic4 vSwitch0             43.23    0.10  291.00       2.54    0.00   60.00   0.00  85.71
  33554478 2183641:IMESO-171 Repository       vmnic4 vSwitch0              0.00    0.00    0.00      20.35    0.01   78.00   0.00   0.00




disk adapter screen on
 ADAPTR PATH                 NPTH   CMDS/s  READS/s WRITES/s MBREAD/s MBWRTN/s DAVG/cmd KAVG/cmd GAVG/cmd QAVG/cmd
 vmhba0 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba1 -                       2    25.43     0.00    25.43     0.00     0.08     0.05     0.02     0.07     0.00
vmhba32 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00





[root@IMESO-ESX:~] esxtop


  33554433 Management                            n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554434 vmnic3                                  - vSwitch0             23.74    0.07  378.00      10.17    0.00   60.00   0.00   0.00
  33554435 Shadow of vmnic3                      n/a vSwitch0              0.00    0.00    0.00       0.00    0.00    0.00   0.00   0.00
  33554437 2099526:IMESO-TSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   64.00   0.00   0.00
  33554438 2099907:IMESO-BSV                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   64.00   0.00   0.00
  33554443 2112154:IMESO-102                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   64.00   0.00   0.00
  33554444 2114508:IMESO-103                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   60.00   0.00   0.00
  33554445 2114685:IMESO-111                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   60.00   0.00   0.00
  33554446 2116405:IMESO-106                  vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   64.00   0.00   0.00
  33554447 vmk0                               vmnic3 vSwitch0             23.74    0.07  378.00      10.17    0.00   60.00   0.00   0.00
  33554448 2118127:IMESO-60_testa             vmnic3 vSwitch0              0.00    0.00    0.00       3.39    0.00   60.00   0.00   0.00
 
 
 vmhba0 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba1 -                       0     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba2 -                       3     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba3 -                       1   108.51    23.74    84.77     0.37     0.20     0.04     0.01     0.05     0.00
vmhba32 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba33 -                       2     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba34 -                       2     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
vmhba36 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00
 vmhba4 -                       1     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00     0.00







.


Zurück zu „vSphere 6.7“

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 5 Gäste