Storage Spaces Direct : 0 Performance

Mitglied: StfnCstr

StfnCstr (Level 1) - Jetzt verbinden

06.04.2017 um 14:38 Uhr, 1560 Aufrufe, 8 Kommentare

Hallo Zusammen,

Ich habe mir ein TestCluster aufgesetzt um S2D zu testen. Erstellt habe ich zwei Volumes (Dual Mirror) Wenn ich jetzt eine 20 GB *.VHDX von Volume1 nach Volume2 kopiere komme ich auf Datenraten von 10-25 Mbyte die Sekunde. Die Auslastung der Netzwerkinterface sind ca bei 400MB.

Folgend meine Konfiguration

Anzahl Nodes : 3
Jeder Node ist mit 2 NVMes a 400 GB ausgesatttet und 4x 2TB SATA HDD
Jeder Node hat 128 GB RAM und 2x E5-2620 V4 @ 2,1 GHZ
Jeder Node ist mit einer 10GBit Kupfer Karte, die 2 Ports hat angebunden.
Der Switch hat 10 GBit Ports, die Backplane schafft bis 100GBit

Die Netzwerkkonfiguration habe ich wie folgt vorgenommen.
Gibt es irgendwas was ich vergessen habe oder ist das System langsamer als mein USB 2.0 Stick? Jeder hinweis ist hilfreich!


Vielen Dank
Mitglied: Vision2015
06.04.2017 um 15:05 Uhr
moin...

als erstes würde ich das teaming aus der config werfen! mit einer falschen teaming config kannst du viel kapput machen!

Zitat von StfnCstr:

Hallo Zusammen,

Ich habe mir ein TestCluster aufgesetzt um S2D zu testen. Erstellt habe ich zwei Volumes (Dual Mirror) Wenn ich jetzt eine 20 GB *.VHDX von Volume1 nach Volume2 kopiere komme ich auf Datenraten von 10-25 Mbyte die Sekunde. Die Auslastung der Netzwerkinterface sind ca bei 400MB.
hm.. du meinst 400 MBit/s oder wirklich Mbyte/s ?

Folgend meine Konfiguration

Anzahl Nodes : 3
Jeder Node ist mit 2 NVMes a 400 GB ausgesatttet und 4x 2TB SATA HDD
was für NVE´s sind das genau. Treiber aktuell.. grade bei Intel...
Sata HDD`s woran ?
Jeder Node hat 128 GB RAM und 2x E5-2620 V4 @ 2,1 GHZ
ok... das Board hat aber PCI-e v.3 ... oder ? bei v.2 hast du etwa nur noch 50% der leistung der NVE...
Jeder Node ist mit einer 10GBit Kupfer Karte, die 2 Ports hat angebunden.
Der Switch hat 10 GBit Ports, die Backplane schafft bis 100GBit
was für ein switch genau ?

Server 2016 ? wie Installiert ? als was genau ?

Gibt es irgendwas was ich vergessen habe oder ist das System langsamer als mein USB 2.0 Stick? Jeder hinweis ist hilfreich!


Vielen Dank
Frank
Bitte warten ..
Mitglied: StfnCstr
06.04.2017 um 15:10 Uhr
Zitat von Vision2015:

moin...

als erstes würde ich das teaming aus der config werfen! mit einer falschen teaming config kannst du viel kapput machen!

Zitat von StfnCstr:

Hallo Zusammen,

Ich habe mir ein TestCluster aufgesetzt um S2D zu testen. Erstellt habe ich zwei Volumes (Dual Mirror) Wenn ich jetzt eine 20 GB *.VHDX von Volume1 nach Volume2 kopiere komme ich auf Datenraten von 10-25 Mbyte die Sekunde. Die Auslastung der Netzwerkinterface sind ca bei 400MB.
hm.. du meinst 400 MBit/s oder wirklich Mbyte/s ?

Da meine ich natührlich Mbit


Folgend meine Konfiguration

Anzahl Nodes : 3
Jeder Node ist mit 2 NVMes a 400 GB ausgesatttet und 4x 2TB SATA HDD
was für NVE´s sind das genau. Treiber aktuell.. grade bei Intel...
Sata HDD`s woran ?
Das sind die Intel P3600. Sata hängen am Mainboard

Jeder Node hat 128 GB RAM und 2x E5-2620 V4 @ 2,1 GHZ
ok... das Board hat aber PCI-e v.3 ... oder ? bei v.2 hast du etwa nur noch 50% der leistung der NVE...
Jeder Node ist mit einer 10GBit Kupfer Karte, die 2 Ports hat angebunden.
Der Switch hat 10 GBit Ports, die Backplane schafft bis 100GBit
was für ein switch genau ?

Server 2016 ? wie Installiert ? als was genau ?
Ich nutze einen Cisco SG550, Windows 2016 hab ich Standardmäßig installiert.


Gibt es irgendwas was ich vergessen habe oder ist das System langsamer als mein USB 2.0 Stick? Jeder hinweis ist hilfreich!


Vielen Dank
Frank
Bitte warten ..
Mitglied: Vision2015
06.04.2017 um 15:25 Uhr
auf was für transferraten kommst du mit den NVE´s auf jedem host ?
ich frage noch mal nach den treibern...

sind in deinem storage pool auch SATA Platten ?

Frank
Bitte warten ..
Mitglied: StfnCstr
06.04.2017 um 15:33 Uhr
Hallo,

die Transferraten kann ich nicht testen. NVMEs sind nach hinzufügen zum S2D "verschwunden" Zu den zwei NVMs kommen 4x2TB SATA

Die Treiber sind aktuell

Danke
Bitte warten ..
Mitglied: Vision2015
06.04.2017 um 15:46 Uhr
hi,

wie "verschwunden" ?

ok.. du hast doch einen speicherpool angelegt...
in diesem speicherpool kannst du eine schnelle ebene (SSD/NVE) angeben... und die standard ebene (HHD´s)
hast du beides auf maximale größe gesetzt ?
hast du daran gedacht platz für den schreibcache zu lassen ?
können deine Netzwerk karten RDMA... bzw. ist der richtige treiber dafür Installiert
Storage Spaces Direct nutzt zum Datenaustausch nur SMB3..
können das deine Gäste ?

Frank
Bitte warten ..
Mitglied: StfnCstr
07.04.2017 um 15:31 Uhr
So.

Mitlerweile habe ich JumboFrames aktiviert. Wenn ich jetzt 1GB Dateien kopiere gehts.. sekundenschnell.. Die 25GB Datei kopiert aber immernoch mit 30-50 MByte/s
Bitte warten ..
Mitglied: psannz
17.05.2017 um 13:14 Uhr
Sers,

SMBdirect ohne RDMA ist... grausam.

Dual Mirror? Sicher, dass es nicht Dual Parity ist? Oder meinst du 2-Way-Mirror?

Wie sind die Pools, Tiers, Caches und Vdisks konfiguriert?

Grüße,
Philip
Bitte warten ..
Mitglied: StfnCstr
18.05.2017 um 08:37 Uhr
Hi,

ja, ich meinte 2-Way-Mirror.

Performance ist auch super. Ich komme auf knapp 2 Gbyte Lesend/Schreibend 70/30 und ca 400K iops.

Das einzige Problem was jetzt noch besteht ist, dass bei Last andauernd verschiedene Festplatten mit folgender Fehlermeldung aussteigen.

Der Plattenheader für den physischen Datenträger "{546d8bd3-616d-8b0e-6b8e-9c2357000cd7}" konnte von Windows nicht gelesen werden

Ich denke es liegt daran, dass ich keinen SAS HBA nutze. In der Testumgebung verwende ich die Onboard-Uefi-Sata-Ports

Viele Grüße


Zitat von psannz:

Sers,

SMBdirect ohne RDMA ist... grausam.

Dual Mirror? Sicher, dass es nicht Dual Parity ist? Oder meinst du 2-Way-Mirror?

Wie sind die Pools, Tiers, Caches und Vdisks konfiguriert?

Grüße,
Philip
Bitte warten ..
Heiß diskutierte Inhalte
TK-Netze & Geräte
Störung Fax2Mail bei NFON am 24.10.20? Kein Mailversand von NFON möglich?
gelöst StefanKittelFrageTK-Netze & Geräte26 Kommentare

Hallo, scheinbar gibt es eine Störung bei NFONs Fax2Mail am heutigen Tag 24.10.20. Man kann Faxe an schicken und ...

Router & Routing
VPN Performance durch Mikrotik erhöhen
JseidiFrageRouter & Routing17 Kommentare

Hallo zusammen, ich habe Stand heute zwei Standort die ich per Site-to-Site VPN über zwei Fritzboxen verbinde. Da hier ...

Voice over IP
Brother-Fax an Speedport Hybrid funktioniert nicht
gelöst kman123FrageVoice over IP16 Kommentare

Hallo liebes Forum, ich bin neu hier und hätte eine kleine Frage, da ich einfach nicht weiter komme. Sorry ...

Windows 10
RFID oder ähnlich Methode zur Sperrung W10pro bei Abwesenheit - Anmeldung nur über PW wieder ermöglichen
UweGriFrageWindows 1013 Kommentare

Hallo Admins, folgende Lösung wird gesucht: W10pro Anmeldung über Bitlocker Freischaltung und PW bei Anmeldung. Gesucht wird: RFID Chip ...

Windows Userverwaltung
Synology mit Azure Active Directory verbinden
roeggiFrageWindows Userverwaltung13 Kommentare

Ich suche eine Lösung mit der ich ein Synology NAS mit der Active Directory verbinden kann um die Benutzer ...

Ubuntu
Ubuntu 20.10 "Groovy Gorilla" mit GNOME 3.38 und Kernel 5.8 veröffentlicht
FrankInformationUbuntu11 Kommentare

Canonical hat Ubuntu 20.10 veröffentlicht. Die neue Version mit dem Codenamen "Groovy Gorilla" bekommt lediglich 9 Monaten Sicherheitsupdates, kritischen ...

Ähnliche Inhalte
Windows Netzwerk
Windows Direct Access
gelöst Jannis92FrageWindows Netzwerk5 Kommentare

Hall Zusammen, ich versuche derzeit eine Testumgebung für das Direct Access von Microsoft einzurichten. Als Server kommt ein Windows ...

Windows 10
Windows 10 Pro + Direct Access
DragonKillFrageWindows 104 Kommentare

Moin, kann man Direct Access auch mit Windows 10 Professional nutzen oder ist Enterprise zwingend erforderlich? Ich finde nur ...

Windows Server
Direct Access bei Site2Site
gelöst geocastFrageWindows Server4 Kommentare

Guten Abend miteinander Ich wollte fragen wie das Ablaufen würde mit Direct Access von Microsoft. Direct Access auf einem ...

Windows Netzwerk
Direct Access mit VPN aufbau
geocastFrageWindows Netzwerk6 Kommentare

Hallo Zusammen Ich überlege mir gerade ein Konzept und wollte mal fragen, was ihr davon haltet. Es geht um ...

Windows Server

S2D - Storage Spaces Direct - HBA-Controller

StfnCstrFrageWindows Server7 Kommentare

Hallo Zusammen, ich bin gerade dabei S2D zu planen. Dabei möchte ich für die HDDs den Onboard SATA Controller ...

Vmware

Direct Path IO - An oder Aus?

gelöst Ex0r2k16FrageVmware2 Kommentare

Hallo zusammen, habt ihr bei euren ESXi VMs o.g. Einstellung bei euren VMs an oder aus? Mir ist aufgefallen, ...

Berechtigungs- und IdentitätsmanagementBerechtigungs- und IdentitätsmanagementWebdienste und -serverWebdienste und -serverDatenbankenDatenbankenMonitoring & SupportMonitoring & SupportHybrid CloudHybrid CloudSmall Business ITSmall Business IT