peacer
Goto Top

LSI 3WARE 9650SE-16ML und ESX(i) 5.5 - Performance Problem

Hallo,

Ich habe mir den oben genannten Controller zugelegt da er mit der neuesten Firmware >4TB Platten im RAID unterstützt (und bezahlbar war).
Ziel ist ein ESX(i) Host der gleichzeitig den Storage für einen FileServer bieten kann.

Jetzt habe ich folgende Konfiguration aufgestellt:

Mainboard: AsRock B75 Pro3-M
CPU: Intel I7 3770
RAM: 16GB
PSU: 700W Hipro Server Netzteil

System HDD: 180GB Intel SSD
STUFF HDD: 1TB WD

Beide angebunden an den internen SATA2 Controller

RAID Controller an PCIe 16x Slot 1: LSI/3WARE 9650SE-16ML

RAID5 (für FileServer) - 6x 4TB (WD RED, 24/7)
RAID5 (für VM's) - 5x 180GB SSD

Beide RAID's wurden erfolgreich mit folgendem TW_CLI Command erstellt:

/c0 add type=raid0 disk=0-5 stripe=256 nordcache nowrcache autoverify storsave=balance noscan
/c0 add type=raid0 disk=6-10 stripe=256 nordcache nowrcache autoverify storsave=balance noscan

Ergebnis:

Unit UnitType Status %RCmpl %V/I/M Stripe Size(GB) Cache AVrfy
u0 RAID-5 OK - - 256K 18626.4 Ri OFF
u1 RAID-5 OK - - 256K 670.512 Ri OFF

VPort Status Unit Size Type Phy Encl-Slot Model
p0 OK u0 3.63 TB SATA 0 - WDC WD40EFRX-68WT0N0
p1 OK u0 3.63 TB SATA 1 - WDC WD40EFRX-68WT0N0
p2 OK u0 3.63 TB SATA 2 - WDC WD40EFRX-68WT0N0
p3 OK u0 3.63 TB SATA 3 - WDC WD40EFRX-68WT0N0
p4 OK u0 3.63 TB SATA 4 - WDC WD40EFRX-68WT0N0
p5 OK u0 3.63 TB SATA 5 - WDC WD40EFRX-68WT0N0
p6 OK u1 167.68 GB SATA 6 - INTEL SSDSC2CW180A3
p7 OK u1 167.68 GB SATA 7 - INTEL SSDSC2CW180A3
p8 OK u1 167.68 GB SATA 8 - INTEL SSDSC2CW180A3
p9 OK u1 167.68 GB SATA 9 - INTEL SSDSC2BW180A3L
p10 OK u1 167.68 GB SATA 10 - INTEL SSDSC2BW180A3L

Controller Details:

/c0 Driver Version = 2.27.08.036
/c0 Model = 9650SE-16ML
/c0 Available Memory = 224MB
/c0 Firmware Version = FE9X 4.10.00.027
/c0 Bios Version = BE9X 4.08.00.004
/c0 Boot Loader Version = BL9X 3.08.00.001
/c0 Serial Number = L322625A8150065
/c0 PCB Version = Rev 032
/c0 PCHIP Version = 2.00
/c0 ACHIP Version = 1.90
/c0 Number of Ports = 16
/c0 Number of Drives = 11
/c0 Number of Units = 2
/c0 Total Optimal Units = 1
/c0 Not Optimal Units = 1
/c0 JBOD Export Policy = off
/c0 Disk Spinup Policy = 1
/c0 Spinup Stagger Time Policy (sec) = 1
/c0 Auto-Carving Policy = off
/c0 Auto-Carving Size = 18626 GB
/c0 Auto-Rebuild Policy = on
/c0 Rebuild Mode = Adaptive
/c0 Rebuild Rate = 1
/c0 Verify Mode = Adaptive
/c0 Verify Rate = 1
/c0 Controller Bus Type = PCIe
/c0 Controller Bus Width = 8 lanes
/c0 Controller Bus Speed = 2.5 Gbps/lane

Ich habe die neuesten Treiber für ESX 5.5 von VMWARE geladen und den LSI Provider installiert:

lsiprovider 500.04.V0.39-0006 LSI VMw

Abgesehen von den "Segementation Faults" bei executive commands (z.b. RAID erstellen) waren die Ergebnisse erstmal wie erwartet.

Problem:

Beim Erstellen einer VM z.B. mit 5GB HDD braucht er glatte 10 Minuten.
Ich habe verschiedene ISO files rauf und runterkopiert und immer wenn ich was auf oder vom RAID kopiere bekomme ich maximal eine übertragungsrate von ca. 24.000KByte/s (eher weniger).

Woran kann es liegen? Treiber? Falsche RAID Konfiguration?

Suche jetzt schon seit ein paar Tagen im web aber alle Foreneinträge die das Problem mit diesem Controller ansprechen, kommen zu keinem wirklichen Ziel.

Vielleicht könnt ihr mir ein wenig auf die Sprünge helfen.

Danke schonmal im Voraus

Content-ID: 221997

Url: https://administrator.de/contentid/221997

Ausgedruckt am: 22.11.2024 um 07:11 Uhr

DerWoWusste
DerWoWusste 15.11.2013 aktualisiert um 00:16:28 Uhr
Goto Top
Hi.

Hast Du den Write- und den Readcache absichtlich deaktiviert? Das drückt natürlich die Performance, auch wenn ich nicht einschätzen mag, in wieweit.
nocache or nowrcache attribute instructs CLI to disable the write cache on the newly created unit. Enabling write cache increases write performance at the cost of potential data loss in case of sudden power loss (unless a BBU or UPS is installed). By default the write cache is enabled
Haben unter 5.5 einen 9650 mit 4 Ports, der leistet mit dem selben Treiber und selber Firmware gute Dienste.
Peacer
Peacer 15.11.2013 aktualisiert um 09:01:55 Uhr
Goto Top
Bei der Einrichtung hat mich der Wizard darauf hingewiesen den WriteCache zwecks möglichem Datenverlust bei einem Power-Down zu deaktivieren, weil ich eben keine Batterie am Controller habe. Ich aktiviere es mal und dann schau mer mal.

Danke erstmal
Peacer
Peacer 15.11.2013 um 14:58:45 Uhr
Goto Top
Zunächst mal Danke an DerWoWusste denn es lag am Read/Write Cache. Jetzt muss ich mir nur noch ein Battery Cache Modul zulegen.

Hier noch ein funktionsfähiges und schnelles Endergebnis:
Read/Write up to: 600000KByte/s

Controller Config:

/c0 Driver Version = 2.27.08.036
/c0 Model = 9650SE-16ML
/c0 Available Memory = 224MB
/c0 Firmware Version = FE9X 4.10.00.027
/c0 Bios Version = BE9X 4.08.00.004
/c0 Boot Loader Version = BL9X 3.08.00.001
/c0 Serial Number = L322625A8150065
/c0 PCB Version = Rev 032
/c0 PCHIP Version = 2.00
/c0 ACHIP Version = 1.90
/c0 Number of Ports = 16
/c0 Number of Drives = 11
/c0 Number of Units = 2
/c0 Total Optimal Units = 2
/c0 Not Optimal Units = 0
/c0 JBOD Export Policy = off
/c0 Disk Spinup Policy = 1
/c0 Spinup Stagger Time Policy (sec) = 1
/c0 Auto-Carving Policy = off
/c0 Auto-Carving Size = 18626 GB
/c0 Auto-Rebuild Policy = on
/c0 Rebuild Mode = Adaptive
/c0 Rebuild Rate = 1
/c0 Verify Mode = Adaptive
/c0 Verify Rate = 1
/c0 Controller Bus Type = PCIe
/c0 Controller Bus Width = 8 lanes
/c0 Controller Bus Speed = 2.5 Gbps/lane

Unit UnitType Status %RCmpl %V/I/M Stripe Size(GB) Cache AVrfy
u0 RAID-5 OK - - 256K 18626.4 RiW OFF
u1 RAID-5 OK - - 256K 670.512 RiW OFF

VPort Status Unit Size Type Phy Encl-Slot Model
p0 OK u0 3.63 TB SATA 0 - WDC WD40EFRX-68WT0N0
p1 OK u0 3.63 TB SATA 1 - WDC WD40EFRX-68WT0N0
p2 OK u0 3.63 TB SATA 2 - WDC WD40EFRX-68WT0N0
p3 OK u0 3.63 TB SATA 3 - WDC WD40EFRX-68WT0N0
p4 OK u0 3.63 TB SATA 4 - WDC WD40EFRX-68WT0N0
p5 OK u0 3.63 TB SATA 5 - WDC WD40EFRX-68WT0N0
p6 OK u1 167.68 GB SATA 6 - INTEL SSDSC2CW180A3
p7 OK u1 167.68 GB SATA 7 - INTEL SSDSC2CW180A3
p8 OK u1 167.68 GB SATA 8 - INTEL SSDSC2CW180A3
p9 OK u1 167.68 GB SATA 9 - INTEL SSDSC2BW180A3L
p10 OK u1 167.68 GB SATA 10 - INTEL SSDSC2BW180A3L

Unit0:
/c0/u0 status = OK
/c0/u0 is not rebuilding, its current state is OK
/c0/u0 is not verifying, its current state is OK
/c0/u0 is initialized.
/c0/u0 Write Cache = on
/c0/u0 Read Cache = Intelligent
/c0/u0 volume(s) = 1
/c0/u0 name =
/c0/u0 serial number = E017703000266B00AD32
/c0/u0 Ignore ECC policy = off
/c0/u0 Auto Verify Policy = off
/c0/u0 Storsave Policy = protection
/c0/u0 Command Queuing Policy = on
/c0/u0 Rapid RAID Recovery setting = all

Unit UnitType Status %RCmpl %V/I/M Port Stripe Size(GB)
u0 RAID-5 OK - - - 256K 18626.4
u0-0 DISK OK - - p0 - 3725.28
u0-1 DISK OK - - p1 - 3725.28
u0-2 DISK OK - - p2 - 3725.28
u0-3 DISK OK - - p3 - 3725.28
u0-4 DISK OK - - p4 - 3725.28
u0-5 DISK OK - - p5 - 3725.28
u0/v0 Volume - - - - - 18626.4

Unit1:
/c0/u1 status = OK
/c0/u1 is not rebuilding, its current state is OK
/c0/u1 is not verifying, its current state is OK
/c0/u1 is initialized.
/c0/u1 Write Cache = on
/c0/u1 Read Cache = Intelligent
/c0/u1 volume(s) = 1
/c0/u1 name =
/c0/u1 serial number = MA180EGN0008E300BC34
/c0/u1 Ignore ECC policy = off
/c0/u1 Auto Verify Policy = off
/c0/u1 Storsave Policy = performance
/c0/u1 Command Queuing Policy = on
/c0/u1 Rapid RAID Recovery setting = rebuild

Unit UnitType Status %RCmpl %V/I/M Port Stripe Size(GB)
u1 RAID-5 OK - - - 256K 670.512
u1-0 DISK OK - - p6 - 167.628
u1-1 DISK OK - - p7 - 167.628
u1-2 DISK OK - - p8 - 167.628
u1-3 DISK OK - - p9 - 167.628
u1-4 DISK OK - - p10 - 167.628
u1/v0 Volume - - - - - 670.512