RAID6-2016

• Ich baue ein Raid-6 aus 8x 2 TB Platten auf. Dazu habe ich 9x Festplatten gekauft:
  • 2 TB Kapazität - 3,5" Formfaktor - SATA 6Gb/s - 7200 U/min
  • 3 verschiedene Hersteller wegen der vergrößerten Varianz des Zeitpunktes des Ausfall

Controller

• Vorrangig nutze ich die OnBoard SATA 6 Gb/s Schnittstellen, eine lasse ich frei für Recovery Szenarien
• Nach einigem Herumprobieren mit Storage-Controllern setzte ich auf PCIe Karten mit Marvell Chipsatz, hier gab es für mich (unter Linux) keinerlei Probleme
• Man muss die RAID Funktion der Controller ja nicht nutzen (gilt für 88SE9220 und 88SE9230)
• Es gibt immer auch Varianten ohne RAID, (88SE9235 und 88SE9215)

RAID - Controller

(deren RAID Funktion ich natürlich nicht nutze!)

• StarTech PEXSAT32
• http://www.dawicontrol.de/ (etwas teuer aber aus Deutschland)
  • DC-624e RAID (Marvell 88SE9230)
  • 2 Sachen stören mich: die beiden eSATA Ports, keine nonRAID (88SE9235) Version verfügbar
• HighPoint RocketRAID 640L (RR640L, 88SE9230 laut Prospekt, in Wirklichkeit 88SE9235)
• MegaRAID® SAS 9271-4i (https://www.broadcom.com/products/storage/raid-controllers/megaraid-sas-9271-4i)
• MegaRAID® SAS 9270-8i (https://www.broadcom.com/products/storage/raid-controllers/megaraid-sas-9270-8i)
• MegaRAID® SAS 9271-8i (https://www.broadcom.com/products/storage/raid-controllers/megaraid-sas-9271-8i)
• Startech PEXSAT34RH (https://www.startech.com/Cards-Adapters/HDD-Controllers/SATA-Cards/4-Port-PCI-Express-SATA-6Gbps-RAID-Controller-Card~PEXSAT34RH)
  • basiert auf 88SE9230

NonRAID - Controller

• syba SI-PEX40062 (Marvell 88SE9235, NonRAID)
  • IO Crest SI-PEX40062
  • IO Crest SI-PEX40057
• HighPoint Rocket 640L (R640L, Marvell 88SE9230, NonRAID)
• http://www.iocrest.com
  • IO-PCE9235-4I (Marvell 88SE9235, NonRAID, 2x Lane)
  • IO-PCE9215-4I (Marvell 88SE9215, NonRAID, 1x Lane)

Super - Aber nicht verfügbar

• 88SE9345 PCIe 2.0 x4 -> 4x SATA 6 Gbps
• 88SE1475 PCIe 3.0 x8 -> 16x SATA 6 Gbps
• 88SE1337 PCIe 3.0 x4 -> 8x SATA 6 Gbps

-> Doch verfügbar? -> andreas(.)filsinger(@)orgamon(.)org

Im Test

• Exsys EX-3508 PCIe - 1x Slot - 1 Lane -> 8x SATA (Silicon Image SIL3132)
  • Läuft direkt unter Linux ohne Problem
  • Er hat 2 "echte" SATA-Ports a 3 Gb/s, diese werden auf 4 Ports per "Port Multiplier" gemultiplext also nominal 1.5 GB/s, effektiv weniger
  • Testergebnis: Funktioniert - jedoch die einzelnen Platten können nur langsam angesprochen werden
• Exsys EX-3516 PCIe - 2.0 2x -> 4x SATA (Marvell 88SE9230)
  • Läuft direkt unter Linux ohne Problem
  • Erkennt alle Platten mit 6 Gbps
  • Ein Jumper deaktiviert das BIOS (was ja in meinem Fall sinvoll wäre), wenn man aber beim Linux Betrieb auf das BIOS verzichtet wird die Karte überhaupt nicht mehr erkannt
  • In Ruhe ist per LED und per Geräusch aktivität an den Platten zu bemerken, keine Ahnung was der hier macht (hat nix mit md zu tun!!!)
  • (Fazit: Durchgefallen)
• HighPoint Rocket 640L (Marvell 88SE9230)
  • komisch, auf dem Marvell Chip steht 88SE9230 es sollte aber laut Marvell ein 88SE9235 sein?! Es ist scheinbar so, dass Marvel hier die Politik geändert hat (nonRAID=88SE9230, RAID=88SE9235)
  • Tatsache ist dass das Board-Layout zwischen RR640L und RR640L völlig identisch ist.
  • Läuft direkt unter Linux ohne Problem
  • Erkennt alle Platten mit 6 Gbps
  • Nicht mehr BIOS als notwendig, keine LEDs, keine Jumper
  • Fazit: Testsieger
  • 29.10.2016: Ausfall des Controllers, ev. auch verursacht durch Update auf openSuSE 42.2
    • die 4 (der 8) angeschlossenen Disks wurden aus dem Array rausgeworfen
    • das Array wurde auf "inactive" gesetzt
    • nach "--run" kamen i/o Errors!
• HighPoint RocketRaid 640L (RR640L, Marvell 88SE9235)
  • identisches Board-Layout im Vergleich zu R640L, jedoch mehr Bestückung:
  • onboard Buzzer
  • Nuvoton Microcontroller
  • I2C Bus Jumper
  • diverse Probleme:
    • Bootet nicht mehr bei 2 Boards, musste auf einem alten Board teste
    • weder im nonRAID noch in RAID Modus wird es von Linux erkannt
    • openSUSE Treiber greifen fix auf eine bestimmte Kernel-Version zu, setup misslingt
  • Fazit: Unbrauchbar
• Adaptec HBA 1000-8i
  • 3. Gen PCIe 8x
  • 2 Ports á 4x SATA á 3 Gbp/s
  • 2 Ports á 12 Gbp/s
  • Muss aktiv angeblassen / gekühlt werden sonst wird sie zu heiss
  • Funktioniert nativ unter Linux openSUSE 41.2
  • Fazit: solide
• Startech PEXSAT34RH
  • Test ab 20.01.2017

Serien Nummern

• WD Purple
  • S/N: WCC4M0SC7C9R
  • S/N: WCC4M0SC7AR1
  • S/N: WCC4M0XEZ7CH
• SEAGATE BARRACUDA
  • S/N: Z4Z2W81E
  • S/N: Z4Z32SNR
  • S/N: Z4Z2XNWC
• Toshiba DT01ACA
  • S/N: X5RAD3XGSTZ5
  • S/N: X5RAD2GGSTZ5
  • S/N: Y5GHNDBTSTZ5

• Das sind 18 TB, das kostet zusammen 684.93 € (Stand Feb 2016).
• 8 der Platten verwende ich im RAID, eine Platte lege ich daneben für den Fall der Fälle

Block A

Block B

HDD - Cage

Setup Aufbau