[RAID] Rebuild/migrating duurt dagen i.p.v. uren ..

[Alfa Novanta]

Na zeer tevreden een poosje met 1 Samsung Spinpoint F1 1TB schijf te hebben gedraait (110MB/s ) .. heb ik nu besloten mijn bestaande RAID 5 set van 4x Maxtor DM10 320GB schijven te vervangen door 3x Samsung Spinpoint F1 1TB schijven. Dit zijn 2 nieuwe schijven geworden plus de ene die ik al had. En als alles naar wens gaat komt er binnenkort nog een 4e schijf bij.

E.e.a. draait op een ARECA ARC-1110 PCI-X 4 poorts sata controller. Omdat het jongleren met (op dit moment) 1 TB data niet mee valt (de data moet immers terug op een array op een controller waar nu de andere array achter hangt, heb ik eerst een RAID 0 array aangemaakt van 2 schijven, data erop gezet en vervolgens ook mijn oude Samsung schijf geformateerd en aan de array toegevoegd. Hij is nu aan het migreren van RAID 0 naar RAID 5.

Sure, ik ging er wel vanuit dat het een poosje duren ging en rekende op meerdere uren, maar ik heb hem gistermiddag 17:00 gestart en nu (07:15) staat hij pas op 35,6% .. als ik dat vluchtig omreken dan zou hij morgenochtend 11:00 klaar zijn. Dat is 1,5 dag

De Background Task Priority staat al op High(80%), dus alle aandacht zou naar het migreren moeten gaan.

Je zou bijna denken dat een softraid-kaartje dit sneller zou doen op een Core2Duo machine op 3 GHz dan deze ARECA chip op 500MHz ... ofniet?

[SpamLame]

Klinkt aannemelijk. Controller moet immers de R0 data (over 2 schijven) herverdelen over drie schijven met parity berekening van R5. Heb snel ff de manual gelezen, maar zie niets over hoelang een raid level migration kan duren.

[kalizec]

Anderhalve dag met 2TB aan schijven en migratie van Raid0 naar Raid5 klinkt mij niet gek in de oren. Geen idee of het klopt, maar de laatste keer dat ik een migratie deed weet ik nog van dat ik toen ook verbaasd was hoe lang dat duurde.

[_JGC_]

Lijkt me niet vreemd. Op een Dell PERC 320/DC was ik voor 2x73GB RAID1 -> 3x73GB RAID5 iets van 20 uren kwijt voor de migratie. Dan hebben we het over slechts 73GB, jij hebt het over 1TB.

[Kippenijzer]

Idd, dat soort tijden zijn helaas helemaal niet raar bij 1) zulke grote disk capaciteiten en 2) migratie tussen raid-levels. Rebuilden zal idd een paar uur duren, da's gewoon 'simpel' 1TB aan data herberekenen, nu moet hij echt elk blok muv het aller eerste op de 1e disk verplaatsen.
Hij moet blok 2 naar disk 2 plaatsen, blok 3 naar disk 3, echter zitten daar al bloks, dus hij moet eerst ruimte maken voor het te plaatsen blok, en dat voor iedere disk, voor iedere schijf en natuurlijk ieder blok. Hij zit nu dus flink wat terabytes te berekenen, verplaatsen en kopieren.

[kalizec]

En dan ook nog op een manier waarbij, mocht de stroom tussentijds uitvallen, het proces vrolijk verder kan en niet alle data naar pleitte is.

[Alfa Novanta]

.. dat laatste vraag ik mij af. Hoe kan hij dat nu al veilig gesteld hebben?!
Voor mijn gevoel ben ik aardig de l*l als de pc nu onderuit gaat.

Als rebuilden zo lang duurt, snap je nu ook meteen de toegevoegde waarde van RAID 6

Maar zou, zoals ik zei, een softraid oplossing met een simpel raidkaartje waarbij de cpu de pariteits berekeningen voor zijn rekening moet nemen, dit niet veel sneller kunnen doen? Tegenwoordig met die dual/quad cores merk je de impact ook een stuk minder dan voorheen ..

edit: en gezien de enorme toename in schijfgrootte de laatste tijd, dan mogen de RAID controllers ook wel rap sneller gaan worden. Een rebuild onlangs op een HP ML350 G5 duurde ook al een hele poos en die werkt dan ook nog niet eens met zulke grote schijven. In de storage in Globalswitch van ons bedrijf waar ik werk zitten nu wel terabyte SAS schijven .. ik hoop dat die controller toch wat vlotter is

[ Voor 28% gewijzigd door Alfa Novanta op 02-02-2009 11:15 ]

[Alfa Novanta]

68,3 % .. het schiet op

vluchtige berekening zou nu betekenen dat ie morgenochtend 06:30 uur klaar is.

[zmaster]

Ik moet me eigenlijk bij de rest van de GoT'ers aansluiten. Paar maanden terug had ik een Raid5 array met 4x Samsung Spinpoint F1 750GB schijven op een Areca 1220 PCIe kaart. Het uitbreiden van de array met 2 schijven van 750GB duurde ongeveer 13,5 uur. 12 uur voor het aanpassen van de raidset en 1,5 uur voor het extenden/initialiseren van de volumeset!

[SpamLame]

ing._Buttje schreef op maandag 02 februari 2009 @ 11:05:
.. dat laatste vraag ik mij af. Hoe kan hij dat nu al veilig gesteld hebben?!
Voor mijn gevoel ben ik aardig de l*l als de pc nu onderuit gaat.

Als rebuilden zo lang duurt, snap je nu ook meteen de toegevoegde waarde van RAID 6

Tja alleen duurt het rebuilden van R6 weer langer (tov R5 op dezelfde controller) vanwege de dubbele parity die per datablok herberekend moet worden. Overigens kan je rebuilden, over het algemeen, een hogere prioriteit geven, vraag is of de applicatie daar blij van wordt.

[Alfa Novanta]

zmaster schreef op maandag 02 februari 2009 @ 18:49:
Ik moet me eigenlijk bij de rest van de GoT'ers aansluiten. Paar maanden terug had ik een Raid5 array met 4x Samsung Spinpoint F1 750GB schijven op een Areca 1220 PCIe kaart. Het uitbreiden van de array met 2 schijven van 750GB duurde ongeveer 13,5 uur. 12 uur voor het aanpassen van de raidset en 1,5 uur voor het extenden/initialiseren van de volumeset!

Nou, vanochtend 6 uur was hij klaar. Heeft er ruim 37 uur werk mee gehad !

Lees performance was wel goed als ik op HD tune af ga, maar ATTO gaf een erg wispelturige performance aan, dus ben daar nog niet helemaal over uit. Vanavond verder testen..

edit: ik denk dat ik de oorzaak heb van het hele lange migreren en rebuilden..



Zie ing._Buttje in "[HDD] De Samsung Spinpoint F1 is er!"

[ Voor 15% gewijzigd door Alfa Novanta op 04-02-2009 20:52 ]

[Alfa Novanta]

wOEi .. disk nr. 4 is nu ook binnen

Nu e.e.a. goed draait zal het mij benieuwen hoe lang 't migreren van RAID 5 @ 3 disks naar 4 disks duren gaat .. to be continued!

edit: nu al @ 6,4% ... grofweg 8,3 uur!

[ Voor 11% gewijzigd door Alfa Novanta op 19-02-2009 21:35 ]

[Q]

Dat zal een heel stuk vlotter gaan, zo is de ervaring.

[Alfa Novanta]

momenteel 10 uur verder en hij staat nu op 78% (ben tevens wat nieuwe software/drivers aan het installeren incl. reboots) .. dus gokje, nog zo'n 3 uurtjes, dus omstreeks 10:00 zou hij ergens klaar moeten zijn.

[Frag1le]

Dit lijkt me erg lang duren.
Ik ben pas van 4x 750GB naar 5x 750GB raid 5 gemigreerd en dit duurde een kleine 6 uur met m'n Highpoint RR2320 (waarbij de CPU dus de berekeningen doet).
De array stond aan het begin van de migratie voor 95% vol.

[dvl-2]

13 uur is best netjes voor een dergelijke array. Houdt er wel rekening mee dat hoe groter de array deste langer het gaat duren. Wat niet uitmaakt is hoeveel disks je in 1x toevoegd.

Recentelijk gemigreerd van 12x1tb raid6 naar 13x1tb raid6, duurde net geen 40 uur op een areca 1280.

ing._Buttje schreef op maandag 02 februari 2009 @ 11:05:

Als rebuilden zo lang duurt, snap je nu ook meteen de toegevoegde waarde van RAID 6

Precies de reden waarom ik dus raid6 draai, expanden/rebuilden duurt dusdanig lang met veel hdd-load dat ik niet met een broken-raid5 wil zitten (in feite dus gewoon een raid0).

[ Voor 40% gewijzigd door dvl-2 op 20-02-2009 09:50 ]

[Frag1le]

Bij expanden heb je geen broken-array, toch?
Alleen bij uitval en een rebuild lijkt me.

[GoldenBatt]

Hier deed migraten van 5 Samsungs F1 1TB in riad5 naar 8 stuks in raid5 twee en een halfe dag, zo gek is dat niet hoor

tevens @ een Highpoint 2320, 8poort sata 300 @ pci-e 4X, mocht je dat willen weten.

[Alfa Novanta]

10:16 vanochtend was hij klaar,

009:26:02 elapsed time
002:14:45 elapsed time
000:15:55 elapsed time
001:13:18 elapsed time +
=======================
013:19:10 totaal

sjah

Draait wel goed nu btw! Zal vanavond nog wel een paar benchmarks posten.

edit:



absoluut niet ontevreden verder!

meer benchmarks: ing._Buttje in "[HDD] De Samsung Spinpoint F1 is er!"

[ Voor 28% gewijzigd door Alfa Novanta op 21-02-2009 18:30 ]

[Q]

dvl-2 schreef op vrijdag 20 februari 2009 @ 09:47:

Precies de reden waarom ik dus raid6 draai, expanden/rebuilden duurt dusdanig lang met veel hdd-load dat ik niet met een broken-raid5 wil zitten (in feite dus gewoon een raid0).

Met meer dan 8 schijven wil je sowieso raid6 draaien ivm de relatief zeer hoge kans op disk uitval. Inderdaad zal je zien dat er net een disk uitvalt tijdens het rebuilden. Ben je mooi klaar mee dan. Dit soort hoeveelheden data is niet meer te backuppen tegen redelijke kosten dus dan wordt je gedwongen extra maatregelen te nemen.

[ Voor 11% gewijzigd door Q op 24-02-2009 00:19 ]

[dvl-2]

Klopt, ben inderdaad rond de 6de disk (effectief) naar raid6 overgestapt, daarvoor altijd raid5 gedraait (en helemaal in het begin zelfs raid0 (2 disks)).