Hoe Raid 5 rebuilden

[St@m]

Ok, echt een noob vraag, ik weet het, maar ik kan het gewoon niet vinden op google.. dus sorry.

Een klant van ons heeft een HP Proliant DL380 G5 staan met daarin 16 schijven. Deze server valt niet in ons beheer, maar nu zijn er van de week twee schijven gecrashed en is de vraag of wij deze kunnen vervangen. Natuurlijk kunnen we dat, de vraag is echter. Wissel je eerst 1 schijf om om daarna te rebuilden, of kun je direct beide schijven omwisselen. Ik heb echt geen idee, en omdat het nogal een eindje rijden is wil ik het liever in 1x laten gebeuren.

Note: Ik heb de omgeving nog nooit gezien, en kan ook niet inloggen op de omgeving.

Alvast bedankt!

[Nielson]

Hopelijk zitten die 16 schijven dan niet in één raid5 array want anders heb je ws een probleem met 2 defecte schijven.

[Lulukai]

Als er bij RAID5 2 schijven crashen ben je normaal gezien alles kwijt. Maar aangezien 1 RAID-array met 16 (!) schijven mij nogal raar lijkt, vermoed ik dat de opbouw anders is dan je denkt.

[Twarp]

St@m schreef op maandag 18 april 2011 @ 21:00:
Ok, echt een noob vraag, ik weet het, maar ik kan het gewoon niet vinden op google.. dus sorry.

Een klant van ons heeft een HP Proliant DL380 G5 staan met daarin 16 schijven. Deze server valt niet in ons beheer, maar nu zijn er van de week twee schijven gecrashed en is de vraag of wij deze kunnen vervangen. Natuurlijk kunnen we dat, de vraag is echter. Wissel je eerst 1 schijf om om daarna te rebuilden, of kun je direct beide schijven omwisselen. Ik heb echt geen idee, en omdat het nogal een eindje rijden is wil ik het liever in 1x laten gebeuren.

Note: Ik heb de omgeving nog nooit gezien, en kan ook niet inloggen op de omgeving.

Alvast bedankt!

Ik zou er van af blijven

Maar goed breng eerst in kaart welke schijf bij welke array hoort en zie dan of beide schijven niet uit dezelfde zijn. (dan heb je een uitdaging) Daarna kijken of je moet rebuilden via OS of via de controller. Maar breng alles eerst in kaart voor je begint.

[St@m]

Haha, nice... ik ga mijn collega's even een linkje geven naar deze topic. Gelukkig ben ik niet degene die naar locatie moet. Maar ok, stel. Het zijn meerdere array's. En de schijven zijn kapot in twee verschillende arrays, dan is het een kwestie van hotswappen? Sowieso laat ik mijn collega's niets uitvoeren als ze er niet zeker van zijn hoor, no worries, maar ik ben zelf nu wel benieuwd.

Bedankt in ieder geval

[ Voor 3% gewijzigd door St@m op 18-04-2011 21:17 ]

[McKaamos]

Hotswappen kan als de controller dat lust. If not, dan is het systeempje uit, diskwissel, systeempje weer aan.
Als het 1 array is met 2 defecte disks, dan zijn ze screwed...

[PROnline]

Nielson schreef op maandag 18 april 2011 @ 21:03:
Hopelijk zitten die 16 schijven dan niet in één raid5 array want anders heb je ws een probleem met 2 defecte schijven.

Daarnaast vind ik 16 schijven in een DL380 G5 ook knap.

Maximum Internal Storage Hot Plug SAS 4.0TB 8 x 500GB with standard internal hot plug SFF SAS drive cage

De standaardcontroller P400 doet hotswap. De vraag is of deze week twee schijven gecrashed zijn of deze week de 2e schijf gecrashed is en daarom nu iemand er achter komt dat er een issue is. Zoals aangegeven raid 5 heeft één spare disk. is het systeem up en running, dan zijn er hoogstwaarschijnlijk twee arrays. Zo niet, dan is het hopen dat er goede backup ingeregeld is.
Als er twee arrays zijn, dan kan je de disks probleemloos swappen. brand als het goed is een rood lampje op de bracket van de defecte disk.
Start eventueel de HP array configuration tool eens (als die geïnstalleerd is) en bekijk de status van de array, of start IML view om de integrated management log te bekijken. (Ook HP tooling)

[ Voor 5% gewijzigd door PROnline op 18-04-2011 21:35 ]

[St@m]

Het schijnt dat: Er twee lampjes rood branden (al enige tijd) die aangeven dat de schijven kapot zijn.
Ik krijg een licht voorgevoel dat het niet om een server gaat maar om een SAN overigens (dat heb ik mijn collega ook horen roepen vorige week bedenk ik me net (al staat in de documentatie dat het om een server gaat)). Ik zal het morgen wel horen

[McKaamos]

PROnline schreef op maandag 18 april 2011 @ 21:31:
[...]


Daarnaast vind ik 16 schijven in een DL380 G5 ook knap.

De standaardcontroller P400 doet hotswap. De vraag is of deze week twee schijven gecrashed zijn of deze week de 2e schijf gecrashed is en daarom nu iemand er achter komt dat er een issue is. Zoals aangegeven raid 5 heeft één spare disk. is het systeem up en running, dan zijn er hoogstwaarschijnlijk twee arrays. Zo niet, dan is het hopen dat er goede backup ingeregeld is.
Als er twee arrays zijn, dan kan je de disks probleemloos swappen. brand als het goed is een rood lampje op de bracket van de defecte disk.
Start eventueel de HP array configuration tool eens (als die geïnstalleerd is) en bekijk de status van de array, of start IML view om de integrated management log te bekijken. (Ook HP tooling)

RAID5 als techniek geeft standaard geen failover schijf hoor.
Het kan wel, en veel fabrikanten zullen de optie dan ook wel in de controller hebben zitten, maar het is geen vereiste voor RAID5.

Ik ken de betreffende server niet, dus het kan zomaar dat het op dat ding standaard is, maar het hoeft dus niet.

RAID5 heeft (het equivalent van) 1 schijf waar error correctie data op staat. Valt 1 schijf weg, kan de inhoud teruggerekend worden.
Als je online failover hebt (dus 1 disk die permanent paraat staat om in te vallen voor een gecrashde), dan heeft de controller al automatisch ge-rebuild. Dan kan er nog een tweede schijf sterven voordat je echt moet gaan wisselen.
Heb je dat niet, en is de tweede disk binnen dezelfde array, dan ben je fucked.

[ Voor 3% gewijzigd door McKaamos op 18-04-2011 21:39 ]

[CaptJackSparrow]

Het hangt er natuurlijk vanaf waar die servers voor gebruikt worden. Als het live systemen zijn waar continu gebruik van wordt gemaakt dan zou de klacht anders geweest zijn dan een uitgevallen schijf als beide schijven in hetzelfde array zouden zitten. Dat zou dan betekenen dat de schijven in verschillende arrays zitten die nu dus wel in degraded state opereren en bij uitval van een tweede schijf onherstelbaar verloren zijn.

Volgens de specs bij HP zouden deze servers oorspronkelijk compleet geleverd zijn met (sets van?) 8 schijven van 146GB. Als die er nog steeds inzitten vraag ik mij af of het niet hoognodig vervangen moet worden. Er wordt daar gesproken over een "1,16TB model". Dat zijn naar hedendaagse maatstaven onzinnige capaciteiten om in een 8 schijfs array te stoppen tenzij je evt. een supersnel array moet hebben. Als het systeem nu operationeel is zal het door de degraded state ook langzamer zijn en als dat ook niet tot klachten leidt vraag ik me af of een paar 2 of 3 TB schijven in RAID-1 niet geschikt zouden zijn. Evt. met hot spare. Als er meer snelheid nodig is desnoods RAID-10.

Ik zou dus ook eerst willen weten wat voor schijven er in zitten. Verder lijkt me dat HP een business support heeft die je kunt bellen over dit model. Daar zullen ze je allicht relevante informatie kunnen geven.

[St@m]

Haha, ik kom ergens. Ingelogd op de server uit de documentatie. Daar staat HP array configuration tool op. Helaas op het moment nog geen inloggegevens gevonden Volgens de documentatie gaat het om 16 x 67,8 GB schijven.

[CaptJackSparrow]

Totaal verouderd array krijg ik de indruk.

Wel potentieel riskant want als alle schijven heel veel draaiuren hebben is de kans dat er een tweede schijf in een array de geest geeft zeer reëel.

[ Voor 64% gewijzigd door CaptJackSparrow op 18-04-2011 21:53 ]

[Mr Alfabet]

Server uitzetten om de schijven te swappen is nog altijd het veiligste. Als 5 minuten downtime geen probleem is zou ik geen risico nemen.

[St@m]

Heren, allen hartelijk bedankt. Gisteravond ben ik erachter gekomen (na lang zoeken op internet hoe ik het wachtwoord kon resetten van de HP array configuration tool) dat er 4 arrays waren.
Schijven waren gecrashed in array A en C, geen probleem dus.
Array A is inmiddels hersteld (hotswap, begon te rebuilden), Array C is niet gelukt helaasch, wij gaan hier verder geen tijd instoppen en gaan adviseren om het bedrijf te contacteren die alles ook heeft ingericht, ik neem ook de iput van CaptJackSparrow mee, de array's zijn zeer verouderd (2006/7). Dit zal ik aangeven bij het bedrijf.

Bedankt voor jullie tijd en input. Ik en mijn collega's zijn weer een stukje wijzer geworden.

[heuveltje]

Mr Alfabet schreef op dinsdag 19 april 2011 @ 18:15:
Server uitzetten om de schijven te swappen is nog altijd het veiligste. Als 5 minuten downtime geen probleem is zou ik geen risico nemen.

Das nogal discutabel of dat het veiligste is.
blijkbaar is het een server die al jaren draait zonder dat er iemand naar omgekeken heeft.
Met daarnaast ook nog eens heel reele kans is dat ie een degraded array heeft,

Dan is het laatste wat ik zou doen die server uitzetten.
De meeste HD's blijven vrolijk 5 jaar draaien. Maar als ze dan een keer uitgezet zijn, dan is er een een goede kans dat ze niet meer allemaal opkomen

Al met al zou ik er eerder van af blijven, of iig de klant duidelijk maken dat het zijn risico is