Nieuwe (mass) storage

[Craven]

Ik ben vanwege het aankomende falen van mijn huidige storage disks weer in de markt voor een nieuwe storage oplossing. Momenteel draai ik een raid 5 set van 4 disks van 2tb (de hitachi diskstars uit hieronder). Dit word afgehandeld door een highpoint rocketraid 2640x4. Dit zit een desktop pc/server die zonder monitor in de kelder staat.

Huidige hardware

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i7 3770 Boxed	€ 367,84	€ 367,84
1	Moederborden	MSI B75MA-P45	€ 0,-	€ 0,-
4	Interne harde schijven	Hitachi Deskstar, 2TB	€ 0,-	€ 0,-
1	Interne harde schijven	Western Digital Blue WD3200AAJS , 320GB	€ 60,02	€ 60,02
1	Interne harde schijven	Western Digital Green WD20EARX, 2TB	€ 143,99	€ 143,99
1	Controllers	Highpoint RocketRAID 2640x4	€ 0,-	€ 0,-
1	Behuizingen	Lian Li PC-A04 (Zwart)	€ 0,-	€ 0,-
2	Casemodding	Silverstone SST-FP57B	€ 0,-	€ 0,-
4	Geheugen intern	Samsung M391B1G73EB0-YK0	€ 175,06	€ 700,24
1	Voedingen	Seasonic G-Serie 360Watt	€ 0,-	€ 0,-
Bekijk collectie Importeer producten			Totaal	€ 1.272,09

Ik zoek een?
Vervanging voor mass storage. In ieder geval de disks maar bij voorkeur ook de raid controller (nieuwe raid controller of alternatieve oplossing sta ik voor open). Een aantal zaken waar het aan moet voldoen:

• Meer ruimte, nu ik toch bezig ben wil ik minimaal 8TB effectieve disk space
• Bij voorkeur van raid 5 weg vanwege lange rebuild tijden.
• Performance is niet zo'n punt. Momenteel 30MB sustained read, wat al meer dan genoeg is
• Backup is ook geen punt, data kan ik weer terug krijgen
• Redundantie liever wel, ik kan de data terug krijgen maar het is een pain in the ass om te doen dus disk uitval tolerantie word gewaardeerd.

Ik overweeg om gewoon 2 losse disks te kopen. Waar ik met een script de contents kopieer van de een naar de ander om zo redundatie te creëren. Het maakt de oplossing goedkoop en simpel. Geen raid controller of andere complexiteit die kapot kan gaan. De disks zijn op die manier ook gewoon makkelijk te vervangen. Disk access word d.m.v een fileshare geregeld, dus ik share alleen de primaire disk. Dan hoef ik alleen maar de contents van die disk de mirroren naar de andere 1x per dag.

Als iemand andere suggesties heeft sta ik ervoor open.

Wat is je budget?
Liefst zo min mogelijk, het is voor thuis/hobby doeleinden.

Heb je bepaalde (merk)voorkeuren?
Geen merkvoorkeuren of voorkeuren voor oplossingen. Ik wil wel graag bij windows blijven. Ik heb geen zin om mij te verdiepen in andere zaken.

Specificeer het systeem en de omgeving waarin je het product gaat gebruiken.?
Massa opslag van data. Streaming naar 1 of max 2 devices (geen transcoding).

[1Kb]

De belangrijkste vraag die ik zie is eigenlijk: hoe weet je of het goed ie gegaan met het script. Het script kan hebben gefaald of 1 van de schijven is kapot en mogelijk dus de primaire schijf voordat het script heeft gelopen.
Ik zou daarom eerder naar een mirror oplossing kijken. Verder is een mirror oplossing ook veel sneller bij wegschrijven dan je nu gewend bent (vermoed ik omdat de parity berekening zwaarder is)
Wat het makkelijkste is, een kant en klare box, wat het goedkoopste is: kijken wat herbruikbaar is aangezien mirroring geen zware systeem eisen heeft.
Verder is het wel leuk als je nieuwe systeem een berichtje stuurt als een disk kapot is. Dus eigenlijk zeg ik daarmee niet te simpel te denken met je oplossing/software inrichting.

[SMSfreakie]

daar is mirroring voor uitgevonden.. geen idee welk OS je er op draait maar er zijn vast wel mooie software oplossingen, dan heb je ook niet dat je data als nog onleesbaar is omdat bv je controller de geest gegeven heeft

[Craven]

1Kb schreef op donderdag 10 oktober 2019 @ 19:45:
De belangrijkste vraag die ik zie is eigenlijk: hoe weet je of het goed ie gegaan met het script. Het script kan hebben gefaald of 1 van de schijven is kapot en mogelijk dus de primaire schijf voordat het script heeft gelopen.
Ik zou daarom eerder naar een mirror oplossing kijken. Verder is een mirror oplossing ook veel sneller bij wegschrijven dan je nu gewend bent (vermoed ik omdat de parity berekening zwaarder is)
Wat het makkelijkste is, een kant en klare box, wat het goedkoopste is: kijken wat herbruikbaar is aangezien mirroring geen zware systeem eisen heeft.
Verder is het wel leuk als je nieuwe systeem een berichtje stuurt als een disk kapot is. Dus eigenlijk zeg ik daarmee niet te simpel te denken met je oplossing/software inrichting.

Script kan ik zo wel schrijven dat hij mailtje stuurt mocht er iets mis zijn gegaan. Daar zijn mijn powershell skills meer dan toereikend voor. Dat is meteen een mooie check voor of de secundaire schijf kapot is. De data is vrij statisch. Een dag aan data kan dus goed mogelijk geen data zijn.

Mirror oplossing heb ik zelf ook liever maar dan ben ik wel afhankelijk van of het OS of de rocketraid die ik nu heb liggen. Een degelijke nieuwe controller vind ik het de meerprijs niet waard. OS (windows server) softraid zou ik moeten kijken naar de betrouwbaarheid. Mijn ervaringen zijn niet al te goed.

Mailing of kapotte spullen vind ik uberhaupt niet zo belangrijk. Maar kan ik zelf wel afhandelen.

SMSfreakie schreef op donderdag 10 oktober 2019 @ 19:53:
daar is mirroring voor uitgevonden.. geen idee welk OS je er op draait maar er zijn vast wel mooie software oplossingen, dan heb je ook niet dat je data als nog onleesbaar is omdat bv je controller de geest gegeven heeft

Windows server 2019. Ik ga nog even kijken naar software raid. ReFS zou inmiddels ook wel is volwassen moeten zijn maar daar moet ik ook ervaringen over lezen.

[MacPoedel]

In verband met software RAID, ik gebruik SnapRaid: https://www.snapraid.it/. Werkt op Windows en Linux.

Ja je kunt zelf een simpel script maken dat data van je access disk naar je backup disk schrijft, maar als je access disk aan het falen is, is het mogelijk dat je goede data aan het overschrijven bent.

In mijn opstelling heb ik 3 dataschijven en 1 redudantieschijf (soort van software RAID 5 maar beveiliging is met SnapRaid slechts snapshot gebaseerd). De dataschijven pool ik met DrivePool (https://stablebit.com/), daarmee kan ik meerdere volumes als één benaderen en beheert de locatie van bestanden voor me. Met DrivePool zou je ook een soort beveiliging door duplicatie kunnen doen, maar daar gebruik ik dus liever SnapRaid voor. Dit is vooral van toepassing als je meer dan 2 schijven zou gebruiken.

Verder, omdat het hier het componenten advies, heb ik eigenlijk geen advies over hdd's, volgens mij gebeuren daar nog maar weinige spannende dingen mee.

[Craven]

@MacPoedel dat ziet er beide interessant uit. Eerst maar is disks regelen nu. Dan gaan we daarna verder testen/spelen.

[Craven]

Fyi, uiteindelijk 2x8TB gekocht in V&A en via ReFS gemirrored. Dit werkt retesnel in vergelijking met wat ik had en ik kan voorlopig weer even vooruit. Ik ga alleen nog even kijken naar actieve notificaties als er iets kapot is.