Snelle zelfbouwnas

[chr1st14n]

(Ik weet niet of de titel goed gekozen is)

Ik moet voor mijn werk een snelle/grote NAS bouwen/zoeken. We hebben nu 2 Acer EasyStore H340 met elk 4 x 1tb schijven, maar deze zijn nu te langzaam voor waar wij ze voor willen gebruiken (Tijdelijke backup opslag, en shared storage voor onze xenmachines). Op de EasyStores draait OpenFiler op een USB-stick om zo de 4tb schijven die erin zitten totaal te kunnen gebruiken (schijven draaien in software raid-5).

Maar nu werd mij gevraagd of ik deze 2 Easystores (de data ervan) kan samenvoegen tot 1 machine met 8 tb schijven.

Ik had hier nog een Intel C2D e6600 en wat geheugen liggen, en had heb ik op een P45 moederbordje gedrukt. heb hier eerst 4 tb schijven aangedaan (data staat al gebackupt) en ben een nieuwe machine gaan opbouwen. nadat ik alles had ingesteld ben ik gaan testen met de snelheid, maar deze was tot mijn verbazing niet tot nauwelijks sneller dan de EasyStore!!

Ik heb al verschillende dingen geprobeerd, zoals:
- Openfiler niet op USB, maar op een interne SATA schijf installeren
- Freenas geinstalleerd, maar ook deze is niet tot nauwelijks sneller.

Ik heb al wat lopen googlen, maar ik heb nog geen duidelijk antwoord/oorzaak gevonden waarom er niet tot nauwelijks winst is.

Dus nu is mijn vraag, hebben jullie nog tips?

Alvast bedankt.

(Ik hoop dat ik het een beetje duidelijk heb neergezet, het is nog vroeg)

[Terror]

(Nog) geen antwoorden, maar eerst wat vragen:
1: Waarom moet jij dit doen?
2: Het is voor je werk. Welke eisen zijn er wat betreft uptime? Bij een zakelijke oplossing kan je vaak afspreken dat er binnen x uur / x dagen vervanging is. Ik zou de verantwoording iig niet willen dragen, mocht er iets mis gaan.
3: Snelheid is denk ik beperkt omdat je een software raid hebt.

[ Voor 60% gewijzigd door Terror op 12-12-2011 09:38 ]

[Gunner]

Zakelijk zou ik nooit voor zelfbouw kiezen.

[chr1st14n]

Terror schreef op maandag 12 december 2011 @ 09:35:
(Nog) geen antwoorden, maar eerst wat vragen:
1: Waarom moet jij dit doen?
2: Het is voor je werk. Welke eisen zijn er wat betreft uptime? Bij een zakelijke oplossing kan je vaak afspreken dat er binnen x uur / x dagen vervanging is. Ik zou de verantwoording iig niet willen dragen, mocht er iets mis gaan.
3: Snelheid is denk ik beperkt omdat je een software raid hebt.

1. klein ICT bedrijf met 2 medewerkers (ik ben er 1 van )
2. Uptime zoveel mogelijk, het is de bedoeling dat hier de (tijdelijke) backups van verschillende dingen op komen en dat de machine als shared storage voor onze xenserver gaat functioneren.
3. Zou dit dan opgelost zijn met een Hardware Raid Controller?

Gunner schreef op maandag 12 december 2011 @ 09:38:
Zakelijk zou ik nooit voor zelfbouw kiezen.

en er is een beperkt budget, dus vandaar dat merkspul (HP, Dell, etc) er een beetje buiten vallen

[Verwijderd]

Wellicht staan er in het DIY NAS Topic wat zinvolle tips: Het grote DIY RAID NAS topic deel 3
Over het algemeen is disk I/O de bottleneck bij storage. Doe eens wat benchmarks om te zien waar bij jou de bottleneck zit?

[ Voor 34% gewijzigd door Verwijderd op 12-12-2011 09:53 ]

[chr1st14n]

Verwijderd schreef op maandag 12 december 2011 @ 09:52:
Wellicht staan er in het DIY NAS Topic wat zinvolle tips: Het grote DIY RAID NAS topic deel 3
Over het algemeen is disk I/O de bottleneck bij storage. Doe eens wat benchmarks om te zien waar bij jou de bottleneck zit?

Ben het topic aan het lezen.

Wat is hier een goede benchmarktool voor?? als ik grote bestanden kopieer (van 1 of meerdere werkstation) dan is snelheid rond de 20 mb/s (gemiddeld) en dit is op de Acer EasyStores het zelfde als op de server met de e6600 en 6,5gb

(acer easystores bestaan uit een Atom N230 (als ik het goed heb, singelcore 1.6ghz) en 1x2gb)

[Gunner]

chr1st14n schreef op maandag 12 december 2011 @ 09:44:
en er is een beperkt budget, dus vandaar dat merkspul (HP, Dell, etc) er een beetje buiten vallen

Zelfs dan zijn er prima alternatieven, bijvoorbeeld een Synology of vergelijkbare NAS. Prima betrouwbaar en uitstekende support.

[chr1st14n]

Gunner schreef op maandag 12 december 2011 @ 10:10:
[...]

Zelfs dan zijn er prima alternatieven, bijvoorbeeld een Synology of vergelijkbare NAS. Prima betrouwbaar en uitstekende support.

Klopt, maar dan komen we in de hele zware versie van synology (+8disk rack variant) en die kosten niet niks..
pricewatch: Synology RS2211RP+ (redundante voeding)

[Gunner]

Wat is je budget dan wel?

[chr1st14n]

Gunner schreef op maandag 12 december 2011 @ 10:23:
Wat is je budget dan wel?

rond de 500 (schijven, behuizing, etc zijn aanwezig) ging mij er eigenlijk meer om of het huidige setje (e6600 met 6,5gb) zwaar genoeg was met een paar "simpele" raidcontrollers, of dat er toch gekozen moet worden voor een HW raid controller.

Ik kan namelijk moeilijk geloven dat een Atom N230 met 2gb gelijk presteert als een E6600 met 6.5gb (beide met software raid)

[lier]

chr1st14n schreef op maandag 12 december 2011 @ 10:09:
als ik grote bestanden kopieer (van 1 of meerdere werkstation) dan is snelheid rond de 20 mb/s (gemiddeld) en dit is op de Acer EasyStores het zelfde als op de server met de e6600 en 6,5gb

Zou het kunnen dat de andere kant van het lijntje de beperkende factor is?
Is het echt 20 mb/s of bedoel je eigenlijk 20 MB/s?

[Shunt]

chr1st14n schreef op maandag 12 december 2011 @ 10:17:
[...]


Klopt, maar dan komen we in de hele zware versie van synology (+8disk rack variant) en die kosten niet niks..
pricewatch: Synology RS2211RP+ (redundante voeding)

Nee die dingen zijn niet goedkoop maar hou ook rekening met jouw eigen uur loon wat jij nu niet werkt binnen het bedrijf aan een opdracht of functie. Tel dat eens bij elkaar op. Dan even een schatting maken wat het qua tijd gaat kosten om dat zelf bouw ding te gaan onderhouden troubleshooten en dat soort dingen. Reken dan eens mee dat je ook nog zo veel jaar garantie krijgt, firmware updates en een standaard oplossing hebt. Dan zijn die 1800 euro misschien de kosten niet meer.

[chr1st14n]

lier schreef op maandag 12 december 2011 @ 10:28:
[...]

Zou het kunnen dat de andere kant van het lijntje de beperkende factor is?
Is het echt 20 mb/s of bedoel je eigenlijk 20 MB/s?

20mbytes/s (20% van 1gbit)

en aan de client kant stond een PC met SSD (vertex 2 120gb)

[ Voor 10% gewijzigd door chr1st14n op 12-12-2011 10:31 ]

[chr1st14n]

Shunt schreef op maandag 12 december 2011 @ 10:29:
[...]

Nee die dingen zijn niet goedkoop maar hou ook rekening met jouw eigen uur loon wat jij nu niet werkt binnen het bedrijf aan een opdracht of functie. Tel dat eens bij elkaar op. Dan even een schatting maken wat het qua tijd gaat kosten om dat zelf bouw ding te gaan onderhouden troubleshooten en dat soort dingen. Reken dan eens mee dat je ook nog zo veel jaar garantie krijgt, firmware updates en een standaard oplossing hebt. Dan zijn die 1800 euro misschien de kosten niet meer.

Het is voornamelijk voor ons zelf, wij zijn ook de externe back-up locatie bij een paar (kleine) klanten.

Maar omdat wij nu 8tb verdeeld over 2 machines hebben. En elke machine draait in SWraid5 hebben we ook een verlies van 2x1tb. en omdat de preformance niet super zijn, dachten wij deze te vervangen door 1 "snellere" NAS.

[Shunt]

chr1st14n schreef op maandag 12 december 2011 @ 10:38:
[...]


Het is voornamelijk voor ons zelf, wij zijn ook de externe back-up locatie bij een paar (kleine) klanten.

Maar omdat wij nu 8tb verdeeld over 2 machines hebben. En elke machine draait in SWraid5 hebben we ook een verlies van 2x1tb. en omdat de preformance niet super zijn, dachten wij deze te vervangen door 1 "snellere" NAS.

Sowieso software raid5 is performance killer. Maar dan gelden de punten alsnog hoe lang ben je bezig met deze oplossing in uren hoe lang denk je dat je nodig gaat hebben in de tijd dat het draait om het draaiende te houden en te onderhouden. Als jij denkt niet lang bezig te zijn om dit in zijn geheel op te zetten een kast bij de hand hebt waar alles in kan en geen eisen stelt aan bvb hotswap, grantie en support dan zou ik zeggen lekker zelfbouw. Als jij een professionele oplossing wilt hebben zou ik zeggen ga voor een Qnap of een synology configuratie.

[atze]

misschien is een raid10 een oplossing?

[chr1st14n]

Shunt schreef op maandag 12 december 2011 @ 10:42:
[...]

Sowieso software raid5 is performance killer. Maar dan gelden de punten alsnog hoe lang ben je bezig met deze oplossing in uren hoe lang denk je dat je nodig gaat hebben in de tijd dat het draait om het draaiende te houden en te onderhouden. Als jij denkt niet lang bezig te zijn om dit in zijn geheel op te zetten een kast bij de hand hebt waar alles in kan en geen eisen stelt aan bvb hotswap, grantie en support dan zou ik zeggen lekker zelfbouw. Als jij een professionele oplossing wilt hebben zou ik zeggen ga voor een Qnap of een synology configuratie.

Hotswap is niet nodig (zien hier nog geen meerwaarde in)

Ons idee was om een Chenbro RM42300 kast te halen, hier 2x (bv) een Coolermaster 4in3 module erin (hebben we er nog 1 van staan) en dan het setje met de e6600 erin met wat extra satacontroller. maar omdat ik de preformance niet zichtbaar zag veranderen, twijfelde ik of er misschien een HWraidcontroller is moets.

[chr1st14n]

atze schreef op maandag 12 december 2011 @ 10:43:
misschien is een raid10 een oplossing?

Hebben we dan niet nog meer verlies?

Raid 10 is toch 2 Raid0 array's die een kopie van elkaar draaien?? (of zie ik het verkeert). want dan houden we effectief maar 4tb over volgens mij

[Verwijderd]

Heb je al ZFS overwogen met L2ARC en SLOG? Zal voor random I/O toch erg snel zijn. Valt goed te overwegen als FreeBSD of Solaris geen onbegaanbare weg is en zeker als de machine alleen of hoofdzakelijk voor storage dient. Daarnaast ook betrouwbaarder dan traditioneel RAID, want integriteit wil je wel hebben voor VM images lijkt mij.

[chr1st14n]

Ik heb momenteel FreeNAS erop staan en de SWraid array's zijn ZFS. maar wat is L2ARC en SLOG?? kan er zo snel niet iets voer vinden (en heb het ook niet gezien tijdens het instellen van de array's)

[Verwijderd]

L2ARC = cache en zal de random read performance van een (HDD) pool flink verbeteren. Dit kun je vergelijken met SRT (Smart Response Technology) onder Windows platform, maar dan beter

SLOG = buffer en zal de random write performance verbeteren waarbij BIO_FLUSH commando's voorkomen (sync writes). Dat zal voornamelijk zijn bij databases en ook VM images. Dus voor jou ook geschikt denk ik.

Je kunt bijvoorbeeld 4 SSDs in RAID0 gebruiken voor zowel L2ARC als SLOG. De SLOG kun je ook mirroren voor extra zekerheid. Je pool moet wel versie 19 of hoger zijn als je SLOG wilt gebruiken. FreeNAS gebruikt denk ik nog een oude versie. Je kunt FreeBSD 8-STABLE of 9.0-RC3 overwegen. De 9.0 final komt deze maand uit.