Advies MKB storageserver

[ther]

Hoi allemaal,

We zijn hier aan het kijken voor een goede storage oplossing. Deze moet zo goedkoop mogelijk zijn, schaalbaar en high available. Daarom zat ik te denken aan GlusterFS, omdat hier later servers aan toegevoegd kunnen worden. Graag zou ik wat advies willen over de aankoop van server(s) hiervoor. We willen voor nu een HA opstelling met 2 servers, en genoeg HDD-bays voor de toekomst.

De storage zal vooral gebruikt worden als fileserver met zowel kleine(paar MB) als grote files (tot 100GB+). Schrijfsnelheid is dus wel vereist maar een constante high performance is overbodig.

Om het een beetje betaalbaar te houden zit ik te denken aan een DIY server met de volgende specs:

• Behuizing: Supermicro CSE-847E16-R1K28LPB(als het goed is zit er een voeding bij)
• Mobo: Supermicro X10SRL-F
• CPU: Intel Xeon E5-1620 v4
• Geheugen: Kingston ValueRAM 32GB DDR4
• HDDs: Seagate Enterprise capacity 8TB 7200rpm

Vragen:

• Iemand ervaring met GlusterFS en of deze hardware goed is of overkill?
• Hoe zit het met de connectie van de HDD backplane naar het mobo. Weet iemand hoe dit precies zit en of ik hier een extra RAID controller voor nodig heb? Tot nu toe alleen met pre-build servers gewerkt. Waarschijnlijk gaan we RAID 10 gebruiken.
• Heb ik eventueel iets gemist?
• Iemand nog suggesties (anders dan externe HDDs/tape) voor nog een idee voor off-site backup van grote files met maar een 40MB/s upload?

Ik heb hier gekeken voor de specificaties(Red Hat heeft GlusterFS overgenomen).
Bedankt voor de hulp!

[Gunner]

Waarom zou je gaan rommelen met DIY als diverse fabrikanten dit al jaren aanbieden met sterk doorontwikkelde software? Het is nooit aan te bevelen om in een, ook al is het MKB, te gaan werken met DIY.

Wellicht handig om aan te geven wat voor soort MKB het is, om ons een beter beeld te geven van evt behoeftes.

En waarom is HA zo belangrijk?

[ Voor 19% gewijzigd door Gunner op 10-07-2017 19:03 ]

[ther]

Gunner schreef op maandag 10 juli 2017 @ 19:01:
Waarom zou je gaan rommelen met DIY als diverse fabrikanten dit al jaren aanbieden met sterk doorontwikkelde software? Het is nooit aan te bevelen om in een, ook al is het MKB, te gaan werken met DIY.

Omdat als ik zo rond kijk bij bv. HP/Dell dit een stuk duurder is. Of ik kijk helemaal verkeerd?

Gunner schreef op maandag 10 juli 2017 @ 19:01:
Wellicht handig om aan te geven wat voor soort MKB het is, om ons een beter beeld te geven van evt behoeftes.

Gespecialiseerd in het inwinnen van geo/3d-informatie, zoals het inscannen van de spoortrajecten .En dit voorzien van informatie.

Gunner schreef op maandag 10 juli 2017 @ 19:01:
En waarom is HA zo belangrijk?

Denk vooral dat dit bij een DIY belangrijk is omdat je geen ondersteuning hebt.

[The Eagle]

GlusterFS... het is wachten op @Hero of Time
Volgens mij heeft die er nog al wat ervaring mee en lang niet allemaal positief...

[Paul]

Ja, enterprise storage is duurder. Maar daar komt de fabrikant je helpen als het stuk gaat, en staat er binnen 4 uur een mannetje op de stoep met onderdelen en/of expertise.

Even grof gerekend (36 disks, 28 bruikbaar per node, nodes mirroren elkaar) zit je met jouw opstelling op € 150 per TB. Met iets als een EMC Isilon zit je tussen de 500 en 1000 in. Dat scheelt inderdaad nogal.

Maar wat kost het als je zelf-knutsel-werk niet meer werkt? Ik weet niet hoeveel mensen er op zitten te werken maar laten dat er 10 zijn, die volgens het SBC gemiddeld 33 euro per uur kosten. Als het ding er een dag uit ligt kost je dat al richting de 5k aan loonkosten en 15k gemiste inkomsten (klinkt al redelijk specifiek werk...), en als je data kwijt bent ben je nog verder van huis...

[ther]

Paul schreef op maandag 10 juli 2017 @ 19:44:
Ja, enterprise storage is duurder. Maar daar komt de fabrikant je helpen als het stuk gaat, en staat er binnen 4 uur een mannetje op de stoep met onderdelen en/of expertise.

Even grof gerekend (36 disks, 28 bruikbaar per node, nodes mirroren elkaar) zit je met jouw opstelling op € 150 per TB. Met iets als een EMC Isilon zit je tussen de 500 en 1000 in. Dat scheelt inderdaad nogal.

Maar wat kost het als je zelf-knutsel-werk niet meer werkt? Ik weet niet hoeveel mensen er op zitten te werken maar laten dat er 10 zijn, die volgens het SBC gemiddeld 33 euro per uur kosten. Als het ding er een dag uit ligt kost je dat al richting de 5k aan loonkosten en 15k gemiste inkomsten (klinkt al redelijk specifiek werk...), en als je data kwijt bent ben je nog verder van huis...

Het is inderdaad specialistisch werk. Ik heb de punten die jij noemt ook voorgelegd maar ze kiezen toch voor de goedkopere oplossing.

[Vorkie]

ther schreef op maandag 10 juli 2017 @ 20:04:
[...]


Het is inderdaad specialistisch werk. Ik heb de punten die jij noemt ook voorgelegd maar ze kiezen toch voor de goedkopere oplossing.

Dus je wilt iets opleveren en supporten waar jezelf niet achter staat?

Koop dan 2 Synologys... De mkb rack uitvoering. In cluster zetten en replicatie aanzetten. Supported en geen gepruts

https://www.nascenter.nl/category/214448/rackservers.html

Als voorbeeld,

plaats 2x ssd voor read/write cache en je hebt een high performance datastore. Waar je nog 10x8tb disken bij kan zetten. (Voor de 12 bay) die ongeveer net zo duur is als je oplossing uit de topicstart, maar wel ondersteuning van de fabrikant.

https://www.nascenter.nl/...59/synology-rs3617xs.html

Daarbij heb je ook de mogelijkheid deze uit te breiden met een 10Gbit/s kaart en binnen DSM heb je diverse backup mogelijkheden, ook voor clients, zodat je dus ook de eigenwijze gebruikers een folder kan laten back-uppen van de lokale schijf.

/edit5

Je kan ook kijken voor de
https://www.synology.com/en-us/products/DS3617xs
pricewatch: Synology DiskStation DS3617xs

Deze kan je nog uitbreiden naar 36 disks

[ Voor 52% gewijzigd door Vorkie op 10-07-2017 20:40 ]

[ther]

Vorkie schreef op maandag 10 juli 2017 @ 20:22:
[...]

Dus je wilt iets opleveren en supporten waar jezelf niet achter staat?

Koop dan 2 Synologys... De mkb rack uitvoering. In cluster zetten en replicatie aanzetten. Supported en geen gepruts
....

Bedankt voor de info. Maar kan dit ook opgeschaald worden naar meer dan 2? Want het bedrijf groeit redelijk snel en daardoor waren we aan het kijken naar GlusterFS.

[Vorkie]

ther schreef op maandag 10 juli 2017 @ 20:45:
[...]


Bedankt voor de info. Maar kan dit ook opgeschaald worden naar meer dan 2? Want het bedrijf groeit redelijk snel en daardoor waren we aan het kijken naar GlusterFS.

Waarom wil je naar meer als 2 heads? Is 72 disken (die mogelijk zijn) niet voldoende?

Je bent een storage oplossing aan het bedenken voor een virtualization oplossing ipv plain performance dataopslag. (Meer als 2 heads)

Verder zou de zelfbouw vast werken, goed documenteren, testen en van te voren de backups in regelen. Alleen herhaling, support / downtime.

[ Voor 16% gewijzigd door Vorkie op 10-07-2017 20:59 ]

[Gomez12]

In wezen zijn die Synology's uit te breiden naar 2 extensions.

En in wezen als je die vol hebt dan moet je ook voldoende geld binnengehaald hebben om andere storage te kopen

Het probleem met GlusterFS en consorten is dat je er echt heel veel vanaf moet weten wil je het goed kunnen inzetten en als je die kennis hebt dan zou je hier geen topic plaatsen...
GlusterFS en consorten is geen software die off the shelf goed draait, dat moet echt ingericht worden per omgeving anders heb je gewoon rampzalige prestaties.

Zo zet ik eigenlijk al direct mijn vraagtekens bij 2 servers, dat is een ietwat aparte setup voor wat jij wilt bereiken. Als 1 van die 2 uitvalt heb je echt gigantische problemen en major headaches.
Normaliter wil je simpelweg meer servers hebben zodat er meer data beschikbaar is voor het cluster om beslissingen mee te nemen. Heb je 100 servers en valt er 1 uit, dan weten ongeveer 24 andere servers wel hoe die ene opgebouwd moet worden. Heb je er 2 dan moet je maar hopen dat die andere het weet.

En tja, je zegt dat je HA wilt. Maar wederom? Waarom dan maar 2 servers? Hoe wil je die gaan patchen? Of is HA geen verplichting tijdens de patch-windows?

Als ik heel eerlijk ben zou ik nog niet eens een standaard storage solution pakken, maar in jouw geval eerder een bedrijf inschakelen wat je helpt bij het opzetten van een fatsoenlijke storage solution.

[ther]

Gomez12 schreef op maandag 10 juli 2017 @ 21:10:
In wezen zijn die Synology's uit te breiden naar 2 extensions.

En in wezen als je die vol hebt dan moet je ook voldoende geld binnengehaald hebben om andere storage te kopen

Het probleem met GlusterFS en consorten is dat je er echt heel veel vanaf moet weten wil je het goed kunnen inzetten en als je die kennis hebt dan zou je hier geen topic plaatsen...

Ik heb glusterfs al wel virtueel met 2 servers werkend gekregen. Maar wist niet zeker wat voor hardware te kiezen daarvoor was dit topic eigenlijk bedoeld. Maar toen kwam iedereen met andere ideeën dus misschien maar een andere oplossing overwegen

[Vorkie]

ther schreef op maandag 10 juli 2017 @ 21:25:
[...]


Ik heb glusterfs al wel virtueel met 2 servers werkend gekregen. Maar wist niet zeker wat voor hardware te kiezen daarvoor was dit topic eigenlijk bedoeld. Maar toen kwam iedereen met andere ideeën dus misschien maar een andere oplossing overwegen

Het is niet dat het niet kan werken, het is vooral "gevaarlijk" te gaan prutsen

Je werkgever wilt misschien niet veel er aan uit geven, maar wie is de sjaak als de omgeving plat gaat en alle data verloren of je bent nog 2 weken aan het restoren? Jij en je collega hebben dit neergezet als zijnde, dit is het, dit werkt en super stabiel! Werkgever denkt, top! die weten waar ze over praten, tot puntje bij paaltje komt (werkgevers hebben vaak geen kennis van dit soort zaken, die zijn gauw enthousiast als het weinig kost en beheer ook, tot er dus echt iets gebeurt en het niet zo rooskleurig lijkt)

[DukeBox]

Gomez12 schreef op maandag 10 juli 2017 @ 21:10:
In wezen zijn die Synology's uit te breiden naar 2 extensions.

Tot 16 met CIFS Scale Out Cluster

[Jazzy]

ther schreef op maandag 10 juli 2017 @ 18:56:
Deze moet zo goedkoop mogelijk zijn, [...] en high available.

Welke van de twee wordt het? Goedkoop of hoog beschikbaar?

[ther]

Iedereen bedankt voor de hulp en suggesties ik ga morgen nog een keer goed overleggen.

[Gomez12]

Ik zou dan wel serieus overwegen om gewoon een adviseur hierbij te betrekken...

Real-life een HA-iets opzetten met ook nog eens iets als GlusterFS erop is bij lange na niet hetzelfde als 2 virtuele servers werkend krijgen met GlusterFS.

2 servers (virtueel of niet) past simpelweg al niet bij HA en ook niet bij GlusterFS, dus ik heb het vermoeden dat je momenteel eigenlijk alleen maar voor goedkoop gaat en dat je de rest van de opties uit het oog verloren bent.
Daarom zou ik je adviseren om gewoon iemand met expertise erbij te betrekken die je kan uitleggen wat HA inhoud (qua kosten en qua voor-/nadelen).

[xleeuwx]

Mijn advies zou zijn inderdaad een bedrijf inschakelen die dit soort dingen voor hun werk doen, je kan hier dus verschillend services voor vragen:

- hulp bij het opzetten van de storage omgeving
- Advies bij het juist inelkaar zetten van de storage omgeving
- Support en opleveren van de storage omgeving

elke service komt me ze prijskaartje maar je kan altijd eerst een offerte aanvragen bij dit soort bedrijven.

Mocht je toch zoiets hebben van leuk maar gaat het lekker zelf doen.... Dan zou ik eerst ook even dit artikel van Tweakers zelf lezen: plan: Nieuwe centrale opslag - development-iteratie #104

Persoonlijk ben ik best fan van Ceph en ik zou dan eerder 8 tweedehands servers kopen (hdd/ssd nieuw) als een self bouw oplossing.

[unezra]

@ther
Doe jezelf en je werkgever een lol en gebruik dit Tweakers topic om zelf een goed beeld te vormen, maar gespecialiseerde bedrijven om een oplossing aan te dragen en het management te overtuigen.

De argumenten die jij niet kunt verzinnen om het MT te overtuigen, kunnen de sales mensen van dat soort partijen vaak wel, die hebben dagelijks met dat bijltje te hakken.

Kortom, nodig wat partijen uit, praat er mee, leg diverse oplossingen naast elkaar en schrijf DAN een advies aan het MT. Alles dat je nu halsoverkop aanschaft gaat vroeger of later teleurstellingen bij jou en je MT opleveren.

[Gomez12]

xleeuwx schreef op maandag 10 juli 2017 @ 23:11:
Mocht je toch zoiets hebben van leuk maar gaat het lekker zelf doen.... Dan zou ik eerst ook even dit artikel van Tweakers zelf lezen: plan: Nieuwe centrale opslag - development-iteratie #104

Waarbij ik de nadruk wil leggen op het volgende gedeelte :
In de afgelopen maanden hebben we samen met 42on dit Ceph-cluster ontworpen en opgezet.

Oftewel het was een traject van maanden en dat is met een partner erbij.

Andere leuke dingen om jezelf af te vragen nav dat artikel zijn :
- Waarom is alles 3x opgeslagen?
- Waarom gooien ze maar 6 Disken per storage node erin?
- Waarom zijn de monitors al de helft van de storage nodes?

[Verwijderd]

@ther Fijn project. Zou bv HP echt zoveel duurder uitkomen denk je? Een MSA 2052 of iets dergelijks komt niet in aanmerking of vergis ik mij? Ik denk voor een klant namelijk over hetzelfde vraagstuk en zweef een beetje tussen Synology , DIY en HP....

[Dennism]

Verwijderd schreef op dinsdag 11 juli 2017 @ 15:26:
@ther Fijn project. Zou bv HP echt zoveel duurder uitkomen denk je? Een MSA 2052 of iets dergelijks komt niet in aanmerking of vergis ik mij? Ik denk voor een klant namelijk over hetzelfde vraagstuk en zweef een beetje tussen Synology , DIY en HP....

Tja, wat is duurder. Als je puur en alleen aanschaf bekijkt zal een (Enterprise) oplossing van een grote OEM zeker duurder zijn. Echter voor projecten als dit kun je beter kijken naar de TCO over de gewenste gebruiksperiode (in de regel vaak 5 jaar bij MKB). Zodat je ook zaken kan meenemen als wat kost het over die 5 jaar om de boel te supporten (draaiende te houden, heb jij bijv. bij complexe problemen daar de kennis voor, of moet je dan terugvallen op een 3de partij die misschien enkel best effort support levert, hoeveel uren heb je nodig voor het standaard beheer). Maar ook zaken als kun je een DIY oplossing bij een calamiteit binnen de gewenste tijd door het management weer online krijgen. Wat kost downtime, wat is de kans op downtime tijdens de levensduur.

Maar denk ook bijv. aan hoe vlieg je een project aan met bijv. zelfbouw, hoe ga je van te voren testen of de oplossing voldoet qua schaalbaarheid, performance eisen, uptime eisen van de klant. Op papier kan een zelfbouw systeem bijv. perfect werken, koop je een berg hardware, ga je het bouwen en implementeren bij de klant en ineens performt het bijv. voor geen meter. Project gaat hierdoor buiten budget of de klant ziet volledig af van de oplossing omdat je de beloofde performance of schaalbaarheid niet kan leveren. Ligt dit risico nu bij jou, leg je dit bij de klant neer. Ergo, probeer alleen zaken te verkopen waar je zeker van bent (ruime ervaring mee hebt), zelf voldoende kennis van in huis hebt en waar je zelf volledig achter staat. Is storage niet je ding, doe dan een storage project bijv. met een partner die gespecialiseerd is in dat soort zaken. Kost je misschien wat marge, maar kan ook een boel problemen voorkomen.

[ Voor 5% gewijzigd door Dennism op 12-07-2017 01:32 ]

[ther]

Verwijderd schreef op dinsdag 11 juli 2017 @ 15:26:
@ther Fijn project. Zou bv HP echt zoveel duurder uitkomen denk je? Een MSA 2052 of iets dergelijks komt niet in aanmerking of vergis ik mij? Ik denk voor een klant namelijk over hetzelfde vraagstuk en zweef een beetje tussen Synology , DIY en HP....

Aangezien een DIY hier (terecht) zo hard wordt afgeraden, kiezen we waarschijnlijk toch voor de Synology oplossing van @ThaNetRunner. De RS3617XS die tot 36 disks uitgebreid kan worden. Ook makkelijk in combinatie met de Synology NAS die we al hebben en voor een deel kunnen gebruiken voor een off-site back-up.

[Sander]

Kun je ook eens aangeven wat je onder HA verstaat? Want het klinkt alsof dit een lokale oplossing is die op kantoor komt te draaien, werken er dan ook klanten met de data of is het puur voor intern?

En is in dit geval een echte HA oplossing nodig, of is het ook acceptabel als er bijv dezelfde dag een oplossing is? En als de oplossing HA is, zijn er dan ook 2 aparte power feeds / UPS feed in het pand, aparte netwerk paden etc? Je storage kan wel HA zijn, maar als er maar 1 switch en 1 router voor hangen ben je nog steeds snel klaar.

Dit zijn de vragen die je eerst moet stellen en beantwoord krijgen van management voor je überhaupt naar tech gaat kijken. Met name het stukje "HA" kan heel veel betekenen voor verschillende mensen en situaties, en ook heel veel meer of minder kosten.

[unezra]

ther schreef op woensdag 12 juli 2017 @ 08:26:
[...]
Aangezien een DIY hier (terecht) zo hard wordt afgeraden, kiezen we waarschijnlijk toch voor de Synology oplossing van @ThaNetRunner. De RS3617XS die tot 36 disks uitgebreid kan worden. Ook makkelijk in combinatie met de Synology NAS die we al hebben en voor een deel kunnen gebruiken voor een off-site back-up.

Ik vind dat je daar een paar slagen over slaat.
De requirements zijn amper bekend en je beslist op basis van 1 enkel advies dat je gaat voor een Synology.

Er zijn ontzettend veel smaken storage te krijgen, van een paar honderd EUR tot een paar honderd duizend EUR en duurder.

Waar je moet beginnen is bij de vraag "wat verwacht de organisatie" en pas later "wat mag het kosten" omdat niet zelden een hogere aanschafprijs, gerechtvaardigd kan worden door een lagere TCO. Je hebt daar (onder andere) te maken met wat het per uur kost als een organisatie plat ligt. Die kosten moet je meenemen in je berekening welke oplossing de beste is.

Op basis van wat je nu aan geeft en hier geschreven is, kan ik absoluut niet bepalen of je goed af bent met zelfbouw, met een Synology of QNAP van een paar honderd EUR of dat je beter naar NetApp of andere enterprise oplossingen kunt kijken die een veelvoud van dat bedrag kosten.

Nu zomaar op basis van de weinige informatie die wij hebben en 1 enkel concreet advies van iemand hardware aanschaffen is, vind ik, een ontzettend slecht idee en moet je niet willen. Vroeg of laat gaat dat een teleurstelling opleveren.

Als je als ICT er aan de adviserende kant zit en niet precies weet wat je moet aanschaffen, moet je met partijen gaan praten die er verstand van hebben.

Zoals gezegd, nodig wat partijen uit, praat er mee, praat met het MT en vraag wat zij verwachten van storage en bovenal, neem de tijd. Schaf niet deze week nog een doosje aan maar maak er een zinvol project van en schaf pas dan aan wanneer je enig gevoel hebt dat hetgeen je aan gaat schaffen, daadwerkelijk de juiste oplossing voor jullie probleem is.

[Dennism]

ther schreef op woensdag 12 juli 2017 @ 08:26:
[...]


Aangezien een DIY hier (terecht) zo hard wordt afgeraden, kiezen we waarschijnlijk toch voor de Synology oplossing van @ThaNetRunner. De RS3617XS die tot 36 disks uitgebreid kan worden. Ook makkelijk in combinatie met de Synology NAS die we al hebben en voor een deel kunnen gebruiken voor een off-site back-up.

Ik ben van mening dat Unezra een sterk punt heeft. Zomaar hardware aanschaffen is in de regel niet de oplossing, zeker niet bij storage.

Nu weet ik niet wat jou functie is, ben je bijv. fulltime ITér of iemand die de IT er een beetje bij doet vanuit interesse. Ik meen in ieder geval op te maken uit je post dat het om een interne functie gaat bij dit bedrijf.

Ik mis in je post bijv. ook het voorwerk.

Wat is de capaciteit en performance die de huidige storage kan leveren qua iops binnen jullie gebruikspatroon, waarom voldoet de huidige oplossing niet meer, is dit puur capaciteit, of ook performance.
Als je niet weet wat je nu hebt, is het zeer lastig vaststellen of oplossing X van leverancier Y wel gaat voldoen en blijft voldoen over de verwacht levensduur van de oplossing binnen het bedrijf.

Kijk verder eerst naar wat het management wil:

1. Eisen performance
2. Eisen capaciteit
3. Eisen Uptime
4. Eisen RTO bij een calamiteit
5. Periode dat de oplossing mee moet gaan voor zijn primaire doel.
6. Eisen gesteld aan de backup oplossing die deze storage moet gaan backuppen (kans is mogelijk aanwezig dat de oude backup oplossing mogelijk niet meer zal voldoen).

Al deze zaken hebben een kosten plaatje binnen de TCO berekening over de levensduur van de oplossing. Kijk verder ook naar het budget wat het Management wil toewijzen.

Uit enerzijds de eisen van het management en anderzijds het budget kan namelijk best blijken dat of de eisen te hoog zijn, of het budget te laag om elkaar te kunnen matchen met een oplossing. Is dit het geval zal het management of moeten strepen in de eisen, of het budget moeten verhogen.

Bij zomaar wat hardware kopen is de kans op een teleurstelling zeer groot aanwezig, en achteraf lastig op te lossen zonder extra budget tegen de oplossing aan te gooien. Iets waar Management in de regel niet vrolijk van wordt.

Ik zou zeker aanraden ga eerst inventariseren wat je nu hebt qua capaciteit en performance (als je dit nog niet gedaan hebt).

Ga daarna exact uitzoeken wat de wensen en eisen van het management zijn, met eventueel een richtbudget. Ga daarna met jullie IT partner (of meerdere) om tafel om te kijken of dit gematched kan worden (ik zou een of meerdere partners raadplegen ten zeerste aanraden, doe dit alleen helemaal zelf als je echt expertise hebt op dit gebied). Kunnen ze dit matchen leg de aangedragen oplossingen voor aan het management, kunnen ze dit niet matchen laat Management het budget of de eisen / wensen bijstellen. Voor een dubbeltje op de eerste rang kunnen zitten gaat namelijk in de regel bij storage niet op.

Goedkoop, performant, betrouwbaar zijn zaken die bij storage in de regel niet samen gaan.

[ther]

Dankjewel voor de reacties, ik zal een aantal zaken even verder toelichten. Want ik ben inderdaad niet duidelijk geweest.

Ik ben zelf net afgestudeerd. Ze hebben mij gevraagd de IT-infrastructuur hier beter te regelen en daarvan is de storage 1 van de onderdelen. Ik werk hier maar tijdelijk er is ook geen dedicated IT personeel. Iemand hier doet het als hobby en een ander die wel system- en netwerkbeheer ervaring heeft maar het druk genoeg heeft met andere werkzaamheden. Eventueel willen ze bij de verdere groei van het bedrijf iemand full time aannemen. En eventueel tot die tijd ondersteuning van een IT partner.

Momenteel is de hele infrastructuur onoverzichtelijk en niet goed geregeld. De huidige situatie bestaat uit meerdere (2/4 disk) Synology NASen (is dit juist als meervoud? ). 2 NASen op kantoor en 1 off-site waar belangrijke 'kleine' data naar geback-upt wordt. De 'grote' data wordt na afronding van een project van de NAS afgehaald en op externe HDDs gearchiveerd(niet redundant). De huidige totale opslag ligt rond de 45TB. Waarvan het grootste deel gearchiveerd is. Het is dus vooral de capaciteit die nu niet voldoet. Een deel van het werk vereist veel performance en daarvoor hebben ze een aantal high performance werkstations. Het meeste werk wordt dus lokaal gedaan en vervolgens naar de netwerkstorage gekopieerd. Dus in de meeste situaties is het netwerk de bottleneck. De uploadsnelheid is maar 40MB/s (hoger is hier niet mogelijk) waardoor het onmogelijk is meer dan de kleine bestanden off-site over het netwerk te back-uppen.

Ze zijn tevreden over de huidige performance van de storage alleen komen ze vooral capaciteit te kort. HA was vooral een vraagstuk om de uitval van het systeem op te vangen zodat er tijd is om deze te vervangen, en dan er in ieder geval intern doorgewerkt kan worden. En inderdaad hiervoor moeten netwerkcomponenten ook nog redundant gerealiseerd worden. Een snelle ruwe berekening: de kosten kunnen op een drukke dag oplopen tot +-€700 per uur.

Het gaat dus om een opslagsysteem dat alleen voor intern gebruik bedoeld is, en vooral on-site gebruikt wordt. Daarnaast uploaden de buitenwerkers via VPN ook data op de storage.

Aangezien ze over de performance wel tevreden zijn. Weet ik niet of andere partijen kunnen concurreren met een Synology systeem. Maar er is natuurlijk maar 1 manier om daar achter te komen...

Hopelijk is het nu duidelijker.

[unezra]

ther schreef op woensdag 12 juli 2017 @ 11:41:
Ik ben zelf net afgestudeerd. Ze hebben mij gevraagd de IT-infrastructuur hier beter te regelen en daarvan is de storage 1 van de onderdelen. Ik werk hier maar tijdelijk er is ook geen dedicated IT personeel. Iemand hier doet het als hobby en een ander die wel system- en netwerkbeheer ervaring heeft maar het druk genoeg heeft met andere werkzaamheden. Eventueel willen ze bij de verdere groei van het bedrijf iemand full time aannemen. En eventueel tot die tijd ondersteuning van een IT partner.

Even kort door de bocht: Ik denk dat ze er goed aan doe NU een ICT partner in de arm te nemen met een brede kennis. Als jij maar tijdelijk daar werkt, zie ik een schone taak voor jou om die partner uit te zoeken en samen met die partner de ICT infra meerjarig te verbeteren. Ga jij daar weg, neemt de partner het over.

Ik heb nog wel wat namen als je interesse hebt.

Momenteel is de hele infrastructuur onoverzichtelijk en niet goed geregeld. De huidige situatie bestaat uit meerdere (2/4 disk) Synology NASen (is dit juist als meervoud? ). 2 NASen op kantoor en 1 off-site waar belangrijke 'kleine' data naar geback-upt wordt. De 'grote' data wordt na afronding van een project van de NAS afgehaald en op externe HDDs gearchiveerd(niet redundant). De huidige totale opslag ligt rond de 45TB. Waarvan het grootste deel gearchiveerd is. Het is dus vooral de capaciteit die nu niet voldoet. Een deel van het werk vereist veel performance en daarvoor hebben ze een aantal high performance werkstations. Het meeste werk wordt dus lokaal gedaan en vervolgens naar de netwerkstorage gekopieerd. Dus in de meeste situaties is het netwerk de bottleneck. De uploadsnelheid is maar 40MB/s (hoger is hier niet mogelijk) waardoor het onmogelijk is meer dan de kleine bestanden off-site over het netwerk te back-uppen.

Snelheden van 1GBit/s en 10GBit/s over grotere afstanden is geen enkel probleem en het enige dat je daarvoor hoeft te doen is investeren in de juiste infrastructuur. Dat hoeft helemaal niet zo duur te zijn. Wij betalen bijvoorbeeld voor de directe, 1GBit/s lijn met ons nieuwe DC maar een paar honderd EUR per maand. (De catch is wel dat we daar ook rackspace afnemen. Zonder dat is het duurder.)

Maar daar zie ik dus ook nog wel een verbeterpunt. "Het netwerk is de bottleneck", is geen technische beperking van "het netwerk", hooguit van jullie huidige inrichting. (Verbindingen van 1GBit/s en 10GBit/s zijn letterlijk overal in Nederland leverbaar.)

Ze zijn tevreden over de huidige performance van de storage alleen komen ze vooral capaciteit te kort. HA was vooral een vraagstuk om de uitval van het systeem op te vangen zodat er tijd is om deze te vervangen, en dan er in ieder geval intern doorgewerkt kan worden. En inderdaad hiervoor moeten netwerkcomponenten ook nog redundant gerealiseerd worden. Een snelle ruwe berekening: de kosten kunnen op een drukke dag oplopen tot +-€700 per uur.

Dus als je door een goede storing er 1 dag uit ligt, heb je 5600 EUR verbrand. Is daarin ook arbeidsloon, etc, meegerekend?

Helemaal geen redundancy op je netwerk is vragen om problemen. Wellicht zinvol om een netwerk architect eens naar je netwerk te laten kijken? (Ook daar, wil je namen, stuur me ff een PM.)

Het gaat dus om een opslagsysteem dat alleen voor intern gebruik bedoeld is, en vooral on-site gebruikt wordt. Daarnaast uploaden de buitenwerkers via VPN ook data op de storage.

Aangezien ze over de performance wel tevreden zijn. Weet ik niet of andere partijen kunnen concurreren met een Synology systeem. Maar er is natuurlijk maar 1 manier om daar achter te komen...

Er zijn zat andere oplossingen die op diverse manieren kunnen concurreren met Synology. Het is maar net op welk vlak je vind dat ze concurrerend moeten zijn. Bij NetApp is een van de dingen waarop ze concurrerend zijn, dat als er een disk uit valt, je in principe automatisch (!) een nieuwe disk toegestuurd krijgt, desgewenst met een engineer om 'm te plaatsen. Zonder residential ICTer kan dat heel fijn zijn. Engineer loopt naar de machine, trekt de kapotte disk er uit, duwt er een nieuwe in en *tadaa*, zonder downtime een nieuwe disk in je systeem.

Qua performance, IX Systems levert heel mooie ZFS-based (FreeNAS) oplossingen. Qua snelheid en dataveiligheid zullen die vrijwel zeker iedere willekeurige Synology of QNAP outperformen.

Zo zijn er nog -tig oplossingen te bedenken die zeker op vlakken kunnen concurreren met Synology en je wilt pas hardware aanschaffen als je de belangrijkste oplossingen naast elkaar hebt gelegd.

Hopelijk is het nu duidelijker.

Iets.
Maar het is me ook opnieuw duidelijk dat je hier 1 ding aan je baas moet adviseren: Ga praten met externe partijen en laat niet het volledige advies door jou uitvoeren.

Ik doe dat ook. Een van mijn rollen is mijn werkgever adviseren op ICT vlak. (Letterlijk alles waar een stekker aan zit moet ik iets van vinden.) Omdat ik ook niet alles weet, maak ik daarvan veelvuldig gebruik van externe partijen. Zij adviseren mij, op basis van hun adviezen en mijn persoonlijke expertise adviseer ik het MT weer. (Of schaf ik domweg hard- en software aan. Het advies is in mijn geval behoorlijk hoog-over, welke apparatuur ik exact in zet zal ze een zorg zijn, zolang ik de beloofde verbeteringen maar haal en binnen budget blijf.)

[ther]

Ten eerst bedankt voor de tijd die je in je posts steekt .

unezra schreef op woensdag 12 juli 2017 @ 13:39:
[...]

Snelheden van 1GBit/s en 10GBit/s over grotere afstanden is geen enkel probleem en het enige dat je daarvoor hoeft te doen is investeren in de juiste infrastructuur. Dat hoeft helemaal niet zo duur te zijn. Wij betalen bijvoorbeeld voor de directe, 1GBit/s lijn met ons nieuwe DC maar een paar honderd EUR per maand. (De catch is wel dat we daar ook rackspace afnemen. Zonder dat is het duurder.)

Maar daar zie ik dus ook nog wel een verbeterpunt. "Het netwerk is de bottleneck", is geen technische beperking van "het netwerk", hooguit van jullie huidige inrichting. (Verbindingen van 1GBit/s en 10GBit/s zijn letterlijk overal in Nederland leverbaar.)

Er is geïnformeerd naar een glasvezel aansluiting maar het MT heeft besloten dat zij dat voor nu te duur vinden. Maar misschien is een directe verbinding naar een DC inderdaad een optie voor de toekomst. Niet helemaal goed geformuleerd denk ik, maar ik bedoelde inderdaad dat het huidige netwerk de bottleneck is.

unezra schreef op woensdag 12 juli 2017 @ 13:39:
[...]
Dus als je door een goede storing er 1 dag uit ligt, heb je 5600 EUR verbrand. Is daarin ook arbeidsloon, etc, meegerekend?

Helemaal geen redundancy op je netwerk is vragen om problemen. Wellicht zinvol om een netwerk architect eens naar je netwerk te laten kijken? (Ook daar, wil je namen, stuur me ff een PM.)

Dit is voor het eerst dat ze naar de infrastructuur laten kijken. Hiervoor was het meer: 'we hebben dit nodig, dus schaffen we dit aan'. Dus is het nu aan mij om problemen en beperkingen van de infrastructuur aan het licht te brengen. En vervolgens geleidelijk de verbeteringen te realiseren. En omdat ik (naast stages en bijbaantjes) nog niet heel ervaren ben zal ik hier inderdaad wel partners voor nodig hebben.

unezra schreef op woensdag 12 juli 2017 @ 13:39:
[...]
Iets.
Maar het is me ook opnieuw duidelijk dat je hier 1 ding aan je baas moet adviseren: Ga praten met externe partijen en laat niet het volledige advies door jou uitvoeren.

Ik heb het inschakelen van externe partijen geadviseerd dus het is nu afwachten op een beslissing.

[The Eagle]

Wijze les voor je carriere: als je ergens zelf geen kaas van gegeten hebt, niet gaan lopen klooien maar eeb specialist inschakelen. Aan data hangt een prijs. Aan dataverlies nog veel meer.

[bigfoot1942]

Volgens mij moet je, als knutselen het niveau is waarop ze nog willen werken, knutselen met 'meer van hetzelfde' verkiezen boven knutselen met iets nieuws. Helemaal als het huidige goed bevalt en ze in principe alleen meer daarvan willen.

Een overstap is een risico (geen ervaring). Een overstap betekend een uitbreiding van de omgeving qua beheer (oude omgeving blijft staan, toch? Dit is geen vervangingstraject?)

Een uitbreiding kan je makkelijker rechtvaardigen voor de korte termijn.

Voor de lange termijn zou ik het proberen op te trekken naar een hoger niveau, eerst met een bezem door het netwerk heen (goede switching), daarna 1 centrale storage neerhangen welke synchroon of asynchroon repliceert (afhankelijk van de wensen en eisen).

[ Voor 23% gewijzigd door bigfoot1942 op 15-07-2017 17:35 ]

[FiXeR.nl]

Niet zelf knutselen, maar gewoon een MSA of Compellent o.d. aanschaffen en deze laten installeren door een specialist. Ga ik nooit uit van List Prices maar doe gewoon een aanvraag bij een professionele reseller zoals Bechtle of Infotheek ofzo. Dan gaat er nog heel wat van de prijs af én krijg je een gedegen advies.