Ik ben het bijna eens met @
LiquidSmoke. Bijna, want ik zou d'r geen RAIDZ2 van maken wegens traag maar juist gaan voor striped mirrors (RAID10 equivalent). Striped mirrors zijn veel sneller dan RAIDZ en je rebuild times zijn korter. Met striped mirrors kan het wel eens zijn dat je je SLOG en L2ARC's niet nodig hebt.
Also, voor FreeNAS heb je een aparte disk nodig waar je je OS op zet. Omdat NVMe extreem overkill is voor je OS zou ik het anders doen:
- NVMe d'r uit, die lekker op een plek inzetten die nuttiger is (duw 'm in je PC, daar komt 'ie meer tot zijn recht dan in een NAS, tenzij je 'm idd voor L2ARC in zet maar da's waarschijnlijk niet nodig)
- 2x500G voor SLOG/L2ARC reserveren (2 partities, 1x mirrored voor je SLOG, 1x striped voor je L2ARC) al is dat ook behoorlijk overkill (niet qua SSD, wel qua capaciteit)
- FreeNAS op een SD kaart of USB stick zetten (of liever nog op een SSD of HDD, OSsen op een SD kaart of USB stick is wat iffy, het werkt, ze zeggen dat het kan maar pffff die dingen lijken niet echt gemaakt voor een OS installatie, zelfs niet voor FreeNAS)
Let er op dat je dus je SLOG op een mirror zet, nooit op een stripe.
Je L2ARC mag wel weer op een stripe of een enkele disk.
Qua aanbieden aan VMWare: NFS
iSCSI kan maar heeft voor zover ik weet geen of nauwelijks voordelen. NFS is redelijk hufter-proof.
Denk je er aan dat je die kaart in IT mode flashed als 'ie dat niet al heeft? De keuze voor een IT-mode kaart is een goede, je wil ZFS absoluut niet op een RAID controller met RAID functionaliteit zetten. Domme SAS/SATA disk controllers of een IT-mode kaart zijn de enige goede manier.
Nu heeft die kaart dat al. Let wel op de juiste firmware. Wij hebben gezien dat er een paar firmware versies zijn die corruptie veroorzaken. Niets dat ZFS niet kan oplossen maar het is erg akelig om bij iedere scrub -tig fouten te zien die *enkel* geen invloed hebben omdat ZFS het corrigeert. In geval van die specifieke kaart: De laatste firmware is niet altijd de beste. Google dus heel erg goed op de firmware die er op zit of je wilt installeren of die wel goed is. (Ik weet uit mijn hoofd even niet welke firmware versie wij nu hebben en dat probleem niet heeft maar het is precies dat probleem waar wij tegenaan zijn gelopen.)
Oh, 10Ge is leuk, maar heb je d'r ook reguliere GBit NIC's in zitten? Kan me voorstellen dat je niet alleen met enkele 10G verbindingen wilt spelen (wat hoe dan ook extreem overkill is) maar juist met bonding/etherchannels over meerdere gestackte switches. Dus in dat geval zou ik daar ook even naar kijken. Wil je met zulke hardware een leuk lab bouwen, bouw dat niet op 1 enkele switch maar zorg voor een stack of speel op zijn minst met bonding op meerdere interfaces. Idealiter zelfs meerdere switches die je aan elkaar knoopt, waarbij je je storage loskoppelt van de rest. Dat maakt een veel realistischer lab dan enkel 2 ESXi dozen aan een NAS.
Oh, qua geheugen:
Prik minstens de helft van het geheugen van je storagedoos over in de ESX dozen. Daar heb je d'r veel meer aan. 128G in een NAS is voor jouw setup meer dan overkill en zonde van je geheugen. Dat kun je beter inzetten in je ESX kisten. Voor FreeNAS heb je aan 16-32G echt meer dan zat. (Maar goed, die heel doos is ehm, overkill voor wat je er mee gaat doen.)
Dat gezegd hebbende, kun je niet beter een 3e machine aanschaffen als NAS met een veel kleinere CPU, minder geheugen en dezelfde drivebays, zodat je 3 machines in je cluster hebt? Een 3-node cluster werkt wezenlijk anders dan een 2-node cluster en wil je je op VMWare certificeren, zou ik je vooral daar op richten. Nu verspil je resources in je storagemachine die aan de VMWare kant veel nuttiger zijn om in te zetten.
BTW Ik ben stiekem wel een beetje jaloers dat je voor een prikkie aan Gen8's (niet G8, die bestaat niet) bent weten te komen. Dat soort machines draaien bij ons productie. (En zijn we van plan niet veel eerder dan over 2, 3, misschien 4 jaar eens af te schrijven.)
Ná Scaoll. - Don’t Panic.
:strip_icc():strip_exif()/u/25152/60x60_1.jpg?f=community)
