Zuinige ESXi Server

[FireDrunk]

@Nick1996 Heb je een linkje naar het systeem?

[ Voor 15% gewijzigd door FireDrunk op 17-06-2017 08:34 ]

[unezra]

Nick1996 schreef op zaterdag 17 juni 2017 @ 08:18:
Beste tweakers,

Ik heb een vraag. Ik wil een esxi server bouwen of kopen voor mijn hobby en voor school. Ik ga in september een opleiding doen als ICT-Beheerder. Ik zag een Dell Precission T1600 te koop staan bij iemand en ik dacht dat dat wel een goeie optie was voor een esxi server.

Is dit een goed idee of kan ik maar beter verder kijken?

Deze vraag heb je gisteren ook al hier gesteld:
unezra in "Het grote zuinige server topic - deel 2"

[Volture]

Ik heb vorig jaar deze setup gekocht:

#	Product	Prijs	Subtotaal
1	Intel Xeon E5-2630L v4 Tray	€ 677,60	€ 677,60
1	Supermicro X10SRH-CF	€ 446,85	€ 446,85
1	Fractal Design Define S	€ 74,95	€ 74,95
1	Adaptec ACK-I-rA-HDmSAS-4rASATA-SB-.8M	€ 20,-	€ 20,-
1	Noctua NH-U9DXi4	€ 59,-	€ 59,-
4	Samsung M393A4K40BB0-CPB	€ 330,50	€ 1.322,-
1	Addonics ADM2PX4 M2 PCIe SSD adapter	€ 23,05	€ 23,05
1	SilverStone Strider Paltinum Series SST-ST55F-PT	€ 120,24	€ 120,24
1	Samsung SM951 (NVMe) 512GB	€ 250,-	€ 250,-
Bekijk collectie Importeer producten		Totaal	€ 2.993,69

Ben er zeer tevreden over, maar heb nu de overstap gemaakt naar dedicated data center hardware. Dit systeem staat dan ook te koop voor wie interesse heeft.

[|sWORDs|]

Nick1996 schreef op zaterdag 17 juni 2017 @ 08:18:
Beste tweakers,

Ik heb een vraag. Ik wil een esxi server bouwen of kopen voor mijn hobby en voor school. Ik ga in september een opleiding doen als ICT-Beheerder. Ik zag een Dell Precission T1600 te koop staan bij iemand en ik dacht dat dat wel een goeie optie was voor een esxi server.

Is dit een goed idee of kan ik maar beter verder kijken?

Het bord is prima voor ESXi (wel max 16GB geheugen), maar er zijn erg veel uitvoeringen van (CPU, memory, graphics en disks), dus zonder extra info over de hardware en wat je precies wil doen is het lastig hier iets over te zeggen.

[Cave_Boy]

Zelf heb ik vroeger met ESXi zitten werken en nu ik weer een beetje vrije tijd over heb wil ik wel weer eens wat proberen.

Ik heb met snelheid niet veel eisen. Hooguit 2 OS tegelijk verwacht (heel misschien een 3e op de achtergrond die vrijwel niks doet).

Zit al enige tijd met een schuin ook dan ook naar een Kaby Lake 7200u te kijken. Deze zijn behoorlijk zuinig.

Op Aliexpress kom je veel van dit soort mini kastjes tegen: https://www.aliexpress.co...0b-4c6f-b892-973bc4723d13

Het formaat is lekker klein en dat is bij mij een mooi voordeel.
Dat deze ook geen ventilator heeft is natuurlijk ook een mooi voordeel.

Er past 16GB geheugen in. Wat voor mij ruim voldoende moet en zal zijn.
Een SSD + HDD is mogelijk. (handig voor de opslag van de besturing systemen)

Totaal begint het complete kastje op Aliexpress wel prijzig te worden (480,69 euro).

Weet iemand hier misschien een klein leuk alternatief?

[nero355]

Cave_Boy schreef op zaterdag 24 juni 2017 @ 11:25:
Weet iemand hier misschien een klein leuk alternatief?

Intel NUC en soortgelijken van Zotac/ECS/enz.

[Cave_Boy]

nero355 schreef op zondag 25 juni 2017 @ 02:25:
[...]

Intel NUC en soortgelijken van Zotac/ECS/enz.

Die hebben telkens een ventilator. Heetf iemand hier ervaring met een Intel Barebone NUC7I5BNH i5 7260U
Die met de cpu bijna geheel hetzelfde als die op Aliexpress. Vraag me af hoe stil deze zijn als ze belast worden.

[ Voor 31% gewijzigd door Cave_Boy op 25-06-2017 08:33 ]

[Steefph]

[b][message=51682309,noline]

Weet iemand hier misschien een klein leuk alternatief?

Als je het niet vervelend vind om een beetje zelf te bouwen. Een Asrock J4205-ITX met pico PSU.
Dit heb ik nu draaien en werkt prima
Vooral omdat je op snelheid niet veel eisen hebt. Ik draai hier XPenology + Win10 + Sophos Firewall + Ubuntu machine.

[ Voor 19% gewijzigd door Steefph op 25-06-2017 12:23 ]

[nero355]

Cave_Boy schreef op zondag 25 juni 2017 @ 08:04:
Die hebben telkens een ventilator. Heetf iemand hier ervaring met een Intel Barebone NUC7I5BNH i5 7260U
Die met de cpu bijna geheel hetzelfde als die op Aliexpress. Vraag me af hoe stil deze zijn als ze belast worden.

Ik weet niet hoe het met de nieuwere i3/i5/i7 modellen zit maar mijn Atom based NUC hoor je eigenlijk nooit

[Yarisken]

nero355 schreef op zondag 25 juni 2017 @ 20:31:
[...]

Ik weet niet hoe het met de nieuwere i3/i5/i7 modellen zit maar mijn Atom based NUC hoor je eigenlijk nooit

Mijn nuc ook niet maar bij intensief gebruik wordt deze wel heel warm. Weet niet of dit ideaal is voor de hardware.

[nero355]

Yarisken schreef op zondag 25 juni 2017 @ 20:46:
Mijn nuc ook niet maar bij intensief gebruik wordt deze wel heel warm. Weet niet of dit ideaal is voor de hardware.

In de BIOS kan je de fanspeeds finetunen

[rachez]

Cave_Boy schreef op zondag 25 juni 2017 @ 08:04:
[...]


Die hebben telkens een ventilator. Heetf iemand hier ervaring met een Intel Barebone NUC7I5BNH i5 7260U
Die met de cpu bijna geheel hetzelfde als die op Aliexpress. Vraag me af hoe stil deze zijn als ze belast worden.

Mijn ervaring met een NUC 7i5BNH:

proxmox als hypervisor met 8 linux vm's + 1 windows vm gebruikt rond de 15% cpu op de nuc (allemaal lage load) en dat is nog best stil te noemen (niet onhoorbaar).
Ga je ze belasten gaat de kleine fan hard draaien en dan maakt hij best herrie (vind ik).

Bij een oudere nuc met esxi is mijn ervaring eigenlijk gelijk.

[Cave_Boy]

rachez schreef op maandag 26 juni 2017 @ 18:08:
[...]


Mijn ervaring met een NUC 7i5BNH:

proxmox als hypervisor met 8 linux vm's + 1 windows vm gebruikt rond de 15% cpu op de nuc (allemaal lage load) en dat is nog best stil te noemen (niet onhoorbaar).
Ga je ze belasten gaat de kleine fan hard draaien en dan maakt hij best herrie (vind ik).

Bij een oudere nuc met esxi is mijn ervaring eigenlijk gelijk.

Heb zelf een mooi artikel gevonden over nuc en vmware. Niet alles is top. Bij ESXI 6.5 zijn er netwerk problemen. Iemand hiermee bekend ? Is dit opgelost?

Link naar artikel: http://www.virten.net/201...-gen-intel-nuc-kaby-lake/

Denk dat ik deze neem met dan 16GB RAM en een NVM SSD plus een SATA HDD van 1TB vermoedelijk (Dit moet volgens mij in dit model pricewatch: Intel NUC NUC7i5BNH passen.) Wat ik well astig vind is dat er inmiddels bij de nuc's ook een soort warboel aan versies aan het komen zijn. Zo heb je ook een versie die heeft geen NVM support of geen SATA poort. Je zou haast denken het is simpeler om meer dezelfde versies te hebben/ maken dan versies met net even andere specificaties.

[rachez]

Heb op dezelfde nuc alleen met 32GB RAM eerst succesvol esxi 6.0 of 6.5 gedraaid (niet zeker meer welke), daarna overgestapt op proxmox omdat ik dat beter vond qua featureset. Technisch echter dus een week zonder problemen esxi gedraaid.

Was van te voren ook wel benieuwd of esxi wel direct zou werken vanwege datzelfde artikel, maar heb het toen toch binnen een dag aan de praat gekregen.

Edit:
volgens mij heb ik deze link gebruikt om het werkend te krijgen. Ik kan nog kijken of ik ergens het usb stickje heb liggen met de door mij gebruikte image mocht je het echt nodig hebben.

http://www.virtuallyghett...n-kaby-lake-esxi-6-x.html

[ Voor 27% gewijzigd door rachez op 26-06-2017 21:33 ]

[diehard889]

Wilde al een tijdje een esx server maken, voornamelijk lab maar mogelijk ook productie.

liefst 2 nic-jes voor vlan support (onder andere)
een enkele 16gb mem reep zodat deze nog een keer uit te breiden is naar 32GB.
verder de CPU daar twijfel ik nog, een G4560 is niet op voorraad zn opvolger G4600 word ook schaarser.

ik heb nu dit.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,90	€ 65,90
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	ASRock H270M-ITX/ac	€ 121,50	€ 121,50
1	Seagate Barracuda, 2TB	€ 66,95	€ 66,95
1	Cooler Master Elite 110	€ 41,24	€ 41,24
1	Crucial CT16G4DFD8213	€ 114,-	€ 114,-
1	Samsung 850 EVO 250GB	€ 93,-	€ 93,-
Bekijk collectie Importeer producten		Totaal	€ 652,49

[-JB-]

Zojuist een uitgebreide post in Het grote zuinige server topic gedaan, maar hier ook een korte samenvatting:

Voor mijn nieuwe server heb ik het volgende systeem samengesteld:

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,90	€ 65,90
1	Fujitsu D3417-B2	€ 172,50	€ 172,50
3	Seagate Barracuda Compute 2,5", 4TB	€ 177,84	€ 533,52
1	Sandisk Ultra Fit 32GB Zwart	€ 13,11	€ 13,11
2	Hynix DDR4 8GB PC 2400 CL15 ECC unb. bulk	€ 94,38	€ 188,76
1	Mini-box picoPSU 90	€ 41,95	€ 41,95
1	Seasonic Power Adapter 60 Watt (12V)	€ 28,99	€ 28,99
1	Intel 600p 256GB	€ 118,68	€ 118,68
Bekijk collectie Importeer producten

Hierop draait ESXi met op dit moment Freenas en een Win10 VM.
De verbruikcijfers:
ESXI:
5,9w met SSD/LAN
8,1w met SSD/LAN/KB/DVI
9,2w met SSD/LAN/3x2,5" in spindown

[|sWORDs|]

Hoe heb je dat gemeten?

Edit: Voltcraft Energycheck 3000, dat is geen slechte meter, maar volgens mij wel onbetrouwbaar bij lage wattages.
Ik heb nog nooit zulke lage wattages met ESXi gezien.

Seasonic zegt 87% efficiency, PicoPSU zegt 85% bij 12 Watt en zal een stuk lager zijn bij 6 Watt, maar laten we het eens op 85% houden:
5,9*0,87*0,85=4,36Watt,
min 0,536 van de p600 zou 3,8Watt zijn
min 0,2 van USB stick is 3,6
min 3 voor twee DDR4 2400MHz ECC DIMMS is 0,6W voor moederbord en CPU. Dat kan bijna niet kloppen.

Misschien zijn sommige DIMMs nog wat zuiniger, maar de 85% voor de PicoPSU op 6W is te hoog, dat zal eerder 70-75% zijn (-0,5W) en opgeven efficienties zijn meestal redelijk optimistisch.

Het zal absoluut een van de zuinigste systemen (of de zuinigste) uit dit topic zijn, maar 5,9W zal het niet zijn.

[ Voor 163% gewijzigd door |sWORDs| op 30-06-2017 02:40 ]

[FireDrunk]

mux' blog: Mux' vragenuurtje 17/8/2012: hoe zuinig is geheugen?
Skip naar 3:40 voor de clou.

3W voor geheugen is _veel_ te veel. ECC zal vast een fractie meer verbruiken dan wat Mux'geheugen verbruikt, maar als het 10% is, is het veel denk ik.

5.9W kan in thoerie prima met dat Fujitsu bord, die staat bekend als 1 van de zuinigste borden die momenteel gemaakt wordt.

Die meter is inderdaad niet super, dus een lichte afwijking is ook zeker niet ondenkbaar.

[|sWORDs|]

FireDrunk schreef op vrijdag 30 juni 2017 @ 07:23:
mux' blog: Mux' vragenuurtje 17/8/2012: hoe zuinig is geheugen?
Skip naar 3:40 voor de clou.

3W voor geheugen is _veel_ te veel. ECC zal vast een fractie meer verbruiken dan wat Mux'geheugen verbruikt, maar als het 10% is, is het veel denk ik.

5.9W kan in thoerie prima met dat Fujitsu bord, die staat bekend als 1 van de zuinigste borden die momenteel gemaakt wordt.

Die meter is inderdaad niet super, dus een lichte afwijking is ook zeker niet ondenkbaar.

http://www.tomshardware.c...aswell-e-cpu,3918-13.html

[FireDrunk]

Hmm, normaal heb ik Tom's Hardware vrij hoog zitten, maar dit vind ik er echt heel vreemd uit zien. DDR4 is zuiniger dan DDR3, dus ik snap niets van deze test.

Ook is 12W echt wel heel veel. Daarvan is >99% waarschijnlijk warmte, en 12W aan warmte zonder actieve koeling is echt wel heel veel...

Ergens klopt er hier iets niet, misschien kunnen de extreme stroom junkies er wat over zeggen

@mux O great Oracle, we summon thee

[|sWORDs|]

FireDrunk schreef op vrijdag 30 juni 2017 @ 08:03:
Hmm, normaal heb ik Tom's Hardware vrij hoog zitten, maar dit vind ik er echt heel vreemd uit zien. DDR4 is zuiniger dan DDR3, dus ik snap niets van deze test.

Ook is 12W echt wel heel veel. Daarvan is >99% waarschijnlijk warmte, en 12W aan warmte zonder actieve koeling is echt wel heel veel...

Ergens klopt er hier iets niet, misschien kunnen de extreme stroom junkies er wat over zeggen

@mux O great Oracle, we summon thee

We hebben het hier niet over het verschil van 2x4 of 1x8, maar we hebben het hier over het absolute verbruik van 2x8 (op 2400MHz met ECC), dat 1x16 maar 0.1W zuiniger is wil ik best geloven (bij Paul is het verschil nog kleiner).
Maar al is het 0,5W (echter persoonlijk denk ik dat de 1.5W die ik nam al te laag is) per 8GB bankje, dan kan het nog niet. Dan zou je met 2,1W het moederbord en CPU moeten voeden terwijl ESXi en twee VMs draaien.

[ Voor 10% gewijzigd door |sWORDs| op 30-06-2017 08:30 ]

[mux]

Als je geheugen op een of andere manier echt voluit kunt laten stampen, dan ja, dat kan best wel een paar W per bankje slurpen. Echter, het is - uitgezonderd in HPC - bijna onmogelijk om een workload te maken die zoiets voor significante tijd doet. RAM doet doorgaans wat er in z'n naam zit: random accesses, niet continuous accesses.

En idle/light load zit RAM op sub-100mW. DDR4 heeft nog veel aggressievere power down states dan DDR3L, dus het zal wel in de tientallen mW zitten typisch.

Zelf heb ik zelfs tijdens gaming nooit meer dan ~300mW gemeten. Makes sense, gezien zelfs 10% load aardig veel is voor modern RAM in een non-synthetische load.

[|sWORDs|]

mux schreef op vrijdag 30 juni 2017 @ 08:31:
Als je geheugen op een of andere manier echt voluit kunt laten stampen, dan ja, dat kan best wel een paar W per bankje slurpen. Echter, het is - uitgezonderd in HPC - bijna onmogelijk om een workload te maken die zoiets voor significante tijd doet. RAM doet doorgaans wat er in z'n naam zit: random accesses, niet continuous accesses.

En idle/light load zit RAM op sub-100mW. DDR4 heeft nog veel aggressievere power down states dan DDR3L, dus het zal wel in de tientallen mW zitten typisch.

Zelf heb ik zelfs tijdens gaming nooit meer dan ~300mW gemeten. Makes sense, gezien zelfs 10% load aardig veel is voor modern RAM in een non-synthetische load.

Ik heb net niet alleen het begin en 3m40 bekeken maar alles er tussen ook, je meet inderdaad 1x8 of 2x8 en niet het verschil tussen één en twee bankjes.
Maar wat zouden twee DIMMs van 8GB 2400MHz ECC idle verbruiken?
En denk je dat 5.9W AC echt kan met ESXi en twee VMs idle?

[mux]

Vervelende van ECC is dat de meeste chipsets die ECC ondersteunen automatisch power-down modes uitzetten. ECC zou nauwelijks meer moeten verbruiken dan non-ECC, maar in het gros van de borden waarin ik heb getest (en daar moet bij gezegd worden: ik heb nog nauwelijks op DDR4 gemeten) doet alsof het RAM continu in forced refresh (=minst zuinige modus) moet staan.

Grappig genoeg maakt dat het RAM ook aardig wat gevoeliger voor bit errors...

[FireDrunk]

https://forum.openmediava...-Skylake-Fujitsu-D3417-B/

Hier haalt iemand net geen 10W met hetzelfde bord onder OMV.

after fresh install of openmedivault with latest backport kernel and power optimizations the system is running just below 10 watts now with 4 x 4TB WD Red being in stand-by (spin down).

Disk in standby doet ook een paar honderd mW gok ik? Dus dat zal ~8.5W zijn voor het systeem?

Die 5.9 is dus misschien optimistisch, maar 8.5 is dus haalbaar.

[|sWORDs|]

FireDrunk schreef op vrijdag 30 juni 2017 @ 09:10:
https://forum.openmediava...-Skylake-Fujitsu-D3417-B/

Hier haalt iemand net geen 10W met hetzelfde bord onder OMV.


[...]


Disk in standby doet ook een paar honderd mW gok ik? Dus dat zal ~8.5W zijn voor het systeem?

Die 5.9 is dus misschien optimistisch, maar 8.5 is dus haalbaar.

Lastig te vergelijken, de voeding is anders, Samsung is zuiniger met NVMe, Debian kan ook zo maar eens zuiniger (ook geen VM's) zijn en een power meter van nog geen 8 euro klinkt ook niet heel fantastisch.

Met name op lage wattages is de kwaliteit van de power meter heel belangrijk.

Edit: Tjonge, als je testen gaat bekijken van energiemeters dan komt er steeds iets anders uit. (De ene test geeft aan dat de Energy Check veel beter is dan de Energy Monitor, de andere exact andersom.) Exemplarische verschillen? Anders getest? Geen idee.

https://nl.hardware.info/...s-tabel-met-testresulaten

Google translate c't:
Profitec KD 302:
positief => zeer goed (zelfs met meetwaarden beneden 1W), zeer gunstig, ROHS
negatief => fluctuerende waarden (alleen de maximumwaarde correct)

Energy Monitor 3000:
positief => zeer nauwkeurig bij laag vermogen, copshi beeldscherm (power factor), groot scherm
negatief => relatief duur dele hard nauwkeurigheid gebreken (problemen picoPSU & CRT) Het apparaat bevat. Verpakking kwik (Hg)
Opmerking: Volgens Conrad HP ROHS nu compliant

Energie Check 3000:
positief => van dubbele cijfers een goede nauwkeurigheid, overtreft vaak de grote broer (Energy Monitor 3000)
negatieve => onnauwkeurig voor kleine afnemers of in het algemeen geeft aan te weinig 0,5-1W

[ Voor 49% gewijzigd door |sWORDs| op 30-06-2017 09:40 ]

[-JB-]

Ah, leuk om te zien dat mijn post zoveel reacties los maakt!

Heb vanmorgen mijn metingen nog even gecheckt en het blijkt dat de 5,9w zonder actieve VMs was. Met Freenas en 3*2,5" staat de meter op 11,3w. (Dus 2w extra voor de active VM)

Wat betreft het verbruik zijn er op het Hardwareluxx Forum een tweetal users die sub 5w zitten met een vergelijkbare setup en Leicke voeding onder Ubuntu. https://goo.gl/z8nt3A

Ik zal dit weekend eens kijken of ik met de Multimeter een andere waarde krijg.

[|sWORDs|]

-JB- schreef op vrijdag 30 juni 2017 @ 09:34:
Ah, leuk om te zien dat mijn post zoveel reacties los maakt!

Heb vanmorgen mijn metingen nog even gecheckt en het blijkt dat de 5,9w zonder actieve VMs was. Met Freenas en 3*2,5" staat de meter op 11,3w. (Dus 2w extra voor de active VM)

Wat betreft het verbruik zijn er op het Hardwareluxx Forum een tweetal users die sub 5w zitten met een vergelijkbare setup en Leicke voeding onder Ubuntu. https://goo.gl/z8nt3A

Ik zal dit weekend eens kijken of ik met de Multimeter een andere waarde krijg.

Het zijn gewoon heel interessante waardes, ik zit al tijden naar dat bord te kijken omdat hij het zo goed doet, echter is dit nog een paar (flinke) stappen beter dan verwacht.

Die twee users zitten wel in C8 state, waar ik niet van verwacht dat je daar met ESXi in terecht komt. Ook heeft één user dezelfde energy meter.

Maar ik denk dat de Voltcraft Energy Check 3000 echt mee speelt, die lijkt bij alle reviews moeite te hebben met lage wattages, bijvoorbeeld:

[ Voor 17% gewijzigd door |sWORDs| op 30-06-2017 10:19 ]

[2green]

diehard889 schreef op donderdag 29 juni 2017 @ 21:44:
Wilde al een tijdje een esx server maken, voornamelijk lab maar mogelijk ook productie.

liefst 2 nic-jes voor vlan support (onder andere)
een enkele 16gb mem reep zodat deze nog een keer uit te breiden is naar 32GB.
verder de CPU daar twijfel ik nog, een G4560 is niet op voorraad zn opvolger G4600 word ook schaarser.

ik heb nu dit.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,90	€ 65,90
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	ASRock H270M-ITX/ac	€ 121,50	€ 121,50
1	Seagate Barracuda, 2TB	€ 66,95	€ 66,95
1	Cooler Master Elite 110	€ 41,24	€ 41,24
1	Crucial CT16G4DFD8213	€ 114,-	€ 114,-
1	Samsung 850 EVO 250GB	€ 93,-	€ 93,-
Bekijk collectie Importeer producten		Totaal	€ 652,49

heb je twee mobo's staan ivm vlan requirement? Waarom deze twee, wat zijn de pro's waarvoor je die gekozen had?

de 110m is 47,50 op amazon trouwens.

[Paul]

diehard889 schreef op donderdag 29 juni 2017 @ 21:44:
liefst 2 nic-jes voor vlan support (onder andere)

Wat je schrijft is mogelijk niet wat je bedoelt, maar met VLAN support hoef je geen 2 nics te hebben om meerdere netwerken te maken, en andersom?

Als je een switch hebt die VLANs snapt dan kun je die gewoon aanmaken in de switch en in vSphere en al je netwerken over één kabel sturen. Als je switch geen VLAN snapt dan maak je één netwerk op de ene pNIC en een ander netwerk op de andere pNIC en houd je ze fysiek gescheiden?

Bedoel je misschien NIC teaming / LACP? Dat is een use case waar je thuis vaak minder aan hebt dan mensen denken; één stream (van de ene naar de andere computer) gebruikt maar één van de twee kanalen, teaming is meer bedoeld voor load balancing en failover dan voor het halen van hogere snelheden tussen twee endpoints. Als dat laatste is wat je wil dan kun je beter op eBay een paar 10GE kaartjes halen voor een paar tientjes en die in de beide endpoints zetten.

[diehard889]

Paul schreef op vrijdag 30 juni 2017 @ 10:41:
[...]
Wat je schrijft is mogelijk niet wat je bedoelt, maar met VLAN support hoef je geen 2 nics te hebben om meerdere netwerken te maken, en andersom?

Als je een switch hebt die VLANs snapt dan kun je die gewoon aanmaken in de switch en in vSphere en al je netwerken over één kabel sturen. Als je switch geen VLAN snapt dan maak je één netwerk op de ene pNIC en een ander netwerk op de andere pNIC en houd je ze fysiek gescheiden?

Bedoel je misschien NIC teaming / LACP? Dat is een use case waar je thuis vaak minder aan hebt dan mensen denken; één stream (van de ene naar de andere computer) gebruikt maar één van de twee kanalen, teaming is meer bedoeld voor load balancing en failover dan voor het halen van hogere snelheden tussen twee endpoints. Als dat laatste is wat je wil dan kun je beter op eBay een paar 10GE kaartjes halen voor een paar tientjes en die in de beide endpoints zetten.

nu ik erover nadenk.. dr klopt geen hout van
Ik weet dat je alles over een trunk kan laten lopen en je vlan's in je vSwitch kan onderbrengen.
het leek me wel handig om 2 nic te hebben voor lab / productie scheiding maar dat kan met 1 nic en vlans
zelf heb ik het idee dat ik aan 1Gb niet genoeg heb, zeker als je meerder machines heb draaien.

wilde dit gaan draaien

windows DC 2016
windwos DC member 2016
Windows SQL
Win10 client
UTM firewall
1 a 2 linux boxen

[|sWORDs|]

diehard889 schreef op vrijdag 30 juni 2017 @ 11:03:
[...]


nu ik erover nadenk.. dr klopt geen hout van
Ik weet dat je alles over een trunk kan laten lopen en je vlan's in je vSwitch kan onderbrengen.
het leek me wel handig om 2 nic te hebben voor lab / productie scheiding maar dat kan met 1 nic en vlans
zelf heb ik het idee dat ik aan 1Gb niet genoeg heb, zeker als je meerder machines heb draaien.

wilde dit gaan draaien

windows DC 2016
windwos DC member 2016
Windows SQL
Win10 client
UTM firewall
1 a 2 linux boxen

Zolang je geen storage over ethernet doet en geen 500/500 of hoger internet hebt (en tegelijk maximaal up en download) zou 1Gbit ruim voldoende moeten zijn, het verkeer binnen ESXi gaat al niet over de NIC.

Meerdere gigabit links naar ESXi heeft bijvoorbeeld ook al weinig nut als je een topology hebt waarbij er tussen switches enkel gigabit zit. Alleen als je vanaf de switch voor ESXi naar twee verschillende poorten gaat kan het nut hebben.

[ Voor 14% gewijzigd door |sWORDs| op 30-06-2017 11:20 ]

[diehard889]

|sWORDs| schreef op vrijdag 30 juni 2017 @ 11:12:
[...]

Zolang je geen storage over ethernet doet en geen 500/500 of hoger internet hebt (en tegelijk maximaal up en download) zou 1Gbit ruim voldoende moeten zijn, het verkeer binnen ESXi gaat al niet over de NIC.

Meerdere gigabit links naar ESXi heeft bijvoorbeeld ook al weinig nut als je een topology hebt waarbij er tussen switches enkel gigabit zit. Alleen als je vanaf de switch voor ESXi naar twee verschillende poorten gaat kan het nut hebben.

ah duidelijk, ik schrap de 2e nic gedachte.
dan kom ik op onderstaande Hardware.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,90	€ 65,90
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	Seagate Barracuda, 2TB	€ 66,95	€ 66,95
1	Cooler Master Elite 110	€ 41,24	€ 41,24
1	Samsung 850 EVO 250GB	€ 93,-	€ 93,-
Bekijk collectie Importeer producten		Totaal	€ 332,09

[2green]

diehard889 schreef op vrijdag 30 juni 2017 @ 11:26:
[...]


ah duidelijk, ik schrap de 2e nic gedachte.
dan kom ik op onderstaande Hardware.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,90	€ 65,90
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	Seagate Barracuda, 2TB	€ 66,95	€ 66,95
1	Cooler Master Elite 110	€ 41,24	€ 41,24
1	Samsung 850 EVO 250GB	€ 93,-	€ 93,-
Bekijk collectie Importeer producten		Totaal	€ 332,09

In je vorige post stond er nog ram bij en in beiden mist nu een psu. Is dat bewust?

Ga ongeveer dezelfde build gebruiken als nas, dus geinteresseerd in hoe jouw build eruit gaat zien.

[diehard889]

2green schreef op vrijdag 30 juni 2017 @ 12:06:
[...]


In je vorige post stond er nog ram bij en in beiden mist nu een psu. Is dat bewust?

Ga ongeveer dezelfde build gebruiken als nas, dus geinteresseerd in hoe jouw build eruit gaat zien.

Foutje met de tabel, nu met Ram. PSU heb ik nog liggen, zal vanavond even kijken wat de specs daarvan zijn. weet wel dat een 400w voeding is.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4600 Boxed	€ 83,50	€ 83,50
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	Seagate Barracuda, 2TB	€ 66,95	€ 66,95
1	Cooler Master Elite 110	€ 41,24	€ 41,24
1	Crucial CT16G4DFD8213	€ 114,-	€ 114,-
1	Samsung 850 EVO 250GB	€ 93,-	€ 93,-
Bekijk collectie Importeer producten		Totaal	€ 463,69

[Raoul.TLS]

http://www.lex.com.tw/products/SBC-into.php

Leuke Bordjes voor een ieder wat
Kan sorteren op CPU Form factor etc

van Intel Sky Lake tot VIA Nano™ Processor
met 4 Nics of meer

[ Voor 26% gewijzigd door Raoul.TLS op 30-06-2017 15:31 ]

[ThinkPad]

M.b.t. energiemeters die moeite hebben om laag stroomverbruik goed te kunnen meten:
Wat ik in zo'n geval doe is een gloeilamp/halogeenlamp aansluiten. Deze een paar minuten laten branden en dan noteren wat het stroomverbruik is. Daarna de hardware bijprikken op de stekkerdoos en van het verbruik haal je dan het eerder gemeten verbruik van de lamp af.

Door die 40-50W extra zit de meter in een range die hij vaak veel nauwkeuriger kan meten.

[diehard889]

diehard889 schreef op vrijdag 30 juni 2017 @ 12:14:
[...]
PSU heb ik nog liggen, zal vanavond even kijken wat de specs daarvan zijn. weet wel dat een 400w voeding is.

het is een coolermaster RS 450W
al wel een oudje https://tweakers.net/revi...al-power-450w-review.html

misschien beter een nieuwe kopen, hier zit ook een kabel bos aan van heb ik jou daar.
dat komt de airflow ook niet ten goede.


suggesties ?

[2green]

diehard889 schreef op vrijdag 30 juni 2017 @ 21:30:
[...]


het is een coolermaster RS 450W
al wel een oudje https://tweakers.net/revi...al-power-450w-review.html

misschien beter een nieuwe kopen, hier zit ook een kabel bos aan van heb ik jou daar.
dat komt de airflow ook niet ten goede.


suggesties ?

Zie hier verschillende varianten, qua aanschaf en zuinigheid zijn de pico psu's erg populair. Laat wel de ruimte voor de atx voeding in je kast open. Hiervoor kun je makkelijk zelf iets maken, een oude psu uitknippen of een PSU Cover Plate aanschaffen (zonde van het geld die laatste).

plak voor het gemak even mijn concept build, die volgens mij gelijk is aan die van jou... afkijken is een kunst

Heb twee varianten opgenomen van de psu, afhankelijk van hoeveel vermogen je nodig hebt.

#	Product	Prijs	Subtotaal
1	Intel Pentium G4560 Boxed	€ 65,-	€ 65,-
1	ASRock H110M-ITX	€ 65,-	€ 65,-
1	Cooler Master Elite 110	€ 41,45	€ 41,45
1	Crucial CT16G4DFD8213	€ 114,-	€ 114,-
1	Mini-box picoPSU 90	€ 41,95	€ 41,95
1	Mini-box picoPSU 90 + 80W Adapter Power Kit	€ 76,-	€ 76,-
1	Seasonic Power Adapter 60 Watt (12V)	€ 28,99	€ 28,99
Bekijk collectie Importeer producten		Totaal	€ 432,39

[ Voor 5% gewijzigd door 2green op 01-07-2017 10:56 ]

[2green]

Zou een G4560 in combinatie met 16GB ram en sata SSD voldoende snel zijn voor de volgende opstelling?

Virtual Ubuntu server: NAS voor smb file share + 2 full HD plex streams
Virtual Ubuntu server: 4 LEMP webservers in lxd containers (wordpress sites)
Virtual Ubuntu desktop: Ubuntu 17.04 desktop toepassing

[Le Enfant!]

|sWORDs| schreef op vrijdag 30 juni 2017 @ 11:12:
[...]

Zolang je geen storage over ethernet doet en geen 500/500 of hoger internet hebt (en tegelijk maximaal up en download) zou 1Gbit ruim voldoende moeten zijn, het verkeer binnen ESXi gaat al niet over de NIC.

Meerdere gigabit links naar ESXi heeft bijvoorbeeld ook al weinig nut als je een topology hebt waarbij er tussen switches enkel gigabit zit. Alleen als je vanaf de switch voor ESXi naar twee verschillende poorten gaat kan het nut hebben.

Ik ben zelf nog aan het twijfelen over het nut van twee NIC's. Eén van de bedoelingen van mijn toekomstige server is dat mijn mediaspeler aan de gedownloade media-bestanden kan die op mijn server zullen staan. Mijn mediaspeler zal samen met andere apparaten door middel van een switch aan het netwerk gekoppeld zijn. Aangezien alle ethernet-aansluitingen in huis naar een patchpaneel lopen, ben ik van plan om daar mijn server te zetten. Die server zal samen met de modem een switch delen. Zal dit voldoende zijn of zal ik de server toch maar direct aansluiten op mijn mediaspeler? Daar zou een tweede NIC wel soelaas bieden, ik kan dan een andere aansluiting gebruiken om rechtstreeks te verbinden met de modem. Naar mijn mening zou de opstelling die ik nu heb meer dan voldoende moeten zijn. Er zal maar één bestand tegelijkertijd opgevraagd worden door mijn mediaspeler.

Ik ben ook van plan om wat te spelen met PfSense. Aangezien dit een firewall is, moet dit tussen de modem en de rest van het netwerk staan. Zal dit lukken met bovenstaande opstelling (dus via de switch) of zou het interessanter zijn als ik van modem naar server ga en dat de tweede NIC van de server naar de switch gaat waar al de rest op zit?

[|sWORDs|]

Een mediaspeler zal piek 150Mbit trekken (maar zal ook een buffer hebben, naast de buffer waarschijnlijk sub 100Mbit), daar hoef je geen tweede NIC voor te gebruiken.

[ Voor 30% gewijzigd door |sWORDs| op 01-07-2017 16:36 ]

[RudolfR]

Vorige week weer een poging gedaan om mijn ESXi 5.1 te upgraden naar 6.
(Via vmware kreeg ik 6.5.0a aangeboden, maar later vond ik ook nog een 6.5.0d.)

Ik krijg ze beide wel geïnstalleerd, maar eenmaal geboot kan ik ze niet bereiken.
In het scherm staat wel een geldig IP-adres, maar dit adres kan ik slechts een aantal keer pingen voordat het onbereikbaar wordt. Het device benaderen via de web-interface zit er dus niet in.

Ik heb speciaal (na een mislukte upgrade van 5.1 naar 6.5) een Intel CT adapter aangeschaft en die lijkt te werken. De installatie verloopt gewoon goed.

Nu probeer ik 5.5.0 te installeren, hoop dat die wel werkt, en misschien kan ik daarvandaan wel upgraden.

Iemand nog tips? Iets waar ik op moet letten als de boot-log voorbij scrollt (via ALT+F1)?
Waarom is die 6.5.0d-versie zo moelijk te vinden?

Deze post hoort zeker ergens anders; nl:
Het grote ESXi/vSphere Topic
?

[ Voor 5% gewijzigd door RudolfR op 08-07-2017 20:01 ]

[Verwijderd]

Ik heb eindelijk de knoop doorgehakt en ga mijn HP N40L met pensioen sturen. Hier had ik nog geen virtualisatie op draaien vanwege dat de processor mij daar net even te licht voor was.
Mijn nieuwe server is (ondanks dat er eindelijk een gen10 voor de HP microserver uit is) een zelfbouw met de volgende componenten: inventaris: miniserver

Ik ga hier nog een switch met 10Gb poorten aan toevoegen. Dit wordt waarschijnlijk een D-Link pricewatch: D-Link SmartPro DGS-1510-20 een Asus pricewatch: Asus XG-U2008

Nu nog de vraag welke virtualisatie ik ga toepassen. Ik voel veel voor proxmox omdat ik beheer vanaf een Linux systeem zal gaan doen. ESXi is dan echt een crime.

[ Voor 6% gewijzigd door Verwijderd op 09-07-2017 11:03 ]

[unezra]

Verwijderd schreef op zaterdag 8 juli 2017 @ 20:36:
Ik ga hier nog een switch met 10Gb poorten aan toevoegen. Dit wordt waarschijnlijk een D-Link pricewatch: D-Link SmartPro DGS-1510-20

Wat voor use-cases heb je thuis voor 10Ge?

Ik vind het persoonlijk nog wat duur voor thuisgebruik en als ik zie dat ik zelfs op kantoor niet echt behoefte heb aan 10Ge, ben ik nog van mening dat het thuis dan al helemaal overkill is. Met 2 10Ge poorten ben je ook redelijk beperkt tot 1 enkele NAS, wil je ooit naar een 2e heb je pech en kun je een 2e switch aanschaffen.

Nu nog de vraag welke virtualisatie ik ga toepassen. Ik voel veel voor proxmox omdat ik beheer vanaf een Linux systeem zal gaan doen. ESXi is dan echt een crime.

Zal wel mee vallen toch? Nieuwe ESXi (6.5) werkt het beheer browser-based. Je hebt geen client software meer nodig. Blijft dat ik persoonlijk Proxmox (waar ook een nieuwe versie van is met heel toffe nieuwe features) een heel gaaf systeem vind. Het is niet voor niets dat ik het privé, met de stichting en straks op kantoor ook ga in zetten. (Al zal het op kantoor niet snel VMWare gaan vervangen.)

[Paul]

De prijs van die switch valt me op zich mee (ik dacht dat die dingen duurder zouden zijn, al helemaal met SFP+ ipv koper), maar het probleem met slechts 2 poorten vind ik dat je met doorlussen geen extra 10G poorten krijgt, om de 2 switches aan elkaar te hangen heb je 2 poorten nodig -> netto nul uitbreiding.

Zelf heb ik 10Ge (en 4G FC ) tussen werkstation en NAS maar dat is beiden direct verbonden. Ander IP-adres er op, entry in /etc/hosts of c:\windows\system32\drivers\etc\hosts en je bent in de lucht (die entries zijn alleen / vooral nodig als zowel je NAS als je werkstation ook aan de rest van het netwerk hangt).

[ Voor 6% gewijzigd door Paul op 09-07-2017 21:02 ]

[unezra]

Paul schreef op zondag 9 juli 2017 @ 21:02:
De prijs van die switch valt me op zich mee (ik dacht dat die dingen duurder zouden zijn, al helemaal met SFP+ ipv koper), maar het probleem met slechts 2 poorten vind ik dat je met doorlussen geen extra 10G poorten krijgt, om de 2 switches aan elkaar te hangen heb je 2 poorten nodig -> netto nul uitbreiding.

Liever een stackeable switch maar dat is helemaal iets dat volgens mij niet in die prijsklasse valt. De prijs van die beestjes is laag maar de inzetbaarheid is dat ook. Inderdaad is het met 2 poorten vrij beperkt en als je dan toch voor 10Ge gaat, zou ik liever doorsparen voor iets met iets meer poorten. (Of genoegen nemen met 1Ge poorten maar dan wel in een L2 of L3 managed switch.)

@robb_nl
Hou je er rekening mee dat die Asus switch unmanaged is?
Iets als LACP over 2 poorten kun je dus vergeten.

Heb je die 10Ge wel nodig? Of ben je beter af met een trunk van 2x of 4x 1GBit waardoor je alsnog 2Gbit/4Gbit of meer haalt? (Maar wel beperkt bent tot 1GBit per stream.)

[Verwijderd]

unezra schreef op maandag 10 juli 2017 @ 06:48:
[...]
@robb_nl
Hou je er rekening mee dat die Asus switch unmanaged is?
Iets als LACP over 2 poorten kun je dus vergeten.

Die 10Gb is 'omdat het kan' Op het moederbord van mijn nieuwe thuisserver zitten 2 10GBASE-T interfaces. Dan wil ik die het liefst ook kunnen gebruiken.
En ik heb verder geen rare dingen op mijn netwerk. Mocht ik bijvoorbeeld een extra subnet nodig hebben, bijvoorbeeld als guest netwerk, dan heb ik nog een 8poort Gb switchje liggen.
Op de server komt in ieder geval een VM met NethServer

[koelkast]

Ik heb het topic eens goed doorgelezen. Ik wil een aantal virtuele systemen binnen Esxi opzetten. Als ik dat in het geval van bijvoorbeeld Plex of SabNZBd doe, kan ik dan beter allemaal Ubuntu VM's opzetten, of moet ik dockers gebruiken binnen Ubuntu? In dat laatste geval krijg je dan toch virtueel-binnen-virtueel of begrijp ik het dan verkeerd?

[Paul]

Wat jij het fijnste vindt. Docker gebruikt paravirtualisatie, het is geen hypervisor. In die zin is er dus geen extra penalty door Docker in een VM te draaien.

Als jij containers makkelijker te managen vind dan Ubuntu VM's dan gebruik je containers, heb je liever alles zelf in de hand dan gebruik je losse VM's.

[FireDrunk]

Docker zelf kost weinig performance, io is wat langzamer vanwege overlays, maar prima werkbaar. Zoals hierboven al gezegd wordt, geen enkel probleem.

[sl0n]

Verwijderd schreef op zaterdag 8 juli 2017 @ 20:36:
Mijn nieuwe server is (ondanks dat er eindelijk een gen10 voor de HP microserver uit is) een zelfbouw met de volgende componenten: inventaris: miniserver

Weet je misschien hoeveel "watt" deze setup gebruikt?

[Verwijderd]

@sl0n Nog niet. Ik heb het geheugen nog niet binnen dus kan de boel nog niet opstarten. Ik zal er een meter tussen hangen om na te gaan wat dit ding idle gebruikt en onder load.

[Ethirty]

Ik zat naar een Kaby Lake NUC te kijken om mijn 2012 Mac Mini te vervangen, met name vanwege de mogelijkheid tot extra geheugen.

Maar al zoekende zag ik via PassMark dat mijn huidige i7 25% hoger scoort dan de nieuwe i7. Zal wel zijn omdat de nieuwe slechts dual-core is. Dat is dan een flinke investering voor alleen 16GB extra RAM.

Kan iemand iets zinnigs zeggen over power per watt? Ik mag aannemen dat een NUC een héél stuk zuiniger is?

[|sWORDs|]

Ethirty schreef op maandag 14 augustus 2017 @ 21:59:
Ik zat naar een Kaby Lake NUC te kijken om mijn 2012 Mac Mini te vervangen, met name vanwege de mogelijkheid tot extra geheugen.

Maar al zoekende zag ik via PassMark dat mijn huidige i7 25% hoger scoort dan de nieuwe i7. Zal wel zijn omdat de nieuwe slechts dual-core is. Dat is dan een flinke investering voor alleen 16GB extra RAM.

Kan iemand iets zinnigs zeggen over power per watt? Ik mag aannemen dat een NUC een héél stuk zuiniger is?

Een NUC heeft een CPU bedoelt voor een ultrabook (Thin & Light) laptop zoals een Macbook Air.
Een Mac Mini heeft een CPU bedoelt voor een power laptop zoals een Macbook Pro 15" Retina.

TDP van een NUC is iets meer dan de helft, dus ja dat gaat een stuk zuiniger zijn.

nucblog.net
Windows 10, idle on desktop 13.7 W
Prime95 running stress test on all cores 48.6 W

i5 dual core 2012 mac mini:
12 watts on idle
prime 95 = 37.0 watts

Van de 2.3 i7 kan ik alleen vinden dat hij in OSX 44W gebruikt "when playing the Batman game", maar dat is natuurlijk niet gelijk aan prime, de 2.6GHz i7 Mac mini piekt op 73W met 18W idle.

Met een beetje gok werk gaat idle usage dan van 18 naar 14 Watt en max load van 70 naar 49 Watt.

http://ark.intel.com/compare/64900,97541
https://www.cpubenchmark.....php?cmp[]=2990&cmp[]=893

Multithreaded is ie 12% langzamer en single threaded 37% sneller, ik denk dat je qua performance ongeveer het over een even snelle machine voor virtualisatie mag hebben.

[ Voor 34% gewijzigd door |sWORDs| op 15-08-2017 01:10 ]

[unezra]

@robb_nl Thnx voor de NethServer tip trouwens. Ik had er nog nooit van gehoord maar het blijkt DE oplossing te zijn voor een probleem uitdaging die we hadden.

Ziet er verdomd mooi, nuttig en bruikbaar uit en zeker iets waar ik (en we) meer mee ga (gaan) doen.

[Ethirty]

|sWORDs| schreef op dinsdag 15 augustus 2017 @ 00:37:
[...]

Met een beetje gok werk gaat idle usage dan van 18 naar 14 Watt en max load van 70 naar 49 Watt.

http://ark.intel.com/compare/64900,97541
https://www.cpubenchmark.....php?cmp[]=2990&cmp[]=893

Multithreaded is ie 12% langzamer en single threaded 37% sneller, ik denk dat je qua performance ongeveer het over een even snelle machine voor virtualisatie mag hebben.

Dat valt me dan eigenlijk nog best tegen na 5 jaar ontwikkelingen bij Intel. Mijn "winst" per te investeren Euro is dan vrijwel nihil. Het is dat ik voor testen met vSAN eigenlijk meer geheugen en onboard storage nodig heb, maar dan kan ik net zo goed een NUC7i3 halen.

Overigens is er ook nog een i7 2.6 (3720QM), die is nog een stukje sneller dan de 2.3 die jij aanhaalt.
https://www.cpubenchmark....%5B%5D=895&cmp%5B%5D=2990
Weet zo even niet meer welke ik nou had.

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 13:58:
[...]

Dat valt me dan eigenlijk nog best tegen na 5 jaar ontwikkelingen bij Intel. Mijn "winst" per te investeren Euro is dan vrijwel nihil. Het is dat ik voor testen met vSAN eigenlijk meer geheugen en onboard storage nodig heb, maar dan kan ik net zo goed een NUC7i3 halen.

Overigens is er ook nog een i7 2.6 (3720QM), die is nog een stukje sneller dan de 2.3 die jij aanhaalt.
https://www.cpubenchmark....%5B%5D=895&cmp%5B%5D=2990
Weet zo even niet meer welke ik nou had.

Dat is natuurlijk niet terecht, je bent apples met peren aan het vergelijken.

Als je wil weten wat de winst van 5 jaar ontwikkelen is dan moet je een QM CPU met een QM/HQ vergelijken of een U met een U (en deze NUC heeft ook een zwaardere U, een 7560U is bijvoorbeeld een betere vergelijking met de oudere U's).

http://ark.intel.com/compare/65714,97540
https://www.cpubenchmark.....php?cmp[]=889&cmp[]=2974

65% sneller met een 12% lagere TDP. Nou mag je TDP niet al te letterlijk gebruiken, maar doen we dat wel dan hebben we het toch over 73% betere performance/watt.

http://ark.intel.com/compare/97496,64891
https://www.cpubenchmark.....php?cmp[]=2952&cmp[]=895

Deze zou ik met een korreltje zout nemen, de thermals van de geteste devices doen ook erg veel en het lijkt of de HQ een beetje geremd is (scoort lager dan zijn voorganger), maar dan nog +15% (denk dat het zo'n 21% zou moeten zijn).

Ik ben van 2.3 uit gegaan omdat je daar zelf over begon, de 2.6 was een duurdere optie, dus als je die had en hem nieuw bij Apple gekocht hebt dan moet je dat in de opties gekozen hebben.

Als het je om power/watt gaat dan kun je beter naar een NUC7i5 kijken, al zal het idle elkaar allemaal niet zo veel ontlopen.


Wat ben je met VSAN van plan? Hybrid of All Flash (+compression en dedupe?), single device (of meerdere NUCs) of nesting?

[ Voor 42% gewijzigd door |sWORDs| op 15-08-2017 14:59 ]

[Ethirty]

|sWORDs| schreef op dinsdag 15 augustus 2017 @ 14:03:
[...]

Dat is natuurlijk niet terecht, je bent apples met peren aan het vergelijken.

Als je wil weten wat de winst van 5 jaar ontwikkelen is dan moet je een QM CPU met een QM/HQ vergelijken of een U met een U (en deze NUC heeft ook een zwaardere U, een 7560U is bijvoorbeeld een betere vergelijking met de oudere U's).

Ik vergelijk de ultra compacte ESXi opties. Dat er niemand is die een gelijkwaardige Mac Mini opvolger bouwt kan ik niks aan doen.

Wat ben je met vSAN van plan? Hybrid of All Flash, single device (of meerdere NUCs) of nesting?

Zowel Hybrid als All Flash en single device + nesting. Gewoon om eens een beetje mee te experimenteren.
Volgens de diverse blogs kan dat prima met de i3 en 32GB geheugen. Heb zitten kijken naar de opties met een socketed Shuttle of SuperMicro, maar dat wordt me gewoon te duur.

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 14:57:
[...]

Ik vergelijk de ultra compacte ESXi opties. Dat er niemand is die een gelijkwaardige Mac Mini opvolger bouwt kan ik niks aan doen.

Skull Canyon NUC?
pricewatch: Intel NUC Kit NUC6i7KYK (Skull Canyon)

Ethirty schreef op dinsdag 15 augustus 2017 @ 14:57:
[...]

Zowel Hybrid als All Flash en single device + nesting. Gewoon om eens een beetje mee te experimenteren.
Volgens de diverse blogs kan dat prima met de i3 en 32GB geheugen. Heb zitten kijken naar de opties met een socketed Shuttle of SuperMicro, maar dat wordt me gewoon te duur.

De enige VSAN configuraties waar ik standaard NUC's voor zou gebruiken zijn:

• Single device
• 4 NUCs hybrid

Voor nesting heb je echt te weinig CPU en voor vier in all flash is gigabit te beperkend. Met hybrid zit je toch aan de ene kant met de snelheid van je spinning storage en heb je een read cache, all flash is alleen write cache.

[ Voor 7% gewijzigd door |sWORDs| op 15-08-2017 15:03 ]

[Ethirty]

|sWORDs| schreef op dinsdag 15 augustus 2017 @ 14:59:
[...]

Skull Canyon NUC?
pricewatch: Intel NUC Kit NUC6i7KYK (Skull Canyon)

[...]

De enige VSAN configuraties waar ik standaard NUC's voor zou gebruiken zijn:

• Single device
• 4 NUCs hybrid

Voor nesting heb je echt te weinig CPU en voor vier in all flash is gigabit te beperkend. Met hybrid zit je toch aan de ene kant met de snelheid van je spinning storage en heb je een read cache, all flash is alleen write cache.

Als het op een 6e generatie i3 kan, zou het op een Kaby Lake ook wel moeten werken:
http://www.virtuallyghett...on-6th-gen-intel-nuc.html
NVME + sata SSD erin en gaan.

Schijnt zelfs in de wizard van 6.5 dat je je eerste host automatisch kan bootstrappen, dus die opzetten moet echt een eitje zijn.

Maar goed, het blijft een hoop geld om een paar keer mee spelen. Ben er ook nog niet helemaal uit.

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 15:10:
[...]

Als het op een 6e generatie i3 kan, zou het op een Kaby Lake ook wel moeten werken:
http://www.virtuallyghett...on-6th-gen-intel-nuc.html
NVME + sata SSD erin en gaan.

Schijnt zelfs in de wizard van 6.5 dat je je eerste host automatisch kan bootstrappen, dus die opzetten moet echt een eitje zijn.

Maar goed, het blijft een hoop geld om een paar keer mee spelen. Ben er ook nog niet helemaal uit.

Het kan zeker (vergeet Learnswitch niet!), maar bedenk ook dat ik hier probleemloos 14 cores voltrek met een enkele dual core VM met max IO op een NVMe drive (niet nested, geen VSAN). Nou zul je met VSAN nooit zulke hoge IO halen, maar je zit wel met je amplification, wat je schrijft komt ook op een tweede virtuele host terecht (of meer met erasure coding "RAID5/6"). Al die hosts gebruiken dan virtual networking, virtual storage en VSAN voor je disk IO.

Een ander iets om toch eens over te denken is RAM, ESXi met VSAN zonder VM's verbruikt al bijna 8GB (met minder kun je ze dus niet aanmaken), dus met een single device + vCenter ben je al snel de helft van je geheugen kwijt (Lam laat het zien in een screenshot, minder dan 15GB vrij met alleen VCSA!). Bij nesting kom je vrijwel direct al geheugen te kort, misschien dat je met TPS en small pages een volledige omgeving kwijt raakt, maar ook dat kost weer CPU.
Misschien dat nested ROBO waarbij je de host ook als witness gebruikt een optie is, echter kom je dan een storage device te kort (minimaal 3 nodig).

Hoe langer ik er over nadenk hoe meer ik zie dat nested VSAN eigenlijk pas vanaf een quadcore i5 met 64GB te doen is, zeker als je geen andere host beschikbaar hebt voor de infra en witness.
Met 32GB zou je drie VM's van 10GB kunnen aanmaken, waar eentje al vol zit met alleen VCSA (2GB usage + 6.7GB voor ESXi en VSAN). De andere twee hebben dan nog maar 3.3GB voor VM's en elke machine heeft erg weinig CPU beschikbaar, de kans dat je gaat balloonen of swappen (kost ook weer CPU) is zelfs met TPS erg groot.
Met een andere host die een witness en VCSA draait met twee nested VM's op een NUC met elk 15GB is het al een stuk beter te doen. Of met een quadcore + 64GB, dan zou je VCSA + wat infra direct op de host kunnen draaien en drie 16GB nested VSAN hosts.

[ Voor 39% gewijzigd door |sWORDs| op 15-08-2017 16:25 ]

[Ethirty]

Duidelijk verhaal, maar mijn doel is (vooralsnog) niet om enige load op te draaien. Daarnaast doe ik mijn Mini ook niet weg. Eigenlijk wil ik gewoon Lam's lab nabouwen en wennen aan de opties en interface.

Dan kan ik met wat tweaks vSAN op 1 host draaien en de nested servers alleen gebruiken voor het opzetten van HA/DRS, misschien testen met unattended deploys. Mijn interne VM's die ik nu heb draaien blijven dan gewoon op de Mini. Die draait toch vrijwel permanent idle.

Als het "kan" op een i3 met 32GB zie ik geen enkele reden om nog 2x zoveel te besteden aan een quadcore met 64GB, dan kan ik net zo goed gelijk een volgeladen 5028D-4TNT kopen.

Als alles meezit komt er zakelijk een aantal HPE dual Xeon G7's vrij uit ons cluster, dus daar kan ik ook nog mee spelen als het moet. Maar die hoef ik niet in huis en zuinig zijn die al helemaal niet.

[ Voor 13% gewijzigd door Ethirty op 15-08-2017 18:41 ]

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 18:38:
Duidelijk verhaal, maar mijn doel is (vooralsnog) niet om enige load op te draaien. Daarnaast doe ik mijn Mini ook niet weg. Eigenlijk wil ik gewoon Lam's lab nabouwen en wennen aan de opties en interface.

Dan kan ik met wat tweaks vSAN op 1 host draaien en de nested servers alleen gebruiken voor het opzetten van HA/DRS, misschien testen met unattended deploys. Mijn interne VM's die ik nu heb draaien blijven dan gewoon op de Mini. Die draait toch vrijwel permanent idle.

Als het "kan" op een i3 met 32GB zie ik geen enkele reden om nog 2x zoveel te besteden aan een quadcore met 64GB, dan kan ik net zo goed gelijk een volgeladen 5028D-4TNT kopen.

Als je de mini ook hebt dan zou ik VCSA en AD daarop draaien + VSAN witness. Dan kun je nested ROBO op de NUC draaien (of andersom) en alles behalve erase encoding met VSAN proberen. Gigabit voor witness traffic is ook geen enkel probleem.

[ Voor 3% gewijzigd door |sWORDs| op 15-08-2017 18:45 ]

[Ethirty]

|sWORDs| schreef op dinsdag 15 augustus 2017 @ 18:41:
[...]

Als je de mini ook hebt dan zou ik VCSA en AD daarop draaien + VSAN witness. Dan kun je nested ROBO op de NUC draaien (of andersom) en alles behalve erase encoding met VSAN proberen.

Er is inderdaad nog een doel waar ik handiger in wil worden: wat is de optimale workflow als je een aantal blanco servers naar binnen schuift en zonder bestaande omgeving moet beginnen. Wij plaatsen all-virtual omgevingen, maar hoe doe je dat als je nog geen plek hebt om een DC of VCSA te booten. (Geen vraag, ik wil dat gewoon voor mezelf allemaal proberen en juist tegen de valkuilen aanlopen). Sowieso niet iets voor dit topic.

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 18:47:
[...]

Er is inderdaad nog een doel waar ik handiger in wil worden: wat is de optimale workflow als je een aantal blanco servers naar binnen schuift en zonder bestaande omgeving moet beginnen. Wij plaatsen all-virtual omgevingen, maar hoe doe je dat als je nog geen plek hebt om een DC of VCSA te booten. (Geen vraag, ik wil dat gewoon voor mezelf allemaal proberen en juist tegen de valkuilen aanlopen). Sowieso niet iets voor dit topic.

Hier kan dat prima: Het grote ESXi/vSphere Topic

[Ethirty]

|sWORDs| schreef op dinsdag 15 augustus 2017 @ 18:48:
[...]

Hier kan dat prima: Het grote ESXi/vSphere Topic

Weet ik. Ben ook VCP, dus ik kom zelf ook al een eind.

[|sWORDs|]

Ethirty schreef op dinsdag 15 augustus 2017 @ 18:49:
[...]

Weet ik. Ben ook VCP, dus ik kom zelf ook al een eind.

Dan zou ik nog steeds aanraden om je conclusies te delen. Ik zal de valkuilen nog niet noemen, maar sommige zaken werken vlekkeloos zolang er niets misgaat, maar je wil dat ze ook nog te repareren zijn als er wel wat aan de hand is.

[Verwijderd]

unezra schreef op dinsdag 15 augustus 2017 @ 00:45:
@robb_nl Thnx voor de NethServer tip trouwens. Ik had er nog nooit van gehoord maar het blijkt DE oplossing te zijn voor een probleem uitdaging die we hadden.

Ziet er verdomd mooi, nuttig en bruikbaar uit en zeker iets waar ik (en we) meer mee ga (gaan) doen.

Ik loop al weer ruim 2 jaar rond bij de NethServer community. Ik ben daar terecht gekomen na het failliet van Zentyal en de NethServer community manager mij gevraagd had om bij NethServer aan te sluiten.

Het is een erg actieve community. Eind september is er overigens een community conference in Italie. Ik ga daar heen om daar een presentatie te geven over NethServer in het onderwijs.

Het is zeer de moeite waard om eens een kijkje te komen nemen op het forum: http://community.nethserver.org
Je zal merken dat de sfeer er zeer toegankelijk is, dat vragen vrijwel altijd een positief antwoord krijgen en dat de wil om behulpzaam te zijn zeer groot is.

[ Voor 12% gewijzigd door Verwijderd op 16-08-2017 10:46 ]

[unezra]

@robb_nl Gaaf! Hebben ze toevallig ook een IRC kanaal?

Denk dat ik je eens een PM ga sturen als je het goed vind. Wil hier niet te veel gaan topicdriften maar wil d'r wel graag eens met je over door kletsen. (Het "we" slaat "uiteraard" op het in mijn .sig genoemde.)

[dewfuz]

Hier stond een post waarin ik twijfelde tussen deze en een Supermicro case, welke eigenlijk niet in mijn rack pastte. nu toch de knoop maar doorgehakt en voor de inter-tech case gegaan, welke als nadeel heeft dat er een 2u koeleroplossing genomen moet worden voor een 4u kast, maar vooral wel in mij wandrack past

Deze post nu aangepast naar mijn rig in aanbouw, wellicht dat het verder een weiniginformatieve post is, excuses daarvoor. Commentaar is altijd welkom


Na incidenteel hier meegelezen te hebben ben ik het volgende van plan:

#	Product	Prijs	Subtotaal
2	Intel Xeon E5-2695 v3 Boxed ES van ebay	€ 250,00	€ 500,00
1	Supermicro X10DRi	€ 388,25	€ 388,25
1	Inter-Tech IPC 4U-4408	€ 219,99	€ 219,99
2	Supermicro SNK-P0048AP4	€ 31,50	€ 63,-
4	Samsung M393A2G40EB1-CPB	€ 186,82	€ 747,28
1	Aqua-Computer kryoM.2 PCIe 3.0 x4 adapter for M.2 NGFF PCIe SSD, M-Key	€ 0,-	€ 0,-
1	Corsair AX860i	€ 207,50	€ 207,50
1	Samsung 960 EVO 500GB	€ 229,90	€ 229,90
Bekijk collectie Importeer producten		Totaal	nvt

Veel spullen van de V&A gehaald, CPU's van ebay. wachten is nu alleen nog op Cashflow voor moederbord (en dan mogen er nog wat 8TB schijven in), de rest is onderweg of reeds gearriveerd

Het geheel zou hierin moeten:

[ Voor 38% gewijzigd door dewfuz op 18-08-2017 20:59 ]

[Verwijderd]

Pittig zware voeding. Ga je die nodig hebben? en 2 van die processors? Lijkt nu een beetje overkill. Zelfs als je alle ram (64GB) gaat gebruiken met VM's gaan die 2 procs dat draaien met 2 vingers in de neus.

[Bigs]

Giordino schreef op donderdag 17 augustus 2017 @ 23:26:
Hier stond een post waarin ik twijfelde tussen deze en een Supermicro case, welke eigenlijk niet in mijn rack pastte. nu toch de knoop maar doorgehakt en voor de inter-tech case gegaan, welke als nadeel heeft dat er een 2u koeleroplossing genomen moet worden voor een 4u kast, maar vooral wel in mij wandrack past

Deze post nu aangepast naar mijn rig in aanbouw, wellicht dat het verder een weiniginformatieve post is, excuses daarvoor. Commentaar is altijd welkom


Na incidenteel hier meegelezen te hebben ben ik het volgende van plan:

#	Product	Prijs	Subtotaal
2	Intel Xeon E5-2695 v3 Boxed ES van ebay	€ 250,00	€ 500,00
1	Supermicro X10DRi	€ 388,25	€ 388,25
1	Inter-Tech IPC 4U-4408	€ 219,99	€ 219,99
2	Supermicro SNK-P0048AP4	€ 31,50	€ 63,-
4	Samsung M393A2G40EB1-CPB	€ 186,82	€ 747,28
1	Aqua-Computer kryoM.2 PCIe 3.0 x4 adapter for M.2 NGFF PCIe SSD, M-Key	€ 0,-	€ 0,-
1	Corsair AX860i	€ 207,50	€ 207,50
1	Samsung 960 EVO 500GB	€ 229,90	€ 229,90
Bekijk collectie Importeer producten		Totaal	nvt

Veel spullen van de V&A gehaald, CPU's van ebay. wachten is nu alleen nog op Cashflow voor moederbord (en dan mogen er nog wat 8TB schijven in), de rest is onderweg of reeds gearriveerd

Het geheel zou hierin moeten:

[afbeelding]

Een patchkast is niet bedoeld om servers in te plaatsen. Als het al past, hoe wil je dan bij de kabels aan de achterkant komen? Er bestaan wel serverbehuizingen met Front I/O om dat op te lossen, maar niets waar jouw setup in past.

[Vorkie]

@Giordino Die patchkast lijkt niet heel diep, die kast die je gekocht hebt is 52cm diep, hoe ga je airflow creëren voor alles? (en dan bedoel ik niet ventilatoren erin bouwen, maar als je de kast dicht doet. Server zuigt het van voren aan.

[dewfuz]

Voeding was vooral kwestie van wat is een Platinum voeding en heeft 2stuks EPS4+4 aansluitingen en staat voor relatief weinig op de V&A. Deze komt voor 167 van omni en paste daarmee tezamen met de 4u case in het budget van het overwogen alternatief (supermicro 842tq 800nogwattes). Deze voeding bied Platinum ipv bronze en logic link als extratjes.

Het is juist de vragen die jullie stellen waarover ik onzeker was in mijn post voor de edit. Daarin gaf ik aan dat ik in mijn rack 521mm ruimte had en dat die supermicro case dat dus volledig innam. Ik zou dan wel full size koelers kunnen plaatsen.

In tegenstelling tot wat tweakers zegt en in tegenstelling tot de supermicro case is die intertech case maar 400mm(+38mm vooruitstekende handgrepen) diep wat dus 120mm voor airflow laat. De zijkanten van het rack kunnen eraf. Dus daar kan ik ook prima bij met 1 hand 3xutp naar patchpaneel + 1 prikkelkabel mee prikken. Vanaf dan starten met IPMI

Het nadeel is dat er dus 2u koelers op moeten. Maar ook die van de V&A kunnen halen wat een extra Pre voor deze case was.

Jullie punten zijn dus volledig valide maar ik denk ze met deze case dus op te kunnen lossen.

[Vorkie]

Giordino schreef op zondag 20 augustus 2017 @ 20:06:
....

Het is juist de vragen die jullie stellen waarover ik onzeker was in mijn post voor de edit. Daarin gaf ik aan dat ik in mijn rack 521mm ruimte had en dat die supermicro case dat dus volledig innam. Ik zou dan wel full size koelers kunnen plaatsen.

In tegenstelling tot wat tweakers zegt en in tegenstelling tot de supermicro case is die intertech case maar 400mm(+38mm vooruitstekende handgrepen) diep wat dus 120mm voor airflow laat. ....
...

Inter-Tech IPC 4U-4408. Vormfactor: Rack, Soort: Server, Materiaal: Staal. Geïnstalleerde ventilators achterkant: 2x 80 mm. Supported hard disk drive sizes: 2.5,3.5''. LED-indicatoren: HDD, Netwerk, Stroom. Breedte: 480 mm, Diepte: 520 mm, Hoogte: 178 mm

Van Bol.com

Breite: 48 cm
Tiefe: 52 cm
Höhe: 17.8 cm

van https://www.kl-electronic...il&s_supplier_aid=5315636

En dan lees ik op de site van de fabrikant inderdaad:
178 x 481 x 438mm

https://www.inter-tech.de...ipc/storage-cases/4u-4408

Dus, laten we hopen dat de fabrikant zelf gelijk heeft

Moederbord past er precies in dus goed opgelet. (1.5cm vrij, in de kast kan 30,5 x 34,5, moederbord is 30,5x33,0)

[dewfuz]

Vorkie schreef op zondag 20 augustus 2017 @ 20:20:
En dan lees ik op de site van de fabrikant inderdaad:
178 x 481 x 438mm

https://www.inter-tech.de...ipc/storage-cases/4u-4408

Dus, laten we hopen dat de fabrikant zelf gelijk heeft

Moederbord past er precies in dus goed opgelet. (1.5cm vrij, in de kast kan 30,5 x 34,5, moederbord is 30,5x33,0)

https://www.inter-tech.de...ical-drawing-4u-4408/file

Daaruit blijkt ook de 400 mm diep + 38mm voor de Handvaten, Moerderbord grootte is gewoon E-ATX spec, Op tekening lijkt daadwerkelijk nog wat meer ruimte aan de voorkant (beyound die 34.5 mm die ze voor moederbord opgeven).

Het geheel moet straks mijn Tweak Gbit uplink gaan staan routen op preferabel 2 wan adressen (concurent en rechtoe rechtaan wan), Van mijn HDHomeRun met ziggo in zijn kont tot 4 TV Streams Transcoden. Voorzien in de verdere mediabehoeften door het huis. In de verdere toekomst een groeiend aantal IPCam streams verwerken (Die bovenste netgear is een POE Switch, en zit hier vlak onder het dak, dus vanonder de pannen kan ik alle hoeken van het huis bereiken)

Daarnaast willen we op het werk meer devops achtige dingen gaan doen en moet deze machine een POC gaan worden voor de machineś die wij (als dev) onder eigen beheer willen gaan houden.

Dat die procś dat met 2 vingers in de neus kunnen.. Prima toch.. Een beetje headroom vind ik niet erg. Verwacht dat dit de komende 5+ jaar zal blijven draaien.

[dewfuz]

Giordino schreef op zondag 20 augustus 2017 @ 22:09:
[...]


https://www.inter-tech.de...ical-drawing-4u-4408/file

Daaruit blijkt ook de 400 mm diep + 38mm voor de Handvaten, Moerderbord grootte is gewoon E-ATX spec, Op tekening lijkt daadwerkelijk nog wat meer ruimte aan de voorkant (beyound die 34.5 mm die ze voor moederbord opgeven).

Heb het spul inmiddels draaien, kon een tweedehands x10dri-t nog net binnen budget passend krijgen. Net ook in mn rek gehangen.. Istie gewoon ~ 485mm diep.. ok nu past nog steeds, maar zwaar dat die specs dus nerges kloppen


Edit: inter tech lijkt in communicatie aan te geven toch echt 400 mm diep in voorraad te hebben. Byzonder. Wellicht heb ik een refurbished model gekregen met de voorkant van een 4408. Maar kast van ander model ?! Wazig .. erg wazig

[ Voor 14% gewijzigd door dewfuz op 25-08-2017 18:49 ]

[chronoz]

Wat is jullie ervaring met Engineering Samples trouwens?

Ze kosten echt 3x niets op eBay.

http://www.ebay.nl/itm/In...ich-2628L-v4/311937557588

[|sWORDs|]

chronoz schreef op zaterdag 26 augustus 2017 @ 21:06:
Wat is jullie ervaring met Engineering Samples trouwens?

Ze kosten echt 3x niets op eBay.

http://www.ebay.nl/itm/In...ich-2628L-v4/311937557588

Het probleem is dat je op de meeste borden geen microcode updates krijgt en die wel nodig hebt om geen PSOD's te krijgen, zeker met v4's. Ook werken ze niet op alle borden (Intel, Asus, Supermicro, Asrock en Gigabyte meestal geen probleem.) en zit je meestal met lage base frequencies (jouw link is bijvoorbeeld 1.5GHz).

Maar er zijn hier meerderen die met ES CPU's draaien, waaronder ik met dual E5-2690 ES v3's (12 core, 2.4GHz, 2.6 turbo) op een Supermicro bord en krijg geen microcode updates. @FireDrunk heeft v4's op een Intel bord en lijkt wel microcode updates te krijgen.

[ Voor 22% gewijzigd door |sWORDs| op 26-08-2017 22:07 ]

[chronoz]

Ik heb de volgende bestelling geplaatst:
* 2x Intel® Xeon® Prozessor E5-2628L v4
* Supermicro: https://www.amazon.it/gp/product/B005N8VQ1G

Ik heb mijn twijfel bij de laatste gezien de gemiddelde verkoopprijs €110 is en hij onder antennes verkocht wordt.

[ Voor 83% gewijzigd door chronoz op 28-08-2017 02:57 ]

[gewooneu]

Wie draait er een Intel nuc 7th gen met een Sata HDD? Wil ook een intelnuc i5 kopen, maar weet niet of de Sata hdd goed herkent wordt met ESXI 6.5. Diegene die het goed heeft draaien, welke merk disk gebruik je?

[redfoxert]

gewooneu schreef op woensdag 6 september 2017 @ 17:49:
Wie draait er een Intel nuc 7th gen met een Sata HDD? Wil ook een intelnuc i5 kopen, maar weet niet of de Sata hdd goed herkent wordt met ESXI 6.5. Diegene die het goed heeft draaien, welke merk disk gebruik je?

De disk is totaal niet van belang (voor compatibility). De storage controller is waar het om draait.

[k_delaat]

Mijn huidige ESXi server uit 2007 is nodig aan vervanging toe om de volgende redenen:

• Traag
• Verbruikt veel energie
• Opslag is beperkt

Nu wil ik dus een volledig nieuwe server in elkaar zetten en zou hier graag wat advies van jullie willen.

Allereerst de huidige setup:

• Dual Xeon E5335
• 12 GB FB ram
• SRCSAS18E SAS Raid controller
• 2x ST2000DM001 2TB disks in RAID1
• 5x WD20EFRX 2TB disks in RAID5

Hierop draaien de volgende VMs:

• VyOS (virtuele router/firewall)
• Windows 2K8R2 domain controller / SQL server
• Windows 2K8R2 secondary domain controller
• Windows 2K8R2 Exchange 2010
• Windows 2K8R2 data server
• Ubuntu

Mijn wensen voor het nieuwe systeem zijn vrij simpel. Het moet hetzelfde kunnen als nu, maar dan wat soepeler lopen, meer ruimte voor data en energie verbruik moet flink omlaag. (ESXi geeft nu een idle verbruik van 240W aan)

Om dit voor elkaar te krijgen denk ik erover om een ZFS VM te creeren die de datastorage voor z'n rekening kan nemen. Hiervoor heb ik de volgende setup in gedachten:

#	Product	Prijs	Subtotaal
1	Intel Xeon E3-1270 v6 Boxed	€ 349,-	€ 349,-
1	Supermicro X11SSL-CF	€ 275,25	€ 275,25
2	Samsung M391A2K43BB1-CRC	€ 167,51	€ 335,02
1	Fractal Design Define R5 Zwart	€ 97,01	€ 97,01
1	Seasonic G-series 360 watt	€ 61,-	€ 61,-
3	WD Red WD40EFRX, 4TB	€ 129,95	€ 389,85
5	WD Red WD20EFRX, 2TB	€ 0,00	€ 0,00
2	Delock 83392	€ 21,25	€ 42,50

Hiervoor wil ik zowel de onboard SATA poorten als ook de onboard SAS controller aan de ZFS VM doorgeven
Hier kan ik dan 2 RAID-Z vdevs maken (3x4 + 5x2) = netto storage 16TB
Ik begrijp dat ik hiervoor nog wel een NVMe disk moet hebben als datastore waarop de ZFS VM kan staan. De overige VMs wil ik via NFS of iSCSI op de spinning disks opslaan.
Welke NVMe disk ik hiervoor wil gebruiken ben ik nog niet uit.
Daarnaast zijn er nog mogelijkheden voor een SSD voor SLOG en L2ARC, ook hier ben ik nog niet uit.
Ik heb nog wel een tweetal SSD's liggen (gebruikt in laptop), maar weet niet zeker of die hiervoor geschikt zijn:

• OCZ Vertex 3 SSD 128GB 2011
• Dell 64GB Mobility Solid State Drive (geen trim) 2009

Verder heb ik nog een vraag mbt de data storage. Nu heb ik meerdere VMDK disks aan een Win2K8 VM gegeven. Deze zijn dmv spanned volume gecombineerd tot 1 grote logical disk. En de data die hier op staat wordt dmv DFSR gerepliceerd (gedeeltelijk) naar een 2e server die bij mijn ouders staat.
In de nieuwe situatie moet deze DFSR ook blijven werken, maar hoe dit het beste kan samen met ZFS ben ik nog niet uit.

[ Voor 4% gewijzigd door k_delaat op 08-09-2017 14:18 ]

[|sWORDs|]

k_delaat schreef op vrijdag 8 september 2017 @ 13:41:
Mijn huidige ESXi server uit 2007 is nodig aan vervanging toe om de volgende redenen:

• Traag
• Verbruikt veel energie
• Opslag is beperkt

Nu wil ik dus een volledig nieuwe server in elkaar zetten en zou hier graag wat advies van jullie willen.

Allereerst de huidige setup:

• Dual Xeon E5335
• 12 GB FB ram
• SRCSAS18E SAS Raid controller
• 2x ST2000DM001 2TB disks in RAID1
• 5x WD20EFRX 2TB disks in RAID5

Hierop draaien de volgende VMs:

• VyOS (virtuele router/firewall)
• Windows 2K8R2 domain controller / SQL server
• Windows 2K8R2 secondary domain controller
• Windows 2K8R2 Exchange 2010
• Windows 2K8R2 data server
• Ubuntu

Mijn wensen voor het nieuwe systeem zijn vrij simpel. Het moet hetzelfde kunnen als nu, maar dan wat soepeler lopen, meer ruimte voor data en energie verbruik moet flink omlaag. (ESXi geeft nu een idle verbruik van 240W aan)

Om dit voor elkaar te krijgen denk ik erover om een ZFS VM te creeren die de datastorage voor z'n rekening kan nemen. Hiervoor heb ik de volgende setup in gedachten:

#	Product	Prijs	Subtotaal
1	Intel Xeon E3-1270 v6 Boxed	€ 349,-	€ 349,-
1	Supermicro X11SSL-CF	€ 275,25	€ 275,25
2	Samsung M391A2K43BB1-CRC	€ 167,51	€ 335,02
1	Fractal Design Define R5 Zwart	€ 97,01	€ 97,01
1	Seasonic G-series 360 watt	€ 61,-	€ 61,-
2	Delock 83393	€ 26,-	€ 52,-
3	WD Red WD40EFRX, 4TB	€ 129,95	€ 389,85
5	WD Red WD20EFRX, 2TB	€ 0,00	€ 0,00

Hiervoor wil ik zowel de onboard SATA poorten als ook de onboard SAS controller aan de ZFS VM doorgeven
Hier kan ik dan 2 RAID-Z vdevs maken (3x4 + 5x2) = netto storage 16TB
Ik begrijp dat ik hiervoor nog wel een NVMe disk moet hebben als datastore waarop de ZFS VM kan staan. De overige VMs wil ik via NFS of iSCSI op de spinning disks opslaan.
Welke NVMe disk ik hiervoor wil gebruiken ben ik nog niet uit.
Daarnaast zijn er nog mogelijkheden voor een SSD voor SLOG en L2ARC, ook hier ben ik nog niet uit.

Ik heb nog wel een tweetal SSD's liggen (gebruikt in laptop), maar weet niet zeker of die hiervoor geschikt zijn:

• OCZ Vertex 3 SSD 128GB 2011
• Dell 64GB Mobility Solid State Drive (geen trim) 2009

Verder heb ik nog een vraag mbt de data storage. Nu heb ik meerdere VMDK disks aan een Win2K8 VM gegeven. Deze zijn dmv spanned volume gecombineerd tot 1 grote logical disk. En de data die hier op staat wordt dmv DFSR gerepliceerd (gedeeltelijk) naar een 2e server die bij mijn ouders staat.
In de nieuwe situatie moet deze DFSR ook blijven werken, maar hoe dit het beste kan samen met ZFS ben ik nog niet uit.

Ik zie een paar zaken die je zou kunnen overwegen om geld en energie te besparen:
1) Wacht op de nieuwe generatie CPU, als er 6 cores komen gaan de quad cores waarschijnlijk in prijs omlaag.
2) Verkoop de 5x2TB en haal nog 3x4TB, dan hoef je ook geen twee controllers door te geven of een NVMe drive toe te voegen.
3) Neem sas->sata kabels van 50cm, de behuizing is maar 46cm hoog inclusief noppen, de connector zit aan de juiste kant en de schijven komen maar tot 2/3e van de behuizing.
pricewatch: Delock 83392

[k_delaat]

|sWORDs| schreef op vrijdag 8 september 2017 @ 14:17:
[...]

Ik zie een paar zaken die je zou kunnen overwegen om geld en energie te besparen:
1) Wacht op de nieuwe generatie CPU, als er 6 cores komen gaan de quad cores waarschijnlijk in prijs omlaag.
2) Verkoop de 5x2TB en haal nog 3x4TB, dan hoef je ook geen twee controllers door te geven of een NVMe drive toe te voegen.
3) Neem sas->sata kabels van 50cm, de behuizing is maar 46cm hoog inclusief noppen, de connector zit aan de juiste kant en de schijven komen maar tot 2/3e van de behuizing.
pricewatch: Delock 83392

1) Ik dacht dat de v6 al de nieuwste generatie was. Maar jij zegt dat er ook 6C E3-1200 aan komen en verwacht dat de 4C dan voordeliger worden? Het heeft geen haast, dus nog even wachten kan altijd.
2) Verwacht je dat ik de 5x2TB goed kan verkopen? En ook nog zoveel voor terug krijg dat ik hiervoor 3x4TB kan kopen?
3) Die kabels was ik inderdaad net zelf ook al achter gekomen, ik had gewoon de eerste de beste gepakt.

[|sWORDs|]

k_delaat schreef op vrijdag 8 september 2017 @ 14:25:
[...]


1) Ik dacht dat de v6 al de nieuwste generatie was. Maar jij zegt dat er ook 6C E3-1200 aan komen en verwacht dat de 4C dan voordeliger worden? Het heeft geen haast, dus nog even wachten kan altijd.
2) Verwacht je dat ik de 5x2TB goed kan verkopen? En ook nog zoveel voor terug krijg dat ik hiervoor 3x4TB kan kopen?
3) Die kabels was ik inderdaad net zelf ook al achter gekomen, ik had gewoon de eerste de beste gepakt.

1) Intel heeft nog niets over de e3 v7 losgelaten, maar ze zijn al tijden bezig om te voorkomen dat i5/i7 van de e3 markt snoept. Ik kan me dus niet anders voorstellen dan dat ze vrijwel gelijk komen.
2) Geen idee, maar 6 HD's + SATA SSD vs 8 HD's + NVMe scheelt wel weer in de energie, warmte en herrie. En zouden drie schijven - retour vijf tweedehands echt duurder zijn dan een NVMe drive (tenzij je het over een instapper hebt)?

Als je trouwens graag DFS wil blijven gebruiken, waarom dan geen passthrough van de controller naar de Windows 2008R2 Data VM? Dat scheelt weer twee tussenliggende filesystems en virtual networking traffic plus virtual storage controller traffic en een berg geheugen.

[ Voor 16% gewijzigd door |sWORDs| op 08-09-2017 14:50 ]

[StrikeByte]

Is er iemand die ervaring heeft met de HPE ML10 gen 9 (xeon e3 1225v5) icm ESXI 6.5?
werkt esxi out of the box en wat is het idle verbruik.

#	Product	Prijs	Subtotaal
1	HP Proliant Enterprise ML10 Gen9 3GHz E3-1225V5 300W Tower (4U)	€ 434,34	€ 434,34
Bekijk collectie Importeer producten		Totaal	€ 434,34

[ Voor 84% gewijzigd door StrikeByte op 09-09-2017 16:39 ]

[Verwijderd]

sl0n schreef op vrijdag 14 juli 2017 @ 20:40:
[...]


Weet je misschien hoeveel "watt" deze setup gebruikt?

Eindelijk de tijd gevonden (gemaakt) om er even een meter tussen te zetten. Deze setup trekt rond de 50W uit de muur.
Ik heb proxmox 5 geinstalleerd met ZFS pool en op dit moment draaien er 2 VM's en 2 CT's
VM's zijn beide NethServer (CentOS based). 1 als Gateway met 1-4GB geheugen, 40GB diskruimte en 1 als DC (Samba 4) met 4-8GB geheugen, 600GB diskruimte.
De 2 CT's zijn Debian 8 waar ik de Unifi controller op draai en op de andere draait mijn ebook bibliotheek via Calibre.

[k_delaat]

|sWORDs| schreef op vrijdag 8 september 2017 @ 14:40:
[...]

Als je trouwens graag DFS wil blijven gebruiken, waarom dan geen passthrough van de controller naar de Windows 2008R2 Data VM? Dat scheelt weer twee tussenliggende filesystems en virtual networking traffic plus virtual storage controller traffic en een berg geheugen.

Omdat ik dan de voordelen van ZFS mis. Ik zat zelf te denken aan: ZFS -> iSCSI -> Win2K8 VM -> DFSR. Mocht dat werken dan lijkt mij dat beter dan ZFS -> NFS -> ESXI -> VMDK -> Win2K8 VM -> DFSR omdat hier wel erg veel lagen tussen zitten.

[|sWORDs|]

k_delaat schreef op zondag 10 september 2017 @ 09:17:
[...]

Omdat ik dan de voordelen van ZFS mis. Ik zat zelf te denken aan: ZFS -> iSCSI -> Win2K8 VM -> DFSR. Mocht dat werken dan lijkt mij dat beter dan ZFS -> NFS -> ESXI -> VMDK -> Win2K8 VM -> DFSR omdat hier wel erg veel lagen tussen zitten.

Er zit dan wel erg veel tussen:
Fysieke controller
ZFS
VMXNET3
iSCSI
VMXNET3
NTFS

Wat beter is dan:
Fysieke controller
ZFS
VMXNET3
iSCSI
VMFS
iSCSI
PVSCSI
NTFS

Maar dit is nog minder:
Fysieke controller
NTFS

[ Voor 9% gewijzigd door |sWORDs| op 10-09-2017 09:45 ]

[k_delaat]

|sWORDs| schreef op zondag 10 september 2017 @ 09:41:
[...]

Er zit dan wel erg veel tussen:
Fysieke controller
ZFS
VMXNET3
iSCSI
VMXNET3
NTFS

[...]

Dit was mijn idee inderdaad.

|sWORDs| schreef op zondag 10 september 2017 @ 09:41:
[...]

Maar dit is nog minder:
Fysieke controller
NTFS

Ik begrijp dat dit veel minder is, maar heeft ook geen enkele bescherming in de vorm van RAID of iets dergelijks

[|sWORDs|]

k_delaat schreef op zondag 10 september 2017 @ 09:52:
[...]

Dit was mijn idee inderdaad.


[...]

Ik begrijp dat dit veel minder is, maar heeft ook geen enkele bescherming in de vorm van RAID of iets dergelijks

Natuurlijk wel, je kunt in Windows software RAID5 aanmaken, of HW RAID als je een echte RAID controller zou nemen.

[Verwijderd]

En dan wil je toch de mogelijkheid hebben om een aantal VM's te draaien, snapshots te kunnen nemen van je systeem.... oh wacht.... toch maar een VM omgeving....

[|sWORDs|]

Verwijderd schreef op zondag 10 september 2017 @ 13:08:
En dan wil je toch de mogelijkheid hebben om een aantal VM's te draaien, snapshots te kunnen nemen van je systeem.... oh wacht.... toch maar een VM omgeving....

Dit gaat over een VM met een controller in VT-d voor data, niet over VM storage en niet over een fysieke machine.

[ Voor 4% gewijzigd door |sWORDs| op 10-09-2017 14:17 ]

[Verwijderd]

Duidelijk, maar dan nog ga je een berg flexibiliteit inleveren. Een maal via VT-d beschikbaar is de de VT-d hardware alleen beschikbaar voor die ene VM. Of je moet er een NAS achtige oplossing op zetten en dan de diskruimte weer doorgeven aan andere instances.

[|sWORDs|]

Verwijderd schreef op zondag 10 september 2017 @ 15:01:
Duidelijk, maar dan nog ga je een berg flexibiliteit inleveren. Een maal via VT-d beschikbaar is de de VT-d hardware alleen beschikbaar voor die ene VM. Of je moet er een NAS achtige oplossing op zetten en dan de diskruimte weer doorgeven aan andere instances.

Dat is exact wat ik doe, een VM met SMB/NFS (XPenology) voor data en backup en de meeste virtuele machines op local storage. Nou heb ik ook nog iSCSI op die VM en VSAN, maar dat is meer voor testen van shared storage.
In een hoop omgevingen is tegenwoordig shared storage overrated, je kunt met vrijwel alles ook redundantie met meerdere virtuele machines bouwen. Zo ziet mijn omgeving er ongeveer uit:

ESXi1:
vCenter (Master)
Router1 (pfSense met HAproxy in HA)
DC1 (+DHCP&DNS)
NAS1 (XPenology in HA)
View Connection Server 1
App Volumes 1
Identity Manager 1
SQL1
Unified Access Gateway 1
VSAN Witness

ESXi2 (VSAN ROBO):
vCenter (Slave)
Zelfde rijtje, maar dan 2.

ESXi3 (VSAN ROBO):
vCenter (Witness)
Zelfde rijtje, maar dan 3, echter geen DC, SQL, router of NAS.

Waarbij eigenlijk de virtuele machines van ESXi2 en 3 in een cluster met anti affinity rules staan (gelijke machines nooit op dezelfde host) en daar allemaal op VSAN staan. (Maar dat zou net zo goed local kunnen zijn.)

vCenter, Router, DC met DNS en DHCP, NAS en SQL hebben hun eigen replicatie. View, App Volumes, UAG en Identity Manager gebruiken HAproxy als loadbalancer/reverse proxy en behalve UAG (geen data) SQL alwaysOn databases.
NFS als een copy from share voor gold images en App Volumes (geen enkele VM leest daar van, er is een automatische kopie op local storage).

Combineer dat met backup naar de NAS voor alle persitente virtuele machines en je hebt een beetje het beste van beide werelden. De performance van local storage, nog steeds snapshots/backups en redundantie. En mocht ik een VM tegenkomen die zelf niet kan repliceren dan kan die op VSAN.

Persistent desktops/RDSH virtuele machines staan op VSAN (+backup naar NFS), non persistent op local storage (ESXi1 en geen backup, ik kan ze toch zo via de master hergenereren.)

Qua flexibiliteit vind ik het juist top, shared data via SMB. Local storage via storage groups voor virtuele machines. Die laatste heeft alleen geen flexibiliteit tussen hosts, maar in mijn model hebben ze allemaal toch ongeveer even veel storage nodig.

[ Voor 8% gewijzigd door |sWORDs| op 10-09-2017 23:56 ]

[Carharttguy]

Martiveen schreef op maandag 27 februari 2017 @ 15:48:
[...]

Zelf gebruik ik voor zoiets de pricewatch: ASRock DeskMini 110. Kan je zelf een cpu uitzoeken. Is verder ruimte voor een m2 ssd en 2x 2,5" disk

Beetje oude quote, maar werkt dit gewoon? CPU/RAM/Schijfje erin gooien en gaan?

Ik zou graag een thuis VMWare setup hebben, ben alleen die op het werk gewoon maar dat zijn HP ProLiant servers.
Ik heb geen superstraf systeem nodig, maar ik wil er gewoon niet te veel aan prutsen, gewoon installeren en gaan.
De startpost van dit topic schrikte me wat af, blijkbaar werkt veel consumer apparatuur niet out of box? De OP is natuurlijk al jaren oud, is dit nu nog het geval?

Thanks

[Martiveen]

Carharttguy schreef op vrijdag 15 september 2017 @ 20:44:
[...]


Beetje oude quote, maar werkt dit gewoon? CPU/RAM/Schijfje erin gooien en gaan?

Ik zou graag een thuis VMWare setup hebben, ben alleen die op het werk gewoon maar dat zijn HP ProLiant servers.
Ik heb geen superstraf systeem nodig, maar ik wil er gewoon niet te veel aan prutsen, gewoon installeren en gaan.
De startpost van dit topic schrikte me wat af, blijkbaar werkt veel consumer apparatuur niet out of box? De OP is natuurlijk al jaren oud, is dit nu nog het geval?

Thanks

Gelukkig heeft tweakers meldingen Maar het werkt idd gewoon. Ik was ook heel erg verbaasd dat het zo makkelijk kan zijn! Ben inmiddels wel afgestapt van VMWare maar dat was meer persoonlijke voorkeur.
Let wel op dat als je een stil systeem witl hebben dat de stock koeler niet top is. Maar als dat geen probleem is zou ik t gewoon zo laten

[Carharttguy]

Mede Tweakers, zou deze werken: pricewatch: Shuttle XPC slim Barebone DH170 ? Heeft een handige formfactor voor mijn situatie.