Het grote zuinige server topic - deel 2

[FireDrunk]

Er zijn toch wel behuizingen met 2 x 5.25" bays, daar kan je weer 6x2.5" bays in stoppen.

[SirNobax]

wessel145 schreef op dinsdag 16 oktober 2018 @ 15:14:
Ondertussen heb ik ook nog zitten kijken naar alternatieve Operating Systems [..] het kunnen gebruiken van apt -get, voor bijvoorbeeld powertop), maar inderdaad, het over time kunnen uitbreiden van de array is ook een vereiste

Inkopper is Proxmox.

Debian met ZFS en een puike schil om KVM/LXC heen om VM's en Linux containers te beheren. ZFS heeft o.a. bit-rot detection en pools kan je ook blijven uitbreiden, mits je geen RAIDZ (Raid5/6) gebruik.

[LigeTRy]

Avondje testen om het e.e.a uit te sluiten:


Ik geb getest met mijn ASrock moederbord en met een MSI welke ik nog had liggen (Want paste niet in m'n kast), overige specs in eerdere post:

MSI: Zonder HDD's: 8.4 Watt
MSI: Met HDD's (3): Spin up (idle): 27 Watt
MSI: Met HDD's (3): Spin Down: 11.8 Watt

ASR: Zonder HDD's: 9 Watt
ASR: Met HDD's (3): Spin up (idle): 28.4 Watt
ASR: Met HDD's (3): Spin Down: 12.7 Watt
ASR: Met HDD's (4): Spin Down: 14.6 Watt

OS: Unraid, Array Down, States getest met hdparm

Het MSI moederbord had maar 4 SATA poorten en 1 was nodig voor mijn SSD vandaar de extra test op het ASR bord met 4 HDD's (+ssd)
Voor de rest heb ik alleen de essentiele componenten aangesloten (power button, cpu- en 1 case-fan)

Moet toch zeggen dat ik een stuk tevredener ben met deze resultaten dan welke ik eerder had. Ik ga binnenkort de CPU koeler vervangen door een passieve. Het omruilen van mijn ASR moederbord voor een Fujitsu ben ik ineens niet meer zo van overtuigd. Of denken jullie dat ik daar nog een grote winst mee kan halen? Ik denk dat ik beter mijn HDD's op ten duur kan gaan vervangen voor 2,5" varianten.

SirNobax schreef op dinsdag 16 oktober 2018 @ 20:50:
[...]

Inkopper is Proxmox.

Debian met ZFS en een puike schil om KVM/LXC heen om VM's en Linux containers te beheren. ZFS heeft o.a. bit-rot detection en pools kan je ook blijven uitbreiden, mits je geen RAIDZ (Raid5/6) gebruik.

Dit heb ik al vaak voorbij horen komen, maar ik heb de beslissing nog niet durven maken vanwege mijn gebrek aan ZFS kennis. Aangezien raid5/6 niet uit te breiden is, welke configuratie zou ik dan moeten pakken met 4 (morgen naar 5) HDD's en 1 SSD? met natuurlijk een oogje op dataveiligheid vs capaciteit (al komt er ook een offsite backup van de belangrijke dingetjes)?

[ Voor 19% gewijzigd door LigeTRy op 16-10-2018 21:24 ]

[pimlie]

FireDrunk schreef op dinsdag 16 oktober 2018 @ 20:28:
Er zijn toch wel behuizingen met 2 x 5.25" bays, daar kan je weer 6x2.5" bays in stoppen.

Neem aan dat je 6x per 5.25" bedoelt? Pas dan wel op, want in een 6x2.5" passen geen 15mm disks, dan moet je voor een 4x2.5" gaan.

[mrmrmr]

wessel145 schreef op dinsdag 16 oktober 2018 @ 21:14:
Moet toch zeggen dat ik een stuk tevredener ben met deze resultaten dan welke ik eerder had.

Wat heb je nu anders gedaan dan voorheen waardoor het verbruik omlaag ging?

Ik ga binnenkort de CPU koeler vervangen door een passieve. Het omruilen van mijn ASR moederbord voor een Fujitsu ben ik ineens niet meer zo van overtuigd. Of denken jullie dat ik daar nog een grote winst mee kan halen? Ik denk dat ik beter mijn HDD's op ten duur kan gaan vervangen voor 2,5" varianten.

Relatief gezien kun je met een zuinige Fujitsu een grote winst behalen (10-50%). Als je het vergelijkt met een systeem met 4 stuks 3.5" 7200 rpm disks, dan zijn dat de grootverbruikers en dan is de winst relatief kleiner. De grootste winst bereik je door deze hard disks te vervangen. Je kunt ze bijvoorbeeld herbestemmen als backup disks en vanaf een Sharkoon Quickport offline gebruiken. Als de data veel waard is kan de disk ook veilig op een andere locatie worden opgeborgen. Het voordeel van offline backup is dat malware na een besmetting de bestanden niet kan aanpassen.

[LigeTRy]

mrmrmr schreef op woensdag 17 oktober 2018 @ 04:05:
[...]
Wat heb je nu anders gedaan dan voorheen waardoor het verbruik omlaag ging?

Als ik eerlijk ben heb ik echt geen flauw idee waardoor het is gekomen, het enige wat veranderd is aan mijn configuratie is dat ik 2 casefans niet heb aangesloten (fans die nu draaien is 1 fan out en de intel stock cpu fan), ik moet nog testen hoe dit uitpakt met de temps van mijn HDD's.

mrmrmr schreef op woensdag 17 oktober 2018 @ 04:05:
Relatief gezien kun je met een zuinige Fujitsu een grote winst behalen (10-50%). Als je het vergelijkt met een systeem met 4 stuks 3.5" 7200 rpm disks, dan zijn dat de grootverbruikers en dan is de winst relatief kleiner. De grootste winst bereik je door deze hard disks te vervangen. Je kunt ze bijvoorbeeld herbestemmen als backup disks en vanaf een Sharkoon Quickport offline gebruiken. Als de data veel waard is kan de disk ook veilig op een andere locatie worden opgeborgen. Het voordeel van offline backup is dat malware na een besmetting de bestanden niet kan aanpassen.

Ik heb wel het besluit genomen om mijn mobo/kast/cpu koeler te gaan omruilen. Dit kost mij geen geld (kan de boel nog terugbrengen ) alleen wat extra moeite.

#	Product	Prijs	Subtotaal
1	Fujitsu D3644-B	€ 149,-	€ 149,-
1	Fractal Design Node 804	€ 106,-	€ 106,-
1	Arctic Freezer 33	€ 23,99	€ 23,99
Bekijk collectie Importeer producten		Totaal	€ 278,99

De keuze voor een semi passieve fan ipv een volledig passieve is het feit dat ik weinig casefans ga gebruiken, mocht ik gaan transcoden met plex dan kan de temp in mijn kast flink oplopen, dan mag die van mij best draaien om de warmte af te voeren.

[mdbraber]

wessel145 schreef op woensdag 17 oktober 2018 @ 10:57:
[...]

Ik heb wel het besluit genomen om mijn mobo/kast/cpu koeler te gaan omruilen. Dit kost mij geen geld (kan de boel nog terugbrengen ) alleen wat extra moeite.

#~	Product~	Prijs~	Subtotaal~
1~	Fujitsu D3644-B~	€ 149,-~	€ 149,-~
1~	Fractal Design Node 804~	€ 106,-~	€ 106,-~
1~	Arctic Freezer 33~	€ 23,99~	€ 23,99~
Bekijk collectie Importeer producten~		Totaal~	€ 278,99~

De keuze voor een semi passieve fan ipv een volledig passieve is het feit dat ik weinig casefans ga gebruiken, mocht ik gaan transcoden met plex dan kan de temp in mijn kast flink oplopen, dan mag die van mij best draaien om de warmte af te voeren.

Zelfde config hier, met een andere kast - ik ben benieuwd hoe het bevalt! Ik heb ook de Artic Freezer 33 besteld en ben benieuwd of het idd goed werkt met semi-passieve...

[pimlie]

Begrijp ik goed uit het datasheet dat de pricewatch: Fujitsu D3644-B geen ipmi-achtige mogelijkheid heeft? Dus dat je je server niet op afstand kan rebooten?

[mdbraber]

pimlie schreef op woensdag 17 oktober 2018 @ 15:47:
Begrijp ik goed uit het datasheet dat de pricewatch: Fujitsu D3644-B geen ipmi-achtige mogelijkheid heeft? Dus dat je je server niet op afstand kan rebooten?

Geen IPMI, wel AMT/vPRO wat hetzelfde kan. Ik gebruik het thuis om mn headless server te kunnen rebooten of in het BIOS te komen bijv. Zie hier een uitleg over de verschillen: https://software.intel.co...-development/topic/295406

Btw, het kostte mij in het begin aardig wat tijd om te begrijpen hoe AMT precies werkt, maar dit tooltje (open source) maakt het allemaal super-makkelijk om een AMT sessie te starten (als je de access in je BIOS in het begin ingesteld hebt): http://www.meshcommander.com/home

[ Voor 17% gewijzigd door mdbraber op 17-10-2018 16:22 ]

[pimlie]

@mdbraber Ah mooi, thanks. Kan af en toe behoorlijk handig zijn dat remote rebooten

[Slayre]

Aangezien mijn fileserver toch alweer richting de 7-8 jaar erop heeft zitten. En lang niet het zuinigste object in mijn huis meer is, heb ik toch maar eens besloten om er een upgrade tegenaan te gooien.

Huidige setup:

#	Product	Prijs	Subtotaal
1	Intel Core i3-2120 Boxed	€ 0,-	€ 0,-
1	Asus P8H61-M PRO (B3)	€ 0,-	€ 0,-
8	Samsung HD204UI, 2TB	€ 0,-	€ 0,-
1	Delock PCI Express Card > 4 x USB 3.0	€ 23,55	€ 23,55
1	Antec Three Hundred	€ 79,95	€ 79,95
1	Intel Gigabit CT Desktop Adapter	€ 24,-	€ 24,-
1	Noctua NH-L9i	€ 39,71	€ 39,71
1	Kingston ValueRAM KVR1333D3N9K2/8G	€ 0,-	€ 0,-
1	HP P400	€ 602,82	€ 602,82
1	Samsung 830 series SSD 128GB	€ 0,-	€ 0,-
Bekijk collectie Importeer producten		Totaal	€ 770,03

Idle: ~70W Load: ~100+W
Windows 10 - Raid6

Ik wou met een nieuwe build eens een voor zuinige 2.5 disks gaan:

#	Product	Prijs	Subtotaal
1	Intel Celeron G3930 Tray	€ 29,95	€ 29,95
1	ASRock Rack C236 WSI	€ 220,16	€ 220,16
1	Fractal Design Node 304 Zwart	€ 82,-	€ 82,-
1	Startech.com 4x SATA Power Splitter Adapter Cable (PYO4SATA)	€ 5,45	€ 5,45
6	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 114,90	€ 689,40
1	Kingston ValueRAM KVR24E17D8/16	€ 177,-	€ 177,-
1	Mini-box picoPSU 90 + 80W Adapter Power Kit	€ 61,50	€ 61,50
1	Crucial MX500 2,5" 250GB	€ 54,50	€ 54,50
Bekijk collectie Importeer producten		Totaal	€ 1.319,96

En dan in combi met FreeNAS RAIDZ2, enige vraagjes waar ik nog tegenaanloop:
1: Is een Celeron rap genoeg voor FreeNAS/ZFS? Echt veel meer dan filesharing zal deze setup niet gaan doen.
2: Ik had berekend dat die piek bij startup rond 80W ligt, dus zou betreffende PSU het trekken, of liever toch iets zwaarder gaan?

[GioStyle]

1. Ik heb een G3220 voor mijn FreeNAS build en ik heb nog nooit een beperking gezien door de processor. Data serveren is niet cpu intensief.

2. Kijk even naar het vermogen op 5V aangezien 2.5” alleen op 5V draaien. Kijk of daar genoeg ruimte voor is.

[LigeTRy]

mdbraber schreef op woensdag 17 oktober 2018 @ 12:36:
[...]


Zelfde config hier, met een andere kast - ik ben benieuwd hoe het bevalt! Ik heb ook de Artic Freezer 33 besteld en ben benieuwd of het idd goed werkt met semi-passieve...

Mag ik vragen welke kast je gebruikt? Ik heb namelijk iets te overhaast naar de node 804 gekeken, de HDD slots hebben geen support voor 2.5", en aangezien ik die overstap wel ga maken heb ik geen zin om voor elke 2,5" een converter te moeten kopen. Zelf heb ik mijn oog laten vallen op de pricewatch: Silverstone Sugo SST-SG11B.
Enige grote nadeel wat ik van die kast heb kunnen vinden is de hoogte voor de processorkoeler deze mag max 82mm zijn. en de pricewatch: Arctic Freezer 33 die ik op het oog heb is toch bijna het dubbele (150mm). Volledig passief durf ik niet aan (47watt koelkapaciteit op de arctic Alpine 11 tegenover 65 watt tdp van m'n 8100). Misschien dat ik een cpu koeler koop die net past, en de fan er dan vanaf sloop of er zelf een passieve fan van maak.

[ Voor 26% gewijzigd door LigeTRy op 17-10-2018 23:26 ]

[mrmrmr]

SLAyRe schreef op woensdag 17 oktober 2018 @ 19:32:
En dan in combi met FreeNAS RAIDZ2, enige vraagjes waar ik nog tegenaanloop:
1: Is een Celeron rap genoeg voor FreeNAS/ZFS? Echt veel meer dan filesharing zal deze setup niet gaan doen.
2: Ik had berekend dat die piek bij startup rond 80W ligt, dus zou betreffende PSU het trekken, of liever toch iets zwaarder gaan?

1. Celeron is voldoende snel, vergeet de koeler niet.
2. Beter een PicoPSU 160-XT/120W adapter voor een 8 SATA bord.

Naar aanleiding van @GioStyle's punt:
De PicoPSU 80 of PicoPSU 90 ondersteunt 7A * 5V = 35W piekvermogen
6 x 2.5" disks vragen maximaal 6x6=36W.

De PicoPSU 160-XT ondersteunt 10A * 5V = 50W piekvermogen
8 x 2.5" disks vragen maximaal 6x8=48W.

Bij staggered starten kun je meer disks na elkaar laten starten met minder vermogen, maar dat kon ik niet vinden in de handleiding.

Het aanbevolen ECC geheugen is 2133 i.p.v. 2400.

- Supports DDR4 2400*/2133/1866/1600 ECC/non-ECC**
UDIMM memory
*Only E3-1200 v6 CPUs can support DDR4 2400
**Non-ECC UDIMM support Client OS only.

If there are memory errors...
1. Verify that the DIMM modules are properly seated in the slots.
2. Use recommended DDR4 2133 ECC/NonECC UDIMMs.

Als je niet per se twee LAN poorten nodig hebt zou ik kijken naar de Fujitsu D3417-B2 of D3644-B. Die zijn zuinig maar ze ondersteunen maximaal 6 x SATA.

[mdbraber]

wessel145 schreef op woensdag 17 oktober 2018 @ 23:09:
[...]


Mag ik vragen welke kast je gebruikt? Ik heb namelijk iets te overhaast naar de node 804 gekeken, de HDD slots hebben geen support voor 2.5", en aangezien ik die overstap wel ga maken heb ik geen zin om voor elke 2,5" een converter te moeten kopen. Zelf heb ik mijn oog laten vallen op de pricewatch: Silverstone Sugo SST-SG11B.
Enige grote nadeel wat ik van die kast heb kunnen vinden is de hoogte voor de processorkoeler deze mag max 82mm zijn. en de pricewatch: Arctic Freezer 33 die ik op het oog heb is toch bijna het dubbele (150mm). Volledig passief durf ik niet aan (47watt koelkapaciteit op de arctic Alpine 11 tegenover 65 watt tdp van m'n 8100). Misschien dat ik een cpu koeler koop die net past, en de fan er dan vanaf sloop of er zelf een passieve fan van maak.

Ik gebruik de Fractal Design Mini waar CPU koelers tot 160mm in passen. Let even op dat er een "Mini" en een "Mini C" zijn - de C variant is een stuk korter en heeft minder drive bays. Ik heb die Arctic Freezer Mini trouwens net binnen en dat is inderdaad een aardig groot ding :-) Wel de beste combi tussen actief/passief.

Ik heb overigens n.a.v. van de posts van @mrmrmr mijn PicoPSU 90 + 80W adapter vervangen door een een PicoPSU 160XT + 120W adapter. Ik heb nu 4x 2.5" HDD + 1x SSD + 1x m.2 SSD maar wil graag in de toekomst nog ruimte houden om er 2x 2.5" HDD extra in te hangen.

[ Voor 4% gewijzigd door mdbraber op 18-10-2018 08:00 ]

[mdbraber]

/EDIT: ik dacht dat AMT vPro v12 geen VLAN ondersteunde maar dit blijkt wel zo te zijn - in ieder geval afgaand op de documentatie

[ Voor 89% gewijzigd door mdbraber op 18-10-2018 22:32 ]

[Dreamvoid]

wessel145 schreef op woensdag 17 oktober 2018 @ 23:09:
Zelf heb ik mijn oog laten vallen op de pricewatch: Silverstone Sugo SST-SG11B.

Haha, een overduidelijke NAS behuizing met maar liefst 9x HDD bays, en de Pricewatch plaatst 'm in de categorie "HTPC"

Raar genoeg kan je deze categorie ook niet veranderen.

SLAyRe schreef op woensdag 17 oktober 2018 @ 19:32:
Ik wou met een nieuwe build eens een voor zuinige 2.5 disks gaan:

#~	Product~	Prijs~	Subtotaal~
1~	Intel Celeron G3930 Tray~	€ 29,95~	€ 29,95~

1: Is een Celeron rap genoeg voor FreeNAS/ZFS? Echt veel meer dan filesharing zal deze setup niet gaan doen.

Op zich wel, maar op het totaalbedrag van 1300+ euro, wat is er tegen om twee tientjes extra neer te leggen voor een Pentium (met hyperthreading en 20% hogere klok)?

[ Voor 53% gewijzigd door Dreamvoid op 19-10-2018 09:10 ]

[FireDrunk]

@SLAyRe Als je ruim 1300 euro aan een nieuwe NAS uit geeft, zou ik inderdaad zoals @Dreamvoid al zegt echt wel even een wat stevigere CPU nemen. Kan je mooi wat extra jaartjes vooruit. Intel socket's leven niet zo lang helaas, dus een goed upgradepad heb je bijna nooit.

Ik zou voor een i3-8100 gaan, of op zijn minst een Pentium, maar goed, je moet het zelf weten

[pimlie]

Is het nog een idee om te wachten op dat de Xeon E-2124G beschikbaar is? Heeft een 6W hogere TDP dan een i3-8100 maar daarvoor krijg je een turboboost naar 4.5Ghz en ondersteuning voor DDR4-2666.

[ Voor 0% gewijzigd door pimlie op 19-10-2018 11:55 . Reden: link snapt komma niet ]

[GioStyle]

Prijs zal ook 1,5 à 2 keer zo hoog zijn.

[Dreamvoid]

Voor dat geld zal je ws ook een 6-core i5 kunnen kopen? Maar idd, het kan een afweging zijn.

[mkleinman]

Mijn NAS staat intussen alweer 4 jaar en mijn servertje ( AMD E1-2500 laptop ) draait ook alweer 5 jaar. Na lang wikken en wegen heb ik besloten om ze samen te voegen in 1 apparaat.

Met grote dank aan dit topic kom ik nu uit op:

#	Product	Prijs	Subtotaal
1	Intel Celeron G4920	€ 54,18	€ 54,18
1	Fujitsu D3644-B	€ 149,-	€ 149,-
2	Seagate Barracuda Compute 2,5", 2TB	€ 74,53	€ 149,06
1	Seagate Barracuda Compute 2,5", 4TB	€ 151,90	€ 151,90
1	Cooler Master MasterBox MB500	€ 56,10	€ 56,10
1	Corsair Vengeance LPX CMK16GX4M2A2400C16	€ 124,50	€ 124,50
1	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 48,50	€ 48,50
1	Intel 760p 256GB	€ 72,90	€ 72,90
Bekijk collectie Importeer producten		Totaal	€ 806,14

De gekozen processor is ruim 4,5x sneller dan de huidige AMD E1-2500. Aangezien die in principe al snel zat is voor het werk lijkt de celeron mij snel zat op dit moment.

Ik twijfel nog over de Pico-PSU of die zwaar genoeg is om dit gehele systeem te kunnen voeden. Anders moet ik misschien naar de 90/80 variant. Iemand suggesties?

de 2x2tb 2.5" schijfjes komen in RAID-1 ter vervanging van wat er nu in mijn NAS zit. 2tb is voor ons meer dan zat aan ruimte. De losse 4tb schijf is nog een twijfelgeval of die er in gaat komen of niet.

En 16gb omdat er ook een Oracle database en webserver voor wat ontwikkel en testwerk op komt te draaien. Een paar gb meer geheugen is dan mooi meegenomen.

Ik ben benieuwd naar jullie commentaar

[mrmrmr]

@mkleinman

PicoPSU 80/60 kit is ruim voldoende. Reken 25W voor het systeem en 5-6W voor elke disk (16W), dat is samen 41W, dus ruim onder 60W. Die 60W is nominaal (name plate), en kan dus voor korte duur meer leveren.

[yorroy]

FireDrunk schreef op vrijdag 19 oktober 2018 @ 09:18:
@SLAyRe Als je ruim 1300 euro aan een nieuwe NAS uit geeft, zou ik inderdaad zoals @Dreamvoid al zegt echt wel even een wat stevigere CPU nemen. Kan je mooi wat extra jaartjes vooruit. Intel socket's leven niet zo lang helaas, dus een goed upgradepad heb je bijna nooit.

Ik zou voor een i3-8100 gaan, of op zijn minst een Pentium, maar goed, je moet het zelf weten

@SLAyRe mocht je het topadvies van @FireDrunk willen opvolgen, dan heb ik nog een gloednieuwe i3-8100 te koop

[Dreamvoid]

mkleinman schreef op vrijdag 19 oktober 2018 @ 15:33:

#~	Product~	Prijs~	Subtotaal~
2~	Seagate Barracuda Compute 2,5", 2TB~	€ 74,53~	€ 149,06~
1~	Seagate Barracuda Compute 2,5", 4TB~	€ 151,90~	€ 151,90~

Breek de behuizing van deze drives open en je hebt dezelfde harde schijven wat goedkoper:
pricewatch: Seagate Backup Plus Portable Drive (STDR) 4TB Zwart (107.50 euro)
pricewatch: Maxtor M3 Portable 4TB Zwart (102 euro, zit een Seagate drive in)

[Slayre]

Dank heren, ik heb weer wat om mee te werken
Van het weekend maar mijn lijstje weer updaten.

[yorroy]

In de OP staat als soort van tip dat Asrock borden relatief zuinig zijn, is dit nog steeds van toepassing?
Ik ben op zoek naar een 8th gen mobo voor bij de i3 8100 maar kan eigenlijk weinig vinden over het idle verbruik van deze bordjes.

In dit topic wordt natuurlijk vaak de Fujitsu borden genoemd, maar die zijn nog niet echt leverbaar en ik wil proberen het onder de 100 euro te houden. Enige vereiste is dat er een DisplayPort en HDMI poort op zit.

Is er dan nog verschil te merken in Asus, Gigabyte, Asrock of MSI?

[mrmrmr]

De Skylake serie is de zuinigste tot nu toe bekendste Fujitsu serie. Bijvoorbeeld de Fujitsu D3401-B2 voor ongeveer € 100. Die kun je zo bestellen met een Skylake of Kaby Lake processor. Die is nog zuiniger dan een D3417-B2. Fujitsu is buiten-categorie, dit merk heeft bepaalde moederborden die veel zuiniger zijn, ook bij belasting, dan de concurrentie. Ik denk dat de nog niet verkrijgbare D3643-H met ca. € 90 iets goedkoper zal zijn dan de B3401-B2. De al wel verkrijgbare D3644-B (opvolger D3417-B2) is in Nederland tamelijk goedkoop (€ 150) voor een C246 bord met ECC.

Wat andere moederborden betreft zijn de resultaten wisselend, eenvoudige ASRock moederborden zijn vaak zuiniger dan de rest. Hardware.info heeft de testmethode gewijzigd waardoor niet meer de optimale instellingen worden getest maar de standaard instellingen. Zo kun je dus niet meer vergelijken. Dat gezegd hebbende lijkt het erop (meer niet) dat Gigabyte het ook goed doet. Asus is typisch niet zuinig of niet zo zuinig als zou kunnen. MSI doet het soms ook goed.

Belangrijk is dat je niet zomaar een bord kunt kiezen. Het bord moet wel gebouwd op zuinigheid. Gaming borden vallen dus af (er zijn soms wel uitzonderingen). Dat hangt samen met de ondersteuning voor zwaar verbruikende onderdelen zoals de processor en de grafische kaart(en). Vaak is het aantal fasen indicatief voor een zuinig of niet zuinig moederbord. In grote lijnen zijn minder fasen is voor zuinigheid beter. Het aantal fasen komt doorgaans overeen met het aantal blokjes (spoeltjes) rondom de cpu voet. Maar een Asus bord met 4 fasen doet het meestal niet zo goed als een ASRock bord met 4 fasen. Het is dus vooral indicatief binnen een moederbordserie van een fabrikant. 6 fasen en minder wijzen mogelijk op zuinigheid.

Minder features betekent dat het bord minder vermogen hoeft te leveren en dat draagt bij aan een lager verbruik. Als je een moederbord dus helemaal volhangt met USB 3.1 apparaten, 3.5" hard disks, draadloos moederbord en muis en monitor kost dat allemaal vermogen. Helemaal geen USB apparaten levert meer op dan teruggaan van 2 naar 1 USB 2.0 apparaat. Alle draadloze apparaten hebben vermogen nodig om te zenden en te ontvangen. WiFi en Bluetooth worden daarom meestal uitgezet tenzij je echt nodig hebt.

[yorroy]

mrmrmr schreef op zondag 21 oktober 2018 @ 19:09:
De Skylake serie is de zuinigste tot nu toe bekendste Fujitsu serie. Bijvoorbeeld de Fujitsu D3401-B2. Die kun je zo bestellen met een Skylake of Kaby Lake processor. Die is nog zuiniger dan een D3417-B2. Fujitsu is buiten-categorie, dit merk heeft bepaalde moederborden die veel zuiniger zijn, ook bij belasting, dan de concurrentie. Ik denk dat de nog niet verkrijgbare D3643-H iets goedkoper zal zijn. De al wel verkrijgbare D3644-B is in Nederland tamelijk goedkoop (€ 150) voor een C246 bord met ECC.

Wat andere moederborden betreft zijn de resultaten wisselend, eenvoudige ASRock moederborden zijn vaak zuiniger dan de rest. Hardware.info heeft de testmethode gewijzigd waardoor niet meer de optimale instellingen worden getest maar de standaard instellingen. Zo kun je dus niet meer vergelijken. Dat gezegd hebbende lijkt het erop (meer niet) dat Gigabyte het ook goed doet. Asus is typisch niet zuinig of niet zo zuinig als zou kunnen. MSI doet het soms ook goed.

Belangrijk is dat je niet zomaar een bord kunt kiezen. Het bord moet wel gebouwd op zuinigheid. Gaming borden vallen dus af (er zijn soms wel uitzonderingen). Dat hangt samen met de ondersteuning voor zwaar verbruikende onderdelen zoals de processor en de grafische kaart(en). Vaak is het aantal fasen indicatief voor een zuinig of niet zuinig moederbord. In grote lijnen zijn minder fasen is voor zuinigheid beter. Het aantal fasen komt doorgaans overeen met het aantal blokjes (spoeltjes) rondom de cpu voet. Maar een Asus bord met 4 fasen doet het meestal niet zo goed als een ASRock bord met 4 fasen. Het is dus vooral indicatief binnen een moederbordserie van een fabrikant. 6 fasen en minder wijzen mogelijk op zuinigheid.

Minder features betekent dat het bord minder vermogen hoeft te leveren en dat draagt bij aan een lager verbruik. Als je een moederbord dus helemaal volhangt met USB 3.1 apparaten, 3.5" hard disks, draadloos moederbord en muis en monitor kost dat allemaal vermogen. Helemaal geen USB apparaten levert meer op dan teruggaan van 2 naar 1 USB 2.0 apparaat. Alle draadloze apparaten hebben vermogen nodig om te zenden en te ontvangen. WiFi en Bluetooth worden daarom meestal uitgezet tenzij je echt nodig hebt.

Mooie uitgebreide post, bedankt. Ik heb nu een thin mini itx bordje van Asus op het oog. Deze heeft een ingebouwde DC aansluiting en ik kan me herinneren dat @Dreamvoid een soortgelijk bordje had in zijn Mac server, maar dan van een 6th gen cpu.

2 sata en 1 m2 is voor mij voldoende. Met Netflix en iTunes op een Apple TV bewaar ik eigenlijk nog nauwelijks films op mijn huidige server, dus dan zijn 3 schijven ruim voldoende.
Nog even verder inlezen of dit echt een goede optie is.
Iemand al ervaring met de pricewatch: Asus Prime H310T ?

[Dreamvoid]

Thin mITX is super. Als je een Coffee Lake Thin mITX systeem zoekt is er op het moment nog maar 1 keus, die pricewatch: Asus Prime H310T . De concurrerende Fujitsu D3674-B is aangekondigd maar volgens mij nog nergens te koop.

Die Fujitsu zal ongetwijfeld wat zuiniger zijn, maar of dat tegen de meerprijs opweegt, dat zal je zelf moeten bepalen, ik schat dat die Fujitsu zeker 50 euro meer gaat kosten dan die Asus.

Als je tevreden bent met Skylake/Kaby Lake, dan zijn er een aantal Thin-mITX bordjes, met allemaal hun voor- en nadelen:
- pricewatch: Asus H110T (die heb ik, dual-LAN, nadeel is enkel support voor 2242/2260 M.2, niet de 2280)
- pricewatch: Fujitsu D3474-B (ook hier, alleen 2242/2260 M.2)
- pricewatch: Asus Q170T (met vPro, dual-LAN *en* 2280 support)
- pricewatch: ASRock H110TM-ITX (mSATA, geen M.2 slot!)
- pricewatch: Gigabyte GA-H110TN (dual LAN, maar ook hier mSATA ipv M.2)

[mrmrmr]

Fujitsu D3674-B is een kiosk model, met extra hardware voor de ondersteuning van kiosk apparaten zoals speciale monitoren. Daardoor is het niet zo zuinig als zou kunnen. Feitelijk bestaan de echt zuinige mini-ITX moederborden voor Kaby Lake/Coffee Lake nog niet, ook al is het technisch al jaren mogelijk. Zo'n 10 jaar terug waren ze wel zuinig naar de destijds geldende normen.

mATX moederborden zijn behoorlijk wat zuiniger dan mini-ITX. Als het per se klein moet zijn is mini-STX is wel zuiniger in de vorm van de ASRock H110 mini-STX. Maar verder blijft mATX veel zuiniger. Althans, wat desktop processoren betreft. Er zijn wel een aantal uitzonderingen voor tragere Atom/N processoren. Vooral de wat oudere modellen.

[mdbraber]

Vandaag bezig geweest met het bouwen van mijn nieuwe server:

#	Product	Prijs	Subtotaal
1	Intel Core i3-8100 Tray	€ 164,-	€ 164,-
1	Fujitsu D3644-B	€ 149,-	€ 149,-
1	Fractal Design Define Mini	€ 79,69	€ 79,69
6	Delock 0.5m SATA Cable	€ 1,17	€ 7,02
1	Delock Cable Power Molex 4 pin plug > 4 x SATA 15 pin receptacle 40 cm (60142)	€ 3,99	€ 3,99
4	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 130,84	€ 523,36
1	Leicke ULL Power Supply 120 W	€ 35,-	€ 35,-
1	Arctic Freezer 33	€ 23,99	€ 23,99
1	Crucial CT2K16G4WFD824A	€ 371,75	€ 371,75
1	Mini-box picoPSU PicoPSU-160-XT	€ 0,-	€ 0,-
1	Samsung 850 EVO 120GB	€ 0,-	€ 0,-
Bekijk collectie Importeer producten		Totaal	€ 1.357,80

Voor de mensen die ook geinteresseerd zijn met een dergelijke build / Fujitsu 3644-B moederbord hier wat dingen die me tot nu toe opvielen.

Aangezien het een nieuw bord is, was het even zoeken naar de juiste documentatie: die staat zoals verwacht op de FTP server van Fujitsu: ftp://ftp.ts.fujitsu.com/...2-B_D3644-B/Documentation - vooral handig omdat daar de pinout van het front panel in staat (POWER, RESET etc).

Het Fujitsu-bord ondersteunt geen LegacyOS en dus ook geen SATA m.2 SSDs meer (die ik wel had). Suf natuurlijk want dat stond gewoon in de specs. Dus uiteindelijk een nieuwe NVMe m.2 SSD besteld. Er is dus op het bord 6x SATA en 1x NVMe voor boot device.

Ik heb de fan controller van de Fractal Design Mini in een 3.5" slot in de 5.25" bays aan de voorkant gebouwd (met wat simpel tape). Dat is namelijk de enige manier om niet allemaal verlengkabels naar achteren te hoeven trekken waar Fractal Design suggereert dat je 'm inbouwt. Maakt mij verder niet uit - ik verwacht niet dat ik het ding verder gebruik.

De i3-8100 heeft geen volledige vPro. Wel AMT voor o.a. Serial-over-LAN waardoor je remote boot etc. kunt doen en ANSI, maar geen volledige VNC - geen dealbreaker, maar wel iets onhandiger... Alhoewel ik uiteindelijk alleen maar consoles gebruik dus uiteindelijk een ANSI console is prima.

So far lukt het me nog alleen om een Ubuntu install te booten. De Proxmox en Debian installers blijven hangen na het GRUB scherm of geven 'garbled' output. Zal wel iets te maken hebben met Coffee Lake / UHD 630 graphics, maar ik ben er nog niet helemaal achter. Eventueel kan ik Ubuntu + debootstrap gebruiken voor een Debian install + Proxmox, maar kijk nog even of ik ook de gewone installer aan de praat krijg. Mijn post op het Proxmox forum hier: https://forum.proxmox.com...-screen-after-grub.48148/ Tips welkom :-)

Aangezien ik nog geen power saving features etc. heb aangezien er nog geen werkend OS op staat weet ik nog niet veel over het verbruik, maar ook niet over bijv. het beter managen van de fan speeds / spin down van de HDDs. Die zijn nu nog vol aan het spinnen en maken vooralsnog de meeste herrie. De CPU fan van de Arctic Freezer 33 heeft een soort onregelmatige up/down spin, wsl door de PWM features die (nog?) niet goed afgesteld zijn en de CPU die nog niet goed gemanaget wordt qua power. So far valt de geluidsproductie me dus nog tegen (maar goed, ik kwam ook van fanless), maar hopelijk kan dat nog beter. Tips voor het silencen van 2.5" HDDs zijn ook welkom.

/cc @bolk @wessel145 @mrmrmr

[Dreamvoid]

mrmrmr schreef op zondag 21 oktober 2018 @ 23:06:
mATX moederborden zijn behoorlijk wat zuiniger dan mini-ITX.

Thin-mITX is eerder te vergelijken met mini-STX, dan met gewoon mITX, vanwege de ingebouwde 19V en beperktere featureset (geen PCIe slot en 2x SATA ipv 4x).

Overigens is de Fujitsu niet specifiek een ‘kiosk’ model (ook al is dat 1 van de toepassingen), in de zin dat alle Thin mITX bordjes een LVDS interne monitor aansluiting hebben. Onderdeel van de spec geloof ik, aangezien die formfactor oa bedoeld is voor All-In-Ones.

[ Voor 66% gewijzigd door Dreamvoid op 22-10-2018 09:27 ]

[mrmrmr]

@mdbraber

Lukt de installatie met Debian Testing wel? Ik gebruik meestal Rufus om de USB installatie stick te maken. In mijn ervaring werkt die het beste.

Of begin met Windows 10 als hardwaretest. Die kun je installeren zonder key.

Het gebeurt wel eens dat een voeding (meestal een oude ATX, niet Haswell compatible, d.w.z. kan niet met lage belasting omgaan) het niet goed doet en dat een probleem veroorzaakt tijdens de installatie. Dus probeer het ook eens met een andere voeding.

[LigeTRy]

mdbraber schreef op zondag 21 oktober 2018 @ 23:08:
De CPU fan van de Arctic Freezer 33 heeft een soort onregelmatige up/down spin, wsl door de PWM features die (nog?) niet goed afgesteld zijn en de CPU die nog niet goed gemanaget wordt qua power.

Toffe build! Van mijn Arctic i32 (voorloper van de 33) weet ik dat de fan aanslaat bij 45% pwm. Dit kan je handig even testen met een programma zoals speedfan (Windows).

Hoe is de bios van het Fujitsu moederbord? Heb je daar ook een mogelijkheid om fancurves in te stellen? En valt bij het gebruik van een M2 nvme SSD ook 1 SATA poort weg?

Qua power management is het even zoeken naar je sweet spot, hier ga ik zelf mee verder als ik m'n hardware iets heb aangepast

[mdbraber]

mrmrmr schreef op zondag 21 oktober 2018 @ 23:26:
@mdbraber

Lukt de installatie met Debian Testing wel? Ik gebruik meestal Rufus om de USB installatie stick te maken. In mijn ervaring werkt die het beste.

Ik heb zowel de stable als de testing installer geprobeerd maar beide werken niet. Ik denk dat het toch de kernel versie is - wel gek dat Proxmox die gebaseerd is op de Ubuntu kernel het dus niet doet en de Ubuntu installer zelf wel...

Het gebeurt wel eens dat een voeding (meestal een oude ATX, niet Haswell compatible, d.w.z. kan niet met lage belasting omgaan) het niet goed doet en dat een probleem veroorzaakt tijdens de installatie. Dus probeer het ook eens met een andere voeding.

Dit is een PicoPSU 160XT+120W adapter - ga er wel vanuit dat dat goed moet zijn toch? En aangezien de Ubuntu installer het gewoon doet verwacht ik dat er iets anders aan de hand is (grafische chipset)

wessel145 schreef op zondag 21 oktober 2018 @ 23:29:
[...]
Hoe is de bios van het Fujitsu moederbord? Heb je daar ook een mogelijkheid om fancurves in te stellen? En valt bij het gebruik van een M2 nvme SSD ook 1 SATA poort weg?

Weinig aan in te stellen qua BIOS en fan speeds. Je hebt 3 modes: auto, enhanced en full. Het verschil tussen auto en enhanced heb ik nog niet helemaal duidelijk. Eerst even de andere opties aan de gang krijgen om te kijken wat het effect is als er wel fatsoenlijk powermanagement wordt gedaan.

Wegvallen van de SATA poort als je een NVMe aansluit denk ik niet (ook niet logisch want de NVMe is UEFI en SATA is AHCI). Ik krijg 'm vanmiddag binnen dus zal het even testen en doorgeven.

/EDIT als iemand nog tips heeft hoe mijn display probleem op te lossen met de i915 driver en Coffee Lake CPU ik heb hier een beschrijving gepost: Zwart / vervormd scherm na GRUB bij Debian / Proxmox install

[ Voor 45% gewijzigd door mdbraber op 22-10-2018 09:27 ]

[mkleinman]

Nog een interessante voor een zuinige build lijkt deze te zijn: nieuws: Hardkernel introduceert Odroid-computingboard met x86-soc van Intel

We measured the power consumption with an eMMC storage after booting Ubuntu 18.10.
Idle: 4Watt (Approx.)
CPU Stress: 14Watt (Approx.)
CPU+GPU Stress: 22Watt (Approx.)
Power-off: 0.5Watt (Approx.)
Suspend: 0.6Watt (Approx.)

[FireDrunk]

Ik zit daar ook likkebaardend naar te kijken. Zou een prachtig Kubernetes clustertje kunnen zijn.

[Dreamvoid]

Gemini Lake is idd een leuk platform. Fujitsu komt ook met zo’n bordje, en Akasa heeft een passive behuizing voor dit platform aangekondigd, de Laplace ST. Kleiner dan een Mac Mini en volledig passief.

Grootste nadeel van dit platform is de trage single threaded performance (4 trage cores vs 2 snelle bij de Sky/Kaby/Coffee Lake), maar verder is alles goed in orde, vooral het lage piekvermogen.

[ Voor 106% gewijzigd door Dreamvoid op 22-10-2018 16:56 ]

[mkleinman]

Ik ben ook erg benieuwd hoe zuinig het nieuwe fuijtsu bord is. Dat word lastig kiezen tussen odroid en Fujitsu. Ik heb ssd en 2x idd nodig met 16gb ram. Extra disk is optioneel.

Fujitsu is uitbreidbaar maar mogelijk minder zuinig en upgradebaar. Odroid is kleiner, passief en iets goedkoper

[mrmrmr]

Een goede servertest heeft een actieve netwerkverbinding, met SSD, zonder hard disks en monitor in slaapstand.

Ik vermoed dat die 4W zonder netwerk is. Een D3417-B2 haalt zonder netwerk 2,9W en met actief netwerk 3,6W. Een actief netwerk verhoogt dus het verbruik met 0,7W.

[mkleinman]

mrmrmr schreef op maandag 22 oktober 2018 @ 20:58:
Een goede servertest heeft een actieve netwerkverbinding, met SSD, zonder hard disks en monitor in slaapstand.

Ik vermoed dat die 4W zonder netwerk is. Een D3417-B2 haalt zonder netwerk 2,9W en met actief netwerk 3,6W. Een actief netwerk verhoogt dus het verbruik met 0,7W.

Ik ben ontzettend benieuwd of dat voor de 3644 ook geldt. Het bord ziet er vergelijkbaar uit. Ik wacht met smart op praktijkervaringen met dit bord.

[Kaspers]

mdbraber schreef op zondag 21 oktober 2018 @ 23:08:
So far lukt het me nog alleen om een Ubuntu install te booten. De Proxmox en Debian installers blijven hangen na het GRUB scherm of geven 'garbled' output. Zal wel iets te maken hebben met Coffee Lake / UHD 630 graphics, maar ik ben er nog niet helemaal achter. Eventueel kan ik Ubuntu + debootstrap gebruiken voor een Debian install + Proxmox, maar kijk nog even of ik ook de gewone installer aan de praat krijg. Mijn post op het Proxmox forum hier: https://forum.proxmox.com...-screen-after-grub.48148/ Tips welkom :-)

Ik ben erg benieuwd naar je progressie! Ik overweeg dezelfde hardware qua cpu en mb als basis voor een Proxmox installatie. Was al blij van je te horen dat je kon bevestigen dat t bord ECC compatible is met de 8100.

[mdbraber]

Succes! Met dank aan de fantastische customer support van 'juggernaut' op de heise.de fora heb ik de oplossing voor mijn 'garbled display' probleem gevonden: https://www.heise.de/foru...an/posting-33297616/show/

Ga in de BIOS naar "PCI settings" en disable daar onderaan de optie "Above 4GB decoding" (die is standaard enabled). Die had ik geloof ik zelf niet zo snel gevonden... (zeker niet omdat het een PCI optie is). De Debian installer werkt nu gewoon. Op naar de volgende stap.

@mkleinman interessant bordje dat nieuwe Odroid bordje. Voor bijv. een simpele NAS zeker geschikt. Ik ben benieuwd of het ook zou werken met port multipliers zoals @mrmrmr laatst ook al eens vroeg hier.

[Cranberry]

Ik ben ook bezig met het aanschaffen van een zeer zuinige server. Ik twijfel of ik e.e.a. nieuw ga aanschaffen of op de tweedehandsmarkt iets ga scoren.
De server wil ik gebruiken als vervanger van m'n BananaPi en RaspberryPi. De machine zal worden ingezet voor het volgende:
- Logitech Media Server tbv van Squeezebox Touch
- Verwerken data slimme meter (opvangen, verwerken, opslaan data en presenteren van grafiekjes enz)
- Verwerken en presenteren data temperatuursensoren CV/Vloeverwarming
- Domoticz voor een paar simpele domotica-functionaliteiten.

De BPi en RPi trekken dit nu wel, maar het gaat allemaal wat stropiger. Daarom wil ik een zuinige server die meer power in huis heeft, maar onderaan de streep niet meer verbruikt dan 2 of 3 RPi/BPi's.

Tweedehands mogelijkheden:
- Intel NUC i5-4250U
- ASRock Deskmini met 'n G4600
- ASRock Beebox met een Celeron N3000

Ben benieuwd naar het advies van jullie. Zijn deze mogelijkheden geschikt om de komende 2 à 3 jaar de bovengenoemde rollen te vervullen?

[Dreamvoid]

Als je tweedehands kijkt, een oude Mac Mini of een laptop met kapot scherm en/of gare accu kan ook nog.

[mdbraber]

Dreamvoid schreef op dinsdag 23 oktober 2018 @ 13:40:
Als je tweedehands kijkt, een oude Mac Mini of een laptop met kapot scherm en/of gare accu kan ook nog.

@Cranberry als je nog een Mac Mini zoekt heb ik hier nog een oude Core 2 Duo in de aanbieding (staat nog niet op V&A)

[Dreamvoid]

(die oude macs krijgen geen nieuwe macOS updates meer maar draaien ook prima op Linux/Windows)

[necessaryevil]

pricewatch: Be quiet! Pure Power 10 is niet onzuinig voor een ATX formaat voeding. Bij 10W gelijkstroom belasting is de efficiëntie 64% volgens het Duitse blad c't. Geschikt voor budgetsystemen met veel 3.5" hard disks en PicoPSU met 160W adapter niet voldoende is.

Welke uitgave van C'T was dit?

//edit
Oeps, ik begin kippig te worden denk ik :-p.

//edit 2
ik kom toch niet aan 64% maar aan 62.5%... klein verschil...

[ Voor 17% gewijzigd door necessaryevil op 28-10-2018 20:36 ]

[Domokoen]

Ik ben mijn nieuwe server aan het samenstellen. Vanwege de plek in de meterkast heb ik beperkte diepte-ruimte, vandaar de keus voor een Zalman T5. Uiteindelijk wil ik 4 schijven, maar ik begin met 2x 2.5".
Voor de processor wil ik eigenlijk een Xeon E-2124G vanwege de mogelijkheid tot TurboBoost en gebruik sneller geheugen. Maar deze had al 2 maanden geleden te koop moeten zijn en is dat nog steeds niet.
Nog te zoeken: een NVME M2 SSD (of een SATA SSD als die zuiniger zouden zijn), een voeding en bijpassend ECC geheugen (afhankelijk van of de Xeon nog te koop komt).

#	Product	Prijs	Subtotaal
1	Intel Core i3-8100 Boxed	€ 169,99	€ 169,99
1	Fujitsu D3644-B	€ 149,-	€ 149,-
1	Seagate Barracuda Compute 2,5", 5TB	€ 195,90	€ 195,90
1	Zalman ZM-T5	€ 29,99	€ 29,99
2	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 130,84	€ 261,68
Bekijk collectie Importeer producten		Totaal	€ 806,56

[Raydo88]

necessaryevil schreef op dinsdag 23 oktober 2018 @ 18:24:
[...]

Welke uitgave van C'T was dit?

Onder de '64%' in de openingspost vind je een link...

[mdbraber]

Dit is niet strikt genomen een vraag over 'zuinig' maar meer over stil - aangezien wel veel mensen hier meerdere 2.5" disks in hun build hebben toch deze vraag.

Als de disks (4x 2.5" Seagate 5GB uit een Seagate Backup Plus) spinnen in de Fractal Design Mini vind ik ze best goed hoorbaar (alles is relatief, maar meer hoorbaar dan ik gehoopt had). Ik heb ze inmiddels suspended in de kast gehangen om alle vibraties te voorkomen.

Zijn er nog oplossingen die jullie hebben om het geluid verder terug te brengen? De Fractal Design Mini heeft al demping dus ik weet niet of daar nog iets aan te doen is. Ik heb even kort overwogen om de 2.5" terug in hun 'originele' behuizing te doen (met rubber dempers), de achterkant uit-te-dremelen en ze zo aan te sluiten, maar qua temperatuur / reliability weet ik niet of dat een goed idee is. Tips?

[ Voor 3% gewijzigd door mdbraber op 24-10-2018 07:37 ]

[mrmrmr]

@mdbraber
Als een eigentrilling van de kast ongeveer gelijk is aan die van de vastgeschroefde harde schijf kun je ze duidelijk horen. Het is het enige onderdeel dat geluid maakt bij mij.

Houd de hard disks maar eens stevig vast en kijk of dat verschil maakt in het geluid. Als dat zo is, is er waarschijnlijk sprake van resonantie (meetrillen) en mogelijk nog versterking door eigentrilling.

De kast moet stabiel staan, bijvoorbeeld op een massief buro (liefst met veel massa). Ik gebruik zelf Aerocool DS200 kasten, en als ik die op zijn kant leg met drives vertikaal bovenop een stapel losse rackservers dan hoor ik het duidelijk, maar dezelfde type schijf in een rechtopstaande kast, met drives horizontaal en in spin down op een stabiel kastje is nauwelijks hoorbaar, ook na spin up.

Het is vermoedelijk een beetje een kwestie van geluk hebben met de juiste combinatie hard disk en kast. Rubbers helpen misschien niet zo veel, maar letterlijk los ophangen hopelijk wel. Misschien helpen flexibele plastic sledes die bij de kast horen ook wel. Op de 3.5" sledes in mijn kast kunnen 2.5" schijven op het plateautje worden geschroefd. Omdat het plastic flexibel is helpt dat waarschijnlijk al flink, zonder rubbers.

[Dennis]

Wat een interessant topic dit zeg. Aangespoord door mijn veel te hoge stroomrekening moet ik ook iets om mijn sinds kort defecte C2550i NAS te vervangen.

De combinatie van D3644 met i3-8100 ziet er goed uit. De rest van de componenten heb ik al, al is het ECC geheugen dat ik nu heb DDR3 en dus niet meer bruikbaar met recentere moederborden.

Ik wil gewoon dedicated FreeNAS draaien, dus geen ESXi. Eventueel kan ik nog een paar extra NICs insteken als ik meer connecties wil of bonding. Kost natuurlijk wel weer extra stroom. Die PicoPSU is ook wel iets.

De enige vraag die ik nog heb: heeft iemand nog een gouden tip voor een 19" case? Om niet teveel ruimte in mijn patchkast in beslag te nemen denk ik zelf aan een 2U. Dan moeten vier (3,5") harde schijven ook geen probleem vormen.

[mrmrmr]

De standaard I/O plaat van een normaal mATX moederbord is te hoog voor 1U geloof ik. Een 2U kast met standaard I/O ruimte is handig.

Meerdere 3.5" HDD's verbruiken nog meer dan een zuinig moederbord met processor tijdens idle. 2.5" kan zuiniger zijn (1,1W) of kies een relatief zuinig 3.5" HDD model (≥3,3W bij 4TB). Zoals je ziet verbruikt 3.5" drie keer meer onder idle en daarnaast ook meer tijdens belasting. Een goede reden om wel te kiezen voor 3.5" is dat er veel niet-sequentiele (over-)schrijfoperaties plaatsvinden. Maar voor dergelijk type gebruik is SSD sowieso veel beter. SSD kan zeer zuinig zijn. Bestaande 3.5" disks zijn nog prima bruikbaar voor incidentele backup doeleinden via externe aansluiting (bv. Sharkoon Quickport).

Ga je de server in een rack hangen in een datacenter?

[mdbraber]

mrmrmr schreef op woensdag 24 oktober 2018 @ 11:29:
@mdbraber
Als een eigentrilling van de kast ongeveer gelijk is aan die van de vastgeschroefde harde schijf kun je ze duidelijk horen. Het is het enige onderdeel dat geluid maakt bij mij.

Houd de hard disks maar eens stevig vast en kijk of dat verschil maakt in het geluid. Als dat zo is, is er waarschijnlijk sprake van resonantie (meetrillen) en mogelijk nog versterking door eigentrilling.

De kast moet stabiel staan, bijvoorbeeld op een massief buro (liefst met veel massa). Ik gebruik zelf Aerocool DS200 kasten, en als ik die op zijn kant leg met drives vertikaal bovenop een stapel losse rackservers dan hoor ik het duidelijk, maar dezelfde type schijf in een rechtopstaande kast, met drives horizontaal en in spin down op een stabiel kastje is nauwelijks hoorbaar, ook na spin up.

Het is vermoedelijk een beetje een kwestie van geluk hebben met de juiste combinatie hard disk en kast. Rubbers helpen misschien niet zo veel, maar letterlijk los ophangen hopelijk wel. Misschien helpen flexibele plastic sledes die bij de kast horen ook wel. Op de 3.5" sledes in mijn kast kunnen 2.5" schijven op het plateautje worden geschroefd. Omdat het plastic flexibel is helpt dat waarschijnlijk al flink, zonder rubbers.

Thanks - ik denk ook misschien wel dat ik erg kritisch ben omdat ik van fanless (en dus helemaal geruisloos) kom. De suspended ophanging maakt al wel verschil. Ik zal nog eens kijken of het verschil maakt zodra ik de full installatie erop heb en de spindown ook gewoon goed werkt.

[Dennis]

@mrmrmr 2U is prima inderdaad. 4U is wel een groot beslag op mijn patchkast. Ik heb een patchkast naast mijn meterkast en daar komt de server te hangen. Omdat ik een 600mm model heb ben ik gelimiteerd tot zo'n 45cm diepte. Ik neig nu naar de Inter-Tech 2404s.

De tips voor 2,5" neem ik ter harte, maar ik heb nu nog goede WD RED en het is ook een desinvestering om ze nodeloos te vervangen. Te zijner tijd zal ik daar wel naar kijken. Ik wil wel kijken of ik FreeNAS zodanig inricht dat de jails op een losse SSD staan en alleen de échte data op de NAS. Dat vereist wel wat herconfiguratie.

[mdbraber]

Hier nog een tip voor de mensen die een build hebben met een PicoPSU en dus een gat op de plek waar de ATX powersupply zou zitten: https://www.thingiverse.com/thing:867938 - kan je zelf 3D printen. Als je de fill iets 'kleiner' maakt heb je ook geen aparte dustcover nodig.

Je kan ook deze printen als je een backplate / cover wilt met een PicoPSU aansluiting in de backplate (ik heb zelf een aparte PicoPSU bracket)

[Dreamvoid]

mdbraber schreef op woensdag 24 oktober 2018 @ 07:36:
Als de disks (4x 2.5" Seagate 5GB uit een Seagate Backup Plus) spinnen in de Fractal Design Mini vind ik ze best goed hoorbaar.
Zijn er nog oplossingen die jullie hebben om het geluid verder terug te brengen?

De originele Fractal Design Mini verpakking erbij pakken en 'm weer in het originele piepschuim zetten? Dat dempt wel

[mdbraber]

Inmiddels Proxmox kunnen installeren op Debian Buster met Fujitsu 3644-B (32GB ECC en i3-8100). Geen monitor en 4x 2.5" HDD + 1x SSD + 1x m.2 NVMe op ongeveer ~13W na powerpop --auto-tune. Verder nog niets gedaan aan BIOS checken of andere zaken.

[Bolk]

mdbraber schreef op donderdag 25 oktober 2018 @ 03:41:
Inmiddels Proxmox kunnen installeren op Debian Buster met Fujitsu 3644-B (32GB ECC en i3-8100). Geen monitor en 4x 2.5" HDD + 1x SSD + 1x m.2 NVMe op ongeveer ~13W na powerpop --auto-tune. Verder nog niets gedaan aan BIOS checken of andere zaken.

Netjes. Dat beantwoord mijn vraag of ik gewoon de PicoPSU-90 erin kan zetten

/Edit: welk type geheugen heb jij erin zitten? Heb je voor mij de SKU?

[ Voor 7% gewijzigd door Bolk op 25-10-2018 08:29 ]

[mdbraber]

Bolk schreef op donderdag 25 oktober 2018 @ 08:28:
[...]
Netjes. Dat beantwoord mijn vraag of ik gewoon de PicoPSU-90 erin kan zetten

Goed punt - ik heb er nu een PicoPSU 160XT + 120W adapter in zitten. Ik vraag me af of het qua efficiëntie nog uit zou maken als ik toch naar een PicoPSU 90 met 80W adapter zou gaan (@mrmrmr ?)

/Edit: welk type geheugen heb jij erin zitten? Heb je voor mij de SKU?

Ik heb deze. Het is moeilijk checken of ECC geheugen uiteindelijk ook werkt in je nieuwe build, zeker met een hele nieuwe chipset (die bijv. door memtest86 7.5 niet herkend wordt nog). Ik heb bij Fujitsu eens gevraagd of er een goede manier om dat te checken. Of wellicht weet iemand dat hier?

Op dimt moment krijg ik dit met dmidecode -t (total width > data width wat duidt op ECC, evenals 9 modules op iedere RAM strip):

root@zark:~# dmidecode -t memory
# dmidecode 3.2
Getting SMBIOS data from sysfs.
SMBIOS 3.1.1 present.

Handle 0x000C, DMI type 16, 23 bytes
Physical Memory Array
	Location: System Board Or Motherboard
	Use: System Memory
	Error Correction Type: Single-bit ECC
	Maximum Capacity: 64 GB
	Error Information Handle: Not Provided
	Number Of Devices: 4

Handle 0x000D, DMI type 17, 40 bytes
Memory Device
	Array Handle: 0x000C
	Error Information Handle: Not Provided
	Total Width: 128 bits
	Data Width: 64 bits
	Size: 16384 MB
	Form Factor: DIMM
	Set: None
	Locator: DIMM CHA3
	Bank Locator: BANK 0
	Type: DDR4
	Type Detail: Synchronous
	Speed: 2400 MT/s
	Manufacturer: Micron
	Serial Number: 1CB33CC9
	Asset Tag: 9876543210
	Part Number: 18ASF2G72AZ-2G3B1
	Rank: 2
	Configured Memory Speed: 2400 MT/s
	Minimum Voltage: 1.2 V
	Maximum Voltage: 1.2 V
	Configured Voltage: 1.2 V

Handle 0x000E, DMI type 17, 40 bytes
Memory Device
	Array Handle: 0x000C
	Error Information Handle: Not Provided
	Total Width: 128 bits
	Data Width: 64 bits
	Size: 16384 MB
	Form Factor: DIMM
	Set: None
	Locator: DIMM CHA1
	Bank Locator: BANK 1
	Type: DDR4
	Type Detail: Synchronous
	Speed: 2400 MT/s
	Manufacturer: Micron
	Serial Number: 1CB33D6B
	Asset Tag: 9876543210
	Part Number: 18ASF2G72AZ-2G3B1
	Rank: 2
	Configured Memory Speed: 2400 MT/s
	Minimum Voltage: 1.2 V
	Maximum Voltage: 1.2 V
	Configured Voltage: 1.2 V

[ Voor 30% gewijzigd door mdbraber op 01-11-2018 07:25 . Reden: Aanvulling over gecertificeerd ECC geheugen ]

[Bolk]

mdbraber schreef op donderdag 25 oktober 2018 @ 10:58:
[...]


Goed punt - ik heb er nu een PicoPSU 160XT + 120W adapter in zitten. Ik vraag me af of het qua efficiëntie nog uit zou maken als ik toch naar een PicoPSU 90 met 80W adapter zou gaan (@mrmrmr ?)


[...]


Ik heb deze. Het is moeilijk checken of ECC geheugen uiteindelijk ook werkt in je nieuwe build, zeker met een hele nieuwe chipset (die bijv. door memtest86 7.5 niet herkend wordt nog). Ik heb bij Fujitsu eens gevraagd of er een goede manier om dat te checken. Of wellicht weet iemand dat hier?

Op dimt moment krijg ik dit met dmidecode -t (total width > data width wat duidt op ECC, evenals 9 modules op iedere RAM strip):

root@zark:~# dmidecode -t memory
# dmidecode 3.2
Getting SMBIOS data from sysfs.
SMBIOS 3.1.1 present.

...

Zo te zien 'not detected': https://www.pugetsystems....CC-RAM-Functionality-462/

[mdbraber]

Bolk schreef op donderdag 25 oktober 2018 @ 11:01:
[...]
Zo te zien 'not detected': https://www.pugetsystems....CC-RAM-Functionality-462/

Het is nogal wazig - of het nou gaat om wat 'supported' is, of wat daadwerkelijk aangetroffen is wordt niet duidelijk. Plus dat niet duidelijk is of sommige van die tools (zoals dat .c programma) ook werken met de laatste generatie processor / chipset. Dit is overigens de output daarvan (dus volgens die theorie zou het niet werken):

root@zark:~# ./ecc_test
5004-5007h: 10 31 0 0
5008-500Bh: 0 0 0 0

[Bolk]

mdbraber schreef op donderdag 25 oktober 2018 @ 11:11:
[...]


Het is nogal wazig - of het nou gaat om wat 'supported' is, of wat daadwerkelijk aangetroffen is wordt niet duidelijk. Plus dat niet duidelijk is of sommige van die tools (zoals dat .c programma) ook werken met de laatste generatie processor / chipset. Dit is overigens de output daarvan (dus volgens die theorie zou het niet werken):

root@zark:~# ./ecc_test
5004-5007h: 10 31 0 0
5008-500Bh: 0 0 0 0

Bios zegt ook niks?

[mdbraber]

Bolk schreef op donderdag 25 oktober 2018 @ 11:13:
[...]
Bios zegt ook niks?

Nee - niets over ECC. Er is wel een memory test en zelfs een 'ingebakken' diagnostics tool (CPU, MEM, HDD) maar niets over ECC. Ik wacht even of juggernaut een antwoord heeft op mijn vraag

/EDIT: er staat wel iets over "ECC Memory Error Logging" in de BIOS manual onder een menu dat er zou moeten zijn in de BIOS "Runtime Error Logging" maar dat hele menu heb ik niet (er zou ook PCI Error Logging onder moeten zitten, dus het wel/niet verschijnen van dat menu lijkt me logischerwijs niet gelinkt aan het hebben van ECC).

/EDIT: Antwoord van Fujitsu: het is wel geactiveerd: https://www.heise.de/foru...14341/show/?nid=A0jqH-S_# @Bolk

[ Voor 36% gewijzigd door mdbraber op 25-10-2018 13:31 . Reden: antwoord van Fujitsu ]

[mdbraber]

Voor iedereen die geïnteresseerd is: ik heb het Fujitsu 3644-B bord nu even draaien in de volgende configuratie:

- Intel i3-8100
- 32GB ECC RAM (2x 16GB)
- Zonder extra HDD/SSD schijven (dus alleen met een m.2 NVMe)
- 1x 120mm case fan (Fractal Design)
- 1x PWM CPU fan (Arctic Freezer 33)
- 1x LAN enabled
- Audio disabled
- 1x USB toetsenbord (geen muis)
- USB3.1 enabled, verder geen devices aangesloten
- Geen monitor, internal graphics enabled
- Proxmox 5.2 (met linux4.15.17-1-pve kernel)
- Na powertop --auto-tune

Mijn meter is niet supernauwkerig en doet geen gemiddelden, maar verbruik op deze manier is ongeveer 5-6W. Misschien moet ik ook eens een Brennenstuhl aanschaffen :-) Wellicht kan ik Integrated Graphics nog disbalen, maar dat heb ik nog niet gecheckt.

/EDIT: de hoogste (opstart)waarde die ik nu overigens met de extra 4x 2.5" HDD + 1x SSD heb gezien is ~62W (ik heb dat nog niet meerdere keren bewust herhaald)

/EDIT: zonder de case fan lijkt 'ie ongeveer 0.5W minder te gebruiken. Maar mijn meter is nog te onnauwkeurig om dit met voldoende zekerheid te zeggen. Ik heb maar een Brennenstuhl PM231E besteld :-)

[ Voor 27% gewijzigd door mdbraber op 25-10-2018 12:17 . Reden: verschil zonder fasefan toegevoegd ]

[mrmrmr]

mdbraber schreef op donderdag 25 oktober 2018 @ 10:58:
Goed punt - ik heb er nu een PicoPSU 160XT + 120W adapter in zitten. Ik vraag me af of het qua efficiëntie nog uit zou maken als ik toch naar een PicoPSU 90 met 80W adapter zou gaan (@mrmrmr ?)

@Bolk @mdbraber

Efficientiegegevens volgens Mini-Box manuals staan hier in een tabel.

160-XT is volgens deze gegevens van Mini-Box zuiniger dan een '90' bij laag verbruik. Een '80' is vergelijkbaar met een 160-XT. c1j heeft een uitgebreide test uitgevoerd met de 160-XT met interessante resultaten.

Het gaat bij de keuze vooral om het piekverbruik tijdens booten. De meeste energiemeters bewaren de maximale meetwaarde. Als je de mogelijkheid hebt, vergelijk bijvoorbeeld eens Debian zonder hard disks en met hard disks. Elke reboot is anders, dus deze test kan een zo'n 3-5 keer worden gedaan om het maximum te vinden. Dat geeft je een indicatie van hoeveel het verbruik zal zijn bij maximale uitbreiding.

Als je 3.5" HDD's gebruikt kun je er ruwweg 3 keer minder van gebruiken dan 2.5" HDD's.

Een idle zuinigheids test in deze configuratie: SSD, USB toetsenbord, USB muis en netwerk en monitor in slaapstand maakt een goede appels & appels vergelijking mogelijk. Als je dat zou kunnen doen zou dat duidelijkheid scheppen over de zuinigheidsprestaties. En dan nog het liefst met Windows 10+drivers omdat dit zo goed vergelijkbaar is. Debian testing is een "moving target", het verandert voortdurend en is dus niet zo geschikt als vergelijkingsmateriaal.

[mdbraber]

mrmrmr schreef op donderdag 25 oktober 2018 @ 11:36:
[...]
Efficientiegegevens volgens Mini-Box manuals staan hier in een tabel.

160-XT is volgens deze gegevens van Mini-Box zuiniger dan een '90' bij laag verbruik. Een '80' is vergelijkbaar met een 160-XT. c1j heeft een uitgebreide test uitgevoerd met de 160-XT met interessante resultaten.

Het gaat bij de keuze vooral om het piekverbruik tijdens booten. De meeste energiemeters bewaren de maximale meetwaarde. Als je de mogelijkheid hebt, vergelijk bijvoorbeeld eens Debian zonder hard disks en met hard disks. Elke reboot is anders, dus deze test kan een zo'n 3-5 keer worden gedaan om het maximum te vinden. Dat geeft je een indicatie van hoeveel het verbruik zal zijn bij maximale uitbreiding.

Als je 3.5" HDD's gebruikt kun je er ruwweg 3 keer minder van gebruiken dan 2.5" HDD's.

Dank - ik houd het dan bij de 160-XT die er nu in zit met de 120W adapter.

Een idle zuinigheids test in deze configuratie: SSD, USB toetsenbord, USB muis en netwerk en monitor in slaapstand maakt een goede appels & appels vergelijking mogelijk. Als je dat zou kunnen doen zou dat duidelijkheid scheppen over de zuinigheidsprestaties. En dan nog het liefst met Windows 10+drivers omdat dit zo goed vergelijkbaar is. Debian testing is een "moving target", het verandert voortdurend en is dus niet zo geschikt als vergelijkingsmateriaal.

Is er ook een mogelijkheid om een Win10 test te doen in een soort Live boot omgeving? Dan wil ik gerust even kijken.

[mrmrmr]

@mdbraber

Terwijl mijn vorige bericht aan het typen was had @mdbraber al testresultaten gepost. 5W in die configuratie ziet er goed uit en komt dicht bij 4,6W van de D3417-B2 in de standaard configuratie met Windows 10 (met grafische drivers).

Windows 10 moet helaas worden geinstalleerd op SSD voor de vergelijkbaarheid. Live boot vanaf USB zou dat de vergelijkbaarheid niet ten goede komen, want dan neemt het USB verbruik toe. Als je nog een SSD hebt liggen kun je die gebruiken. Ik weet niet of het mogelijk is Windows 10 naast Debian testing te installeren. Image backup is ook een optie.

Een meting zonder de ventilatoren aangesloten zou ook mooi zijn.

Als je andere prioriteiten hebt, begrijp ik dat.

[mdbraber]

mrmrmr schreef op donderdag 25 oktober 2018 @ 12:01:
@mdbraber

Terwijl mijn vorige bericht aan het typen was had @mdbraber al testresultaten gepost. 5W in die configuratie ziet er goed uit en komt dicht bij 4,6W van de D3417-B2 in de standaard configuratie met Windows 10 (met grafische drivers).

Windows 10 moet helaas worden geinstalleerd op SSD voor de vergelijkbaarheid. Live boot vanaf USB zou dat de vergelijkbaarheid niet ten goede komen, want dan neemt het USB verbruik toe. Als je nog een SSD hebt liggen kun je die gebruiken. Ik weet niet of het mogelijk is Windows 10 naast Debian testing te installeren. Image backup is ook een optie.

Een meting zonder de ventilatoren aangesloten zou ook mooi zijn.

Als je andere prioriteiten hebt, begrijp ik dat.

Ja, dat zal dan helaas even moeten wachten. Ik heb wel een tweede m.2 SSD liggen, maar dat is een SATA SSD die dus helaas niet meer boot met het nieuwe 3644-B bord. De proxmox config nu weer wijzigen (na een redelijk complexe installatie met encrypted ZFS root) zit er even niet in. Maar als iemand een NVMe drive te leen heeft wil ik het gerust proberen.

[mdbraber]

Domokoen schreef op dinsdag 23 oktober 2018 @ 22:13:
Ik ben mijn nieuwe server aan het samenstellen. Vanwege de plek in de meterkast heb ik beperkte diepte-ruimte, vandaar de keus voor een Zalman T5. Uiteindelijk wil ik 4 schijven, maar ik begin met 2x 2.5".
Voor de processor wil ik eigenlijk een Xeon E-2124G vanwege de mogelijkheid tot TurboBoost en gebruik sneller geheugen. Maar deze had al 2 maanden geleden te koop moeten zijn en is dat nog steeds niet.
Nog te zoeken: een NVME M2 SSD (of een SATA SSD als die zuiniger zouden zijn), een voeding en bijpassend ECC geheugen (afhankelijk van of de Xeon nog te koop komt).

Met het 3644-B bord kan je alleen NVMe m.2 SSDs gebruiken (geen SATA). Is er een reden dat je zowel een losse 2.5" HDD gebruikt als een de Seagate Backup Plus drives? Ik gebruik zelf de laatste (recent nog aangeschaft voor 115eu per drive) en die werken prima.

[Raven]

mdbraber schreef op dinsdag 16 oktober 2018 @ 07:46:
Het lijstje ondersteunde processoren voor de 3644-B in combinatie met ECC is dus (afgaand op Intel ARK):

• Core™ i3-8350K (ondersteund, geen overclocking)
• Core™ i3-8300
• Core™ i3-8300T
• Core™ i3-8100
• Core™ i3-8100H (stond niet in de Intel lijst)
• Core™ i3-8100T

Waarom staat de 8400 daar eigenlijk niet bij?

[Bolk]

Raven schreef op donderdag 25 oktober 2018 @ 12:40:
[...]

Waarom staat de 8400 daar eigenlijk niet bij?

De i5 ondersteunt geen ECC. Intel logic

https://ark.intel.com/pro...-9M-Cache-up-to-4-00-GHz-

[Raven]

Dat had ik gezien, maar het gaat mij meer om de logica erachter, wel de wat zwakkere CPU's maar niet die.

[Dreamvoid]

mdbraber schreef op donderdag 25 oktober 2018 @ 11:36:
Wellicht kan ik Integrated Graphics nog disbalen, maar dat heb ik nog niet gecheckt.

Ik denk niet dat dit veel uitmaakt - ik zie op mijn Mac live hoeveel de graphics package verbruikt, en als er een stilstaande desktop getoond wordt, dan zie ik dat het gpu verbruik direct naar 0.0-0.1W terugschakelt, totdat ik weer grafisch dingen ga doen (vensters rondschuiven etc). Oftewel, het compleet uitschakelen van de graphics zal je ws weinig opleveren, Intel doet dat zelf al.

[mdbraber]

Aangezien het 3644-B bord alleen UEFI + NVMe ondersteunt kan ik me voorstellen dat meer mensen willen uitzoeken hoe dat werkt voor een server. Ik heb mijn tips voor het installeren van een encrypted ZFS root met UEFI + NVMe hier opgeschreven: mdbraber in "Het grote ZFS topic"

[mrmrmr]

mdbraber schreef op donderdag 25 oktober 2018 @ 12:10:
Ja, dat zal dan helaas even moeten wachten. Ik heb wel een tweede m.2 SSD liggen, maar dat is een SATA SSD die dus helaas niet meer boot met het nieuwe 3644-B bord.

Een normale non-M.2 SATA SSD is prima.

NVMe heeft een PCIe overhead en andere manier van stroombesparen dan SATA.

[mdbraber]

mrmrmr schreef op donderdag 25 oktober 2018 @ 13:24:
[...]
Een normale non-M.2 SATA SSD is prima.

NVMe heeft een PCIe overhead en andere manier van stroombesparen dan SATA.

Hmm, maar volgens mij werkt dat niet meer omdat er dus geen SATA boot meer is met het 3644-B bord. Maar nou begin ik ook even te twijfelen... Ik ga nog eens kijken

[Flaat]

pimlie schreef op vrijdag 19 oktober 2018 @ 11:52:
Is het nog een idee om te wachten op dat de Xeon E-2124G beschikbaar is? Heeft een 6W hogere TDP dan een i3-8100 maar daarvoor krijg je een turboboost naar 4.5Ghz en ondersteuning voor DDR4-2666.

Intel heeft enorme problemen qua zn 14nm aanvoer, desktop en laptop parts hebben nu prio om gezichtsverlies te voorkomen. M'n leverancier zegt pas een verbetering te verwachten rond maart 2019. Zie ook: https://semiaccurate.com/...ctly-recommends-amd-epyc/

[Bolk]

Ik heb zojuist ook de bestelling gedaan. Zo'n beetje dezelfde setup als @mdbraber, met 6 disks, Kingston geheugen en een i3-8300. Ik verwacht woensdag zo'n beetje alles binnen te hebben en met FreeNAS aan de slag te kunnen.

Ik heb alleen een Wattmeter op m'n UPS. Nog tips op dat gebied?

[mrmrmr]

De topic start bevat een paar tips over energiemeters. Dat verdient zichzelf terug omdat je ermee kan opsporen welke apparaten een hoog sluipverbruik hebben.

Een UPS kan een hoog verbruik hebben, dat hebben we hier een paar gevallen van gezien.

[Raven]

mrmrmr schreef op donderdag 25 oktober 2018 @ 17:37:
Een UPS kan een hoog verbruik hebben, dat hebben we hier een paar gevallen van gezien.

, voorbeeld: Jaren terug pricewatch: APC Smart-UPS XL 750VA USB & Serial 230V gebruikt, de huidige 2 mITX-systemen (DQ77KB/3470T + IM-945GSE-A) verbruiken samen minder dan wat die UPS verbruikte (~40W) tijdens het idlen.

[Bolk]

mrmrmr schreef op donderdag 25 oktober 2018 @ 17:37:

Een UPS kan een hoog verbruik hebben, dat hebben we hier een paar gevallen van gezien.

De UPS gaat weg. Het ging me er alleen om dat er een meter in zit

Heb ondertussen een losse meter besteld nav de topicstart. Thanks.

[unezra]

SirNobax schreef op dinsdag 16 oktober 2018 @ 20:50:
[...]

Inkopper is Proxmox.

Debian met ZFS en een puike schil om KVM/LXC heen om VM's en Linux containers te beheren. ZFS heeft o.a. bit-rot detection en pools kan je ook blijven uitbreiden, mits je geen RAIDZ (Raid5/6) gebruik.

Niet helemaal waar. Een mirror, stripe of mirrored stripe kun je óók niet uitbreiden.
Iedere vorm van RAID die je gebruikt maakt dat je de set niet kunt vergroten, hooguit de disks kunt vervangen...

Ondertussen ben ik zelf tóch weer opnieuw aan het kijken naar een servertje. Nog steeds formaat HP Microserver of iets groter, maar dan met fatsoenlijke 4-core+HT of beter CPU, 32G of meer maximaal geheugen (liefst 64G).

Helaas kan ik werkelijk helemaal niets vinden behalve zelfbouw en dát wil ik niet. Shuttles voldoen aan alle eisen, alleen hebben die maar 2 stuks 3,5" drivebays, terwijl ik er 4 wil hebben plus nog de mogelijkheid voor en NVME of 2,5" (liefst 2 stuks) voor het OS. (Ok, ze hebben maar 1 of 2 NIC's maar da's op te lossen. Ik heb nog een paar 4xGBit kaarten van HP liggen die er prima in passen. Met 4xGBit ben ik op dit moment wel klaar. Sure, ik wil ooit naar 10G maar vind het nu nog te duur voor thuis.)

Mijn huidige setup bestaat uit 3x HP MIcroserver Gen8 (2x hypervisor, 1x NAS) en qua stroomverbruik vind ik dat veel te gortig worden. Geheel doet inclusief apparatuur als switches meer dan 150W. Leuk om de gang te verwarmen maar zonde van de stroom.

Als ik van die 3 machines 1 machine maak, kan ik meteen mijn switch vervangen door 1 enkel PoE exemplaar: pricewatch: TP-Link JetStream 24-Port Gigabit Smart PoE+ Switch with 4 SFP Sl...

Scheelt ook weer stroom. Kan ik mijn Zyzel PoE switch weer op de plank leggen. (Of verkopen.)

[mdbraber]

Even een vraag voor de (DIY) NAS bezitters: maken jullie gebruik van spindown voor je (ZFS) pools? Qua geluid en energieverbruik lijkt dat aantrekkelijk, maar vanuit het oogpunt van duurzaamheid is die onvoorspelbare spin-up piek verre van ideaal. Wat doen jullie?

@unezra waarom wil je geen zelfbouw? Vanwege 'het gedoe' of iets anders? Als je een set neemt die iemand anders al eens met goed gevolg gebouwd heeft (bijv. de 3644-B / i3-8100 combo die ik nu heb) is het wel volgens spec en verder weinig moeite. Ik probeer gewoon een beetje te begrijpen wat je zoekt... Het eindeloos zoeken naar de perfecte off-the-shelf server kan net zo'n "gedoe" zijn als zelf iets bouwen :-)

[unezra]

mdbraber schreef op vrijdag 26 oktober 2018 @ 10:05:
Even een vraag voor de (DIY) NAS bezitters: maken jullie gebruik van spindown voor je (ZFS) pools? Qua geluid en energieverbruik lijkt dat aantrekkelijk, maar vanuit het oogpunt van duurzaamheid is die onvoorspelbare spin-up piek verre van ideaal. Wat doen jullie?

Ik doe het niet, maar dat is ook omdat ik mijn NAS niet enkel gebruik als NAS. Ik heb een aantal vm's draaien thuis waardonder de vm van mijn stichting. (Stichting is goeddeels plat dus zooi naar huis gebracht om kosten te besparen.)

Vm's genereren altijd wel iets van IO, dus spindown heeft dan sowieso geen nut.

@unezra waarom wil je geen zelfbouw? Vanwege 'het gedoe' of iets anders? Als je een set neemt die iemand anders al eens met goed gevolg gebouwd heeft (bijv. de 3644-B / i3-8100 combo die ik nu heb) is het wel volgens spec en verder weinig moeite. Ik probeer gewoon een beetje te begrijpen wat je zoekt... Het eindeloos zoeken naar de perfecte off-the-shelf server kan net zo'n "gedoe" zijn als zelf iets bouwen :-)

Ik wil mijn setup sterk vereenvoudigen. Van 3 naar 1, van een setup met centrale NAS en 2 hypervisors naar één systeem met PVE als onderlaag en FreeNAS als vm daarop draaiende.

Dit deels om stroom te besparen (3 van die machines vreet toch best wel), deels om het beheer te minimaliseren. Het is nu relatief veel gedoe en gaat natuurlijk ALTIJD stuk als ik echt geen zin heb om er aan te klussen. Laatst de hele handel weer verhuisd (heeft een tijd boven gedraaid wegens verbouwing, nu is de verbouwing klaar en kan het weer stofvrij in de meterkast draaien) en dat kost een paar uur. Het is ook een enorme dradenbende. Iedere machine is met 5x ethernet aangesloten.

Ander groot voordeel van off-the-shelf is dat je geen gedoe hebt met opbouw en de belangrijkste componenten al netjes door de fabrikant bij elkaar zijn gevoegd. Misschien ten onrechte, maar ik heb het gevoel daarmee een stabielere server te krijgen.

Aan de andere kant, zelfbouw kán wel. Heb ik jaren en met veel plezier mee gedraait. Mijn oude server is een midi tower met een paar 5,25" drivebays en hot-swap bays er in. Vervangen omdat iemand mij de HP Microserver tipte.

Vind de Microserver echt een *perfect* ding, alleen de Gen8 heeft te weinig geheugen (en de CPU is beperkt te upgraden), de Gen10 heeft genoeg geheugen maar de CPU lijkt nauwelijks sneller dan de G1610T die er in de Gen8 zit. (En 32G max is wel krap. Ik zou liefst een machine met 64G max willen hebben en nu beginnen met 32G. DDR3 of DDR4 maakt me niet veel uit. Voordeel van nu een DDR3 machine kopen is dat mogelijk de 8G modules uit mijn Microserver mee kunnen en dat scheelt *veel* geld. Dan heb ik echt alleen nog maar een chassis en CPU nodig, SSD voor het OS, HDD's en ECC geheugen heb ik al.)

Oh ja, ECC is wel een harde eis. Ik ga ZFS draaien. Liefst ZFS in mirror voor het OS (2x 2,5") en ZFS in een mirrored stripe (4x3,5") voor de vm's en mijn NAS data. Met 32G kom ik nu een heel eind, 8G voor het OS en dan nog 24G over maar meer of iig een upgrade pad naar meer is wel fijn.

Qua CPU wil ik ook liefst naar 4-core + HT of 8-core. (Baal er van dat ik nog géén off-the-shelf AM4 systeem heb gezien. Wat de drempel naar zelfbouw wel weer lager zou maken. Leuke AMD Ryzen heeft mijn voorkeur boven een Intel.

Zoiets als dit:
pricewatch: AMD Ryzen 3 2200G Tray
pricewatch: AMD Ryzen 5 2400G Tray

Waarom AMD? Veel cores voor relatief weinig geld en ik vind het goed dat Intel eindelijk weer een beetje tegengas krijgt. Daarbij ben ik érg tevreden over mijn Ryzen 1800X machine. Kortom, Intel kan, maar vooralsnog neig ik naar een AMD systeem. (En fin, dan is zelfbouw misschien wel de enige optie.)

[mrmrmr]

Zelfbouw is in dit geval wel aan te raden. Als je AMD kiest lig je al meteen achter omdat die niet zo zuinig is. Intel desktop cpu's met ECC zijn wel overmatig duur momenteel, maar dan nog, die hebben een significant beter laag idle verbruik. Als je 5 keer ethernet hebt heb je waarschijnlijk ook een quadkaart, vooral een oudere kaart verbruikt veel, zo'n 10W. Een flink aantal 3.5" harde schijven verbruiken het meest (bv. 5-9W per stuk), daar is dus in jouw situatie een grote besparing te halen door waar mogelijk 2.5" HDD's van 1,1W per stuk toe te passen. Voor het OS zou ik altijd een SSD kiezen, die zijn flink in prijs gezakt en de meeste modellen zijn zuinig (niet allemaal, maar bijvoorbeeld wel Samsung EVO of een WD Green). SDD's zijn zo snel dat ze snel in en uit een low power stand kunnen. Anandtech heeft daar tests van.

Als de computer zelf weinig verbruikt kan de voeding ook zuiniger en er zijn minder ventilatoren nodig, dat werkt dus door.

Voordeel van zelfbouw is ook dat je zowel een laag verbruik als veel processorvermogen (bij Intel) kunt kiezen. De beste van twee werelden.

[unezra]

mrmrmr schreef op vrijdag 26 oktober 2018 @ 11:24:
Zelfbouw is in dit geval wel aan te raden. Als je AMD kiest lig je al meteen achter omdat die niet zo zuinig is. Intel desktop cpu's met ECC zijn wel overmatig duur momenteel, maar dan nog, die hebben een significant beter laag idle verbruik.

Da's zeker weer een voordeel. ECC is met ZFS wel heel belangrijk. Geen noodzaak, maar het is meer dan een nice-to-have.

Als je 5 keer ethernet hebt heb je waarschijnlijk ook een quadkaart, vooral een oudere kaart verbruikt veel, zo'n 10W.

Klopt. Moederborden met 4xGBit zijn echter vrij duur en zeldzaam plus dat mocht ik ooit naar 10G willen, ik dan tóch al vast zit aan een kaart. Dan kan ik beter even in mijn NIC's voorzien met een kaart die ik toch al heb liggen en me dus effectief geen geld kost. (Ik heb iets van 3 of 4 van die quadkaarten in huis. Leftovers van kantoor.)

Een flink aantal 3.5" harde schijven verbruiken het meest (bv. 5-9W per stuk), daar is dus in jouw situatie een grote besparing te halen door waar mogelijk 2.5" HDD's van 1,1W per stuk toe te passen.

Qua harddisks zoek ik het compromis in 4 stuks ipv de 8 stuks die ik ooit had. 2,5" HDD's zijn ontzettend leuk, maar ik wil 4x5T en ik héb op dit moment 10x5T in huis. (4 in gebruik, 4 komen uit de decomissioned server van mijn stichting, 2 liggen er op de plank als sparepart) Qua energieverbruik zijn ze misschien niet het beste maar omdat ik ze al heb, scheelt het me wel een flinke investering.

Voor het OS zou ik altijd een SSD kiezen, die zijn flink in prijs gezakt en de meeste modellen zijn zuinig (niet allemaal, maar bijvoorbeeld wel Samsung EVO of een WD Green). SDD's zijn zo snel dat ze snel in en uit een low power stand kunnen. Anandtech heeft daar tests van.

In principe zou ik het OS op de 5T's kunnen plaatsen maar dat vind ik niet fijn. Bedoeling is inderdaad om het OS op een SSD te zetten. Heb daar ook al 3 stuks van in huis, eventueel een nieuwe SSD is te doen qua investering.

Als de computer zelf weinig verbruikt kan de voeding ook zuiniger en er zijn minder ventilatoren nodig, dat werkt dus door.

Voordeel van zelfbouw is ook dat je zowel een laag verbruik als veel processorvermogen (bij Intel) kunt kiezen. De beste van twee werelden.

Ook zeker waar. Door een ander topic op een andere manier toch weer aan het denken gezet over zelfbouw: Een kast met window. Er blijkt zoiets als "Inverted ATX" te bestaan waarmee het window aan de rechter kant komt en alle componenten op zijn kop in de kast komen. Zoiets is 100% eyecandy, maar toch, als ik dan toch voor zelfbouw ga kan ik er net zo goed iets moois van maken. Mét window en misschien mijn case en CPU fans vervangen door LED (al dan niet RGB) exemplaren.

Meteen permanente kastverlichting.

Voor mij hoeft het niet eens meteen de zuinigste server te zijn, met 4 disks,4+ cores, ECC geheugen, 4x ethernet, etc, zal het niet snel een 12W servertje worden. De voornaamste besparing zal bij mij zitten in het terugbrengen van 3 naar 1, waarmee ik 2 complete HP Microservers uitspaar.

Mijn 5 poorts PoE switch kan ook met vervroegd pensioen als ik er een 16 of 24 poorts PoE switch neer hang. (Waarvan ik overigens maar iets van 4 PoE poorten hoef te hebben. 2x Ubiquiti AP, 1x PoE telefoon en nog wat reserve.) Scheelt een apart apparaat en ik ga er vanuit (misschien ten onrechte) dat een 24p PoE switch met 3 PoE devices aangesloten niet veel meer verbruikt dan een 24p niet-PoE switch met een losse 5p PoE switch met 3 PoE devices aangesloten.

[Dennis]

unezra schreef op vrijdag 26 oktober 2018 @ 11:37:
[...] en ik ga er vanuit (misschien ten onrechte) dat een 24p PoE switch met 3 PoE devices aangesloten niet veel meer verbruikt dan een 24p niet-PoE switch met een losse 5p PoE switch met 3 PoE devices aangesloten.

Daar zou je je wel eens in kunnen vergissen. In ieder geval verbruikt mijn 24P PoE switch flink wat vermogen, veel meer dan nodig is voor de PoE-apparaten die erop aangesloten zijn. Ik zou het maar eens meten als ik jou was.

Zie ook mijn reactie hier: Dennis in "\[Ubiquiti-apparatuur] Ervaringen & Discussie - Deel 3"

[unezra]

Dennis schreef op vrijdag 26 oktober 2018 @ 12:31:
[...]

Daar zou je je wel eens in kunnen vergissen. In ieder geval verbruikt mijn 24P PoE switch flink wat vermogen, veel meer dan nodig is voor de PoE-apparaten die erop aangesloten zijn. Ik zou het maar eens meten als ik jou was.

Zie ook mijn reactie hier: Dennis in "\[Ubiquiti-apparatuur] Ervaringen & Discussie - Deel 3"

Hmmm, dat is inderdaad anders dan verwacht.

Dat word goed onderzoek doen dus voordat ik zo'n ding aan schaf. PoE is extreem handg en liefst heb ik wel 1 apparaat ipv 2, mogelijk wel dat ik met een 16p model toe kan waarvan 8 PoE. Ik heb op dit moment 8x ethernet thuis (word 10x) , waarvan 3 gebruikt worden voor een PoE.

Idealiter knoop ik alles in de meterkast aan elkaar met 1 enkele switch en heb ik boven nog 1 switch voor mijn testomgeving of leg ik daar een kleine 8p niet-PoE switch neer die ik met 2x ethernet naar beneden breng.

Als het fors in energie scheelt, kan ik ook mijn huidige switch setup houden. Een nieuwe switch is alleen interessant als ik daarmee energiezuiniger én makkelijker PoE heb. (Makkelijker want 1 apparaat minder.)

[Raven]

Dennis schreef op vrijdag 26 oktober 2018 @ 12:31:
[...]

Daar zou je je wel eens in kunnen vergissen. In ieder geval verbruikt mijn 24P PoE switch flink wat vermogen, veel meer dan nodig is voor de PoE-apparaten die erop aangesloten zijn. Ik zou het maar eens meten als ik jou was.

Zie ook mijn reactie hier: Dennis in "\[Ubiquiti-apparatuur] Ervaringen & Discussie - Deel 3"

Zijn Ubiquiti's switches niet voorzien van een feature dat ongebruikte poorten uitgeschakeld worden om stroom te besparen?

[Dennis]

Raven schreef op vrijdag 26 oktober 2018 @ 14:31:
Zijn Ubiquiti's switches niet voorzien van een feature dat ongebruikte poorten uitgeschakeld worden om stroom te besparen?

Zie hier: RobertMe in "\[Ubiquiti-apparatuur] Ervaringen & Discussie - Deel 3"

@RobertMe weet daar meer van dan ik denk ik .

[SirNobax]

unezra schreef op vrijdag 26 oktober 2018 @ 09:34:
[...]
Niet helemaal waar. Een mirror, stripe of mirrored stripe kun je óók niet uitbreiden.

Huh? Waarom zou je een pool, bestaande uit een enkele mirror vdev, niet uit kunnen uitbreiden door daar een andere mirror vdev aan toe te voegen?

Zoals hier.

[unezra]

SirNobax schreef op vrijdag 26 oktober 2018 @ 21:33:
[...]

Huh? Waarom zou je een pool, bestaande uit een enkele mirror vdev, niet uit kunnen breiden door daar een andere mirror vdev aan toe te voegen?

Zoals hier.

Dat kan wel, maar het resultaat is geen mirrored stripe of RAID10 equivalent. Het enige dat je krijgt is meer geconcateneerde ruimte.

Kan nuttig zijn, persoonlijk verdeel ik dan liever mijn data over meerdere vdevs of vervang ik de disks binnen 1 vdev.

[FireDrunk]

Dat is toch wat @SirNobax zegt? Meerdere mirrored vdevs?

Meerdere Mirrored vdevs is gewoon 'raid10'. Voor zover je raid10 met zfs kan vergelijken.

Bovendien kan je een mirror en een stripe prima uitbreiden, alleen krijg je er niet altijd ruimte voor terug

[unezra]

FireDrunk schreef op zaterdag 27 oktober 2018 @ 11:07:
Dat is toch wat @SirNobax zegt? Meerdere mirrored vdevs?

Meerdere Mirrored vdevs is gewoon 'raid10'. Voor zover je raid10 met zfs kan vergelijken.

Bovendien kan je een mirror en een stripe prima uitbreiden, alleen krijg je er niet altijd ruimte voor terug

Nee.
Een striped mirrored vdev die je op zet *voordat* je er data op zet, is een mirrored stripe / RAID10 equivalent. Zoiets gaat daadwerkelijk functioneren als een RAID10 array.

Heb je een mirrored vdev en voeg je daar later een 2e mirrored vdev aan toe, krijg je geen striped mirror maar meer een soort JBOD bestaande uit mirrors. Da's best een cruciaal verschil.

(In geval van een striped vdev die je mirrord precies eender trouwens. Het werkt net iets anders, maar een RAID10 equivalent word het niet als je het later gaat uitbreiden.)

[ Voor 10% gewijzigd door unezra op 27-10-2018 15:03 ]

[FireDrunk]

Het simpele feit dat je data niet helemaal eerlijk verdeeld is, betekend toch niet dat het geen Raid10 is? Functioneel blijft het gelijk?

Striped vdev mirroren kan niet voor zover ik weet. ZFS striped over vdevs, maar je kan niet zomaar een striped vdev maken voor zover ik weet...

[necessaryevil]

Raydo88 schreef op dinsdag 23 oktober 2018 @ 23:13:
[...]

Onder de '64%' in de openingspost vind je een link...

Als ik in de link kijk dan kom ik niet aan 64% maar aan 62.5%, klein verschiletje. Zoals ik het lees is er bij 10w output 6w verlies (verluste) en wordt er 16w uit het net opgenomen; 10/16 = 62.5%

[mrmrmr]

necessaryevil schreef op zondag 28 oktober 2018 @ 20:39:
[...]

Als ik in de link kijk dan kom ik niet aan 64% maar aan 62.5%, klein verschiletje. Zoals ik het lees is er bij 10w output 6w verlies (verluste) en wordt er 16w uit het net opgenomen; 10/16 = 62.5%

Dat komt door afrondingsverschil. Hier een overzicht van nauwkeurigere meetcijfers uit een andere tabel in dit c't artikel (heft 11, 13-05-2017).