Het grote zuinige server topic - deel 2

[iamzero456]

mrmrmr schreef op woensdag 10 juli 2019 @ 11:44:

De D3417-B2 ondersteunt Skylake en Kaby Lake (zoals G4560) , het ondersteunt geen Coffee Lake (zoals G5400).

Oeps, niet bij stilgestaan!

Dit is al een zeer zuinig moederbord. Het kan theoretisch nog beter met een D364x (met G5400), dan bespaar je nog iets op USB aangesloten apparaten (~1W), maar vervangen zou ik niet doen, ik heb zelf ook een paar D3417-B2's draaien. Zonder deze randapparatuur is het verbruik gelijk.

Top, dan hou ik moederbord/cpu gelijk.

Dat is wel verstandig. Met geheugenupgrades moet je wel opletten als je verschillende soorten en snelheden mengt, dat kan wel eens problemen geven. Ik heb nog geen configuratie gezien van een D3417-B2 met een Intel 660p. Vermoedelijk staat die M.2 NVMe nog niet in het (altijd beperkte) lijstje ondersteunde onderdelen, dus dat is net als het geheugen een kwestie van testen.

Ik wil het liefst 1 reepje van 8 of 16gb gebruiken. Ik zag op V&A een Hynix 8gb 2400mhz ecc, maar ik moet dus in de gaten houden of het gaat werken of niet. Zelfde geld voor de SSD, ik koos de p660 vanwege de lage 0,1 W als stroomverbruik. Eerst maar even proberen dus.

Tips die ik kan bedenken zijn:
* Linux kan zuiniger worden gemaakt met powertop --autotune bij iedere herstart.
* Reset de BIOS naar standaard.
* Daarna: above 4GB decoding uitschakelen in de BIOS voor zover aanwezig.

Top, dank voor de tips!

[Dreamvoid]

Ik denk dat zowel casefan als cpu fan eruit, iets teveel van het goede is. Als je kijkt naar wat voor enorme koelblokken er in die fanless Akasa behuizingen zitten (en daar lukt het *net* mee), lijkt het me dat je het met die Arctic Alpine alleen (zonder verdere airflow) niet redt bij een Kaby Lake/Skylake setup, tenminste niet zonder dat je het verbruik onder load op 1 of andere manier drastisch weet te begrenzen (onderklokken, HT uit, etc).

[iamzero456]

Dreamvoid schreef op woensdag 10 juli 2019 @ 12:10:
Ik denk dat zowel casefan als cpu fan eruit, iets teveel van het goede is. Als je kijkt naar wat voor enorme koelblokken er in die fanless Akasa behuizingen zitten (en daar lukt het *net* mee), lijkt het me dat je het met die Arctic Alpine alleen (zonder verdere airflow) niet redt bij een Kaby Lake/Skylake setup, tenminste niet zonder dat je het verbruik onder load op 1 of andere manier drastisch weet te begrenzen (onderklokken, HT uit, etc).

Undervolten was mijn idee vooral. Op mijn laptop windows lukt dat best goed met mijn heethoofd van een Intel i5-8250U , mogelijk ook in linux met deze chip. HT kan wat mij betreft wel uit, want bijvoorbeeld Plex streams beperken zich tot binnenshuis en zal nooit meer dan 1 stream zijn (voorlopig).

De alpine heeft een TDP van 45W, de processor heeft een TDP van 54W. Natuurlijk is dit niet 1 op 1 te vergelijken, zeker aangezien men er vanuitgaat dat er nog enige airflow aanwezig is in de behuizing. Maar het is vooral testen en als het echt niet gaat (temps van 80+) dan hou ik inderdaad de processorkoeler.

[ Voor 15% gewijzigd door iamzero456 op 10-07-2019 12:16 ]

[FireDrunk]

Zo, vandaag is mijn nieuwe zuinige server binnen gekomen. Fujitsu 3644-B plankje, i3-8100, en 32GB ECC geheugen. Ga hem samen met een Seasonic Fanless platinum 400W voeding en 6 * 2.5" 2TB schijven draaien.

Kijken waar we op uitkomen qua verbruik!

[ Voor 3% gewijzigd door FireDrunk op 10-07-2019 12:18 ]

[koelkast]

Ik zit eraan te denken om een oude Dell laptop als ubuntu+docker-server in te zetten. Die heb ik nog liggen, en dat scheelt weer een nucje aanschaffen. Grote SSD erin om alle docker-data op te zetten, en gaan.

Ik doe het vanwege de zuinigheid, ik heb momenteel een i5 draaien, maar die staat continue uit z'n neus te eten, dus iets zuinigers kan ook wel.

Lukt dat tegenwoordig een beetje, een laptop met Ubuntu?

[LigeTRy]

FireDrunk schreef op woensdag 10 juli 2019 @ 12:18:
Zo, vandaag is mijn nieuwe zuinige server binnen gekomen. Fujitsu 3644-B plankje, i3-8100, en 32GB ECC geheugen. Ga hem samen met een Seasonic Fanless platinum 400W voeding en 6 * 2.5" 2TB schijven draaien.

Kijken waar we op uitkomen qua verbruik!

Mag ik vragen waarom je voor seasonic bent gegaan in plaats van een picopsu?

[FireDrunk]

wessel145 schreef op woensdag 10 juli 2019 @ 12:39:
[...]


Mag ik vragen waarom je voor seasonic bent gegaan in plaats van een picopsu?

Had ik al

[Raven]

FireDrunk schreef op woensdag 10 juli 2019 @ 12:18:
Zo, vandaag is mijn nieuwe zuinige server binnen gekomen. Fujitsu 3644-B plankje, i3-8100, en 32GB ECC geheugen. Ga hem samen met een Seasonic Fanless platinum 400W voeding en 6 * 2.5" 2TB schijven draaien.

Kijken waar we op uitkomen qua verbruik!

Is er inmiddels al ergens bewijs te vinden dat ECC-functionaliteit daadwerkelijk wordt gebruikt i.c.m. dergelijke MB's en CPU's? Zit rond te kijken naar hardware voor FreeNAS, ik twijfel tussen dat en gebruikte server-hardware van Ebay en de V&A.

[Kek]

Raven schreef op woensdag 10 juli 2019 @ 13:11:
[...]

Is er inmiddels al ergens bewijs te vinden dat ECC-functionaliteit daadwerkelijk wordt gebruikt i.c.m. dergelijke MB's en CPU's? Zit rond te kijken naar hardware voor FreeNAS, ik twijfel tussen dat en gebruikte server-hardware van Ebay en de V&A.

hoe zou dit gechecked moeten worden..? (ik heb dat bord en ecc ram)

Gevonden:

# dmidecode -t memory | grep 'Physical Memory Array' -A7
Physical Memory Array
Location: System Board Or Motherboard
Use: System Memory
Error Correction Type: Single-bit ECC
Maximum Capacity: 64 GB
Error Information Handle: Not Provided
Number Of Devices: 4

met pricewatch: Fujitsu D3644-B en pricewatch: Crucial CT16G4WFD8266 (plus een i3 8100) in proxmox 6.0beta1

[ Voor 38% gewijzigd door Kek op 10-07-2019 13:38 ]

[mrmrmr]

Raven schreef op woensdag 10 juli 2019 @ 13:11:
[...]

Is er inmiddels al ergens bewijs te vinden dat ECC-functionaliteit daadwerkelijk wordt gebruikt i.c.m. dergelijke MB's en CPU's? Zit rond te kijken naar hardware voor FreeNAS, ik twijfel tussen dat en gebruikte server-hardware van Ebay en de V&A.

Als Fujitsu dat zegt (error correctie is een optie in de BIOS) mag je daar wel van uitgaan. De processor moet ECC ondersteunen, het zit ingebakken in de cpu. Dus het werkt wel met een Pentium of i3 maar niet met een standaard i5, i7 of i9.

memtest86+ geeft aan of ecc gebruikt wordt.

dmidecode onder Linux geeft 72 bits.

[misthafalls]

@mrmrmr ik las iets met betrekking tot de chipsets van AMD. Der8auer heeft dit exact uitgezocht voor ons . Gaat voornamelijk om de x570 en de x470, maar wel interessant om te zien.

YouTube: X570 Power Consumption Measured - What is going on here?

[Kaspers]

Huidige server begint inmiddels toch moeite te krijgen met de load, na het toevoegen van nog wat dockers. Ik sta op het punt de volgende configuratie aan te schaffen:

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-9100 Boxed	€ 145,20	€ 145,20
1	Moederborden	Fujitsu D3643-H	€ 93,50	€ 93,50
1	Behuizingen	Cooler Master MasterBox Q300L	€ 35,50	€ 35,50
1	Kabels	Mini-box P4 convertercable (for PicoPSU)	€ 6,05	€ 6,05
1	Computer accessoires	Leicke ULL Power Supply 120 W	€ 35,-	€ 35,-
1	Processorkoeling	Arctic Alpine 12 Passive	€ 12,91	€ 12,91
1	Geheugen intern	Crucial CT16G4DFD8266	€ 61,-	€ 61,-
1	Voedingen	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 55,50	€ 55,50
1	Solid state drives	Intel 660p 1TB	€ 102,05	€ 102,05
Bekijk collectie Importeer producten			Totaal	€ 546,71

Use case:

Voornamelijk applicatieserver.
Als OS Proxmox VE, met guests:
+/- 10 docker containers (cloudflared DoH, pihole, deconz, dsmrreader, grafana, homeassistant, mosquitto, nodered, prometheus, traefik)
paar Linux containers (plex, 2 docker hosts, nzbd, vpn (wireguard))

server staat uiteraard 24/7 aan. elke dag ga ik backups draaien naar een NFS target op een synology nas, waardoor raid/zfs-arrays niet nodig zijn. Ik voeg een 2.5 inch SSD toe voor het OS, de nvme ssd dient als opslag voor de containers.

Is 't overigens zinvol om voor de nieuwe generatie i3-9100 te gaan, ipv een 8100? Ik zie weinig verschillen als ik de specs naast elkaar leg, maar deze bench laat iets betere prestaties met de laatste gen zien.

[mdbraber]

Kaspers schreef op woensdag 10 juli 2019 @ 22:28:
Huidige server begint inmiddels toch moeite te krijgen met de load, na het toevoegen van nog wat dockers. Ik sta op het punt de volgende configuratie aan te schaffen:

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-9100 Boxed	€ 145,20	€ 145,20
1	Moederborden	Fujitsu D3643-H	€ 93,50	€ 93,50
1	Behuizingen	Cooler Master MasterBox Q300L	€ 35,50	€ 35,50
1	Kabels	Mini-box P4 convertercable (for PicoPSU)	€ 6,05	€ 6,05
1	Computer accessoires	Leicke ULL Power Supply 120 W	€ 35,-	€ 35,-
1	Processorkoeling	Arctic Alpine 12 Passive	€ 12,91	€ 12,91
1	Geheugen intern	Crucial CT16G4DFD8266	€ 61,-	€ 61,-
1	Voedingen	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 55,50	€ 55,50
1	Solid state drives	Intel 660p 1TB	€ 102,05	€ 102,05
Bekijk collectie Importeer producten			Totaal	€ 546,71

Use case:

Voornamelijk applicatieserver.
Als OS Proxmox VE, met guests:
+/- 10 docker containers (cloudflared DoH, pihole, deconz, dsmrreader, grafana, homeassistant, mosquitto, nodered, prometheus, traefik)
paar Linux containers (plex, 2 docker hosts, nzbd, vpn (wireguard))

server staat uiteraard 24/7 aan. elke dag ga ik backups draaien naar een NFS target op een synology nas, waardoor raid/zfs-arrays niet nodig zijn. Ik voeg een 2.5 inch SSD toe voor het OS, de nvme ssd dient als opslag voor de containers.

Is 't overigens zinvol om voor de nieuwe generatie i3-9100 te gaan, ipv een 8100? Ik zie weinig verschillen als ik de specs naast elkaar leg, maar deze bench laat iets betere prestaties met de laatste gen zien.

Ik heb ongeveer een gelijkwaardige setup, maar dan met een 3644-B (32GB ECC) en 5x2.5" HDD. Als CPU een i3-8100 en ongeveer 20-25 dockers draaiende. Tenzij hij nzb's aan het repareren is of meerdere Plex streams aan het versturen heeft 'ie weinig te doen. Een i3-8100 is prima, maar als je voor een tientje meer iets meer vermogen kan meepakken, waarom niet? Als je niet meer schijven wil / kan dan is de 60W picoPSU wsl genoeg - als je meer nodig hebt kan je ook voor iets meer gaan zoals de 160XT (die ik heb icm de Leicke 120W). Mijn verbruik is met keyboard + display, 5 schijven in idle en m2 SSD zo'n 8-10W.

[Yarisken]

Die case krijgt toch wel erg slechte kritieken.

[mrmrmr]

misthafalls schreef op woensdag 10 juli 2019 @ 21:49:
@mrmrmr ik las iets met betrekking tot de chipsets van AMD. Der8auer heeft dit exact uitgezocht voor ons . Gaat voornamelijk om de x570 en de x470, maar wel interessant om te zien.

YouTube: X570 Power Consumption Measured - What is going on here?

Mooi werk van Der Bauer! De resultaten maken voldoende duidelijk dat je niet hoeft te kijken naar X570 chipset voor zuinige thuisservers. Het verbaast me niet dat het basisverbruik van de X470 chipset even hoog is als een compleet zuinig Intel systeem en dat X570 twee keer meer verbruikt. Der Bauer ziet ook geen reden voor dat hogere verbruik. Asmedia is volgens berichten de bedenker van de chipset.

N.B. Hij gebruikt Peaktech spullen om te meten. Da's Duits Aziatisch (of Aziatisch Duits), ik heb er ook een regelbare voeding van.

[Dxue]

mrmrmr schreef op donderdag 11 juli 2019 @ 00:06:
[...]


Mooi werk van Der Bauer! De resultaten maken voldoende duidelijk dat je niet hoeft te kijken naar X570 chipset voor zuinige thuisservers. Het verbaast me niet dat het basisverbruik van de X470 chipset even hoog is als een compleet zuinig Intel systeem en dat X570 twee keer meer verbruikt. Der Bauer ziet ook geen reden voor dat hogere verbruik. Asmedia is volgens berichten de bedenker van de chipset.

N.B. Hij gebruikt Peaktech spullen om te meten. Da's Duits Aziatisch (of Aziatisch Duits), ik heb er ook een regelbare voeding van.

regelbare voeding? als in zuinige stand als je geen videokaart erin stopt en je kan hem opschalen als je een game wilt spelen met een videokaart erbij? dat zou wel interessant zijn.

ik zag trouwens dat een x570 bord 12 sata aansluitingen had. zou dat een mogelijk positief punt kunnen zijn als je heel veel drives wilt aansluiten? Alhoewel ik volgens mij heb gelezen dat een losse kaart minder verbruikt dan een x570 tov x470. Ben toch wel benieuwd wat een goede b450 verbruikt nu. ik ga maar eens op onderzoek uit (weliswaar heel rustig, ben aardig geinteresseert in die nieuwe ryzen 3th gen cpu, hopelijk komen er snel resultaten van de goedkopere cpu's uit)

[Bobbika]

Kaspers schreef op woensdag 10 juli 2019 @ 22:28:

Is 't overigens zinvol om voor de nieuwe generatie i3-9100 te gaan, ipv een 8100? Ik zie weinig verschillen als ik de specs naast elkaar leg, maar deze bench laat iets betere prestaties met de laatste gen zien.

Ik zit met dezelfde overweging. Wat voor mij ook meeweegt is dat je waarschijnlijk een bios update nodig zal hebben voordat de 9100 op dit bord gaat werken, maar dat weet ik niet zeker.

[Kaspers]

Bobbika schreef op donderdag 11 juli 2019 @ 13:47:
Ik zit met dezelfde overweging. Wat voor mij ook meeweegt is dat je waarschijnlijk een bios update nodig zal hebben voordat de 9100 op dit bord gaat werken, maar dat weet ik niet zeker.

Volgens deze pdf moet het moederbord minimaal bios versie R1.6.0 draaien om de cpu aan te kunnen:



Release date R1.6.0:



Dat is alweer meer dan een jaar geleden, dus dat moet goedkomen lijkt me.

[mrmrmr]

Dxue schreef op donderdag 11 juli 2019 @ 13:28:
regelbare voeding? als in zuinige stand als je geen videokaart erin stopt en je kan hem opschalen als je een game wilt spelen met een videokaart erbij? dat zou wel interessant zijn.

Het is een zogenaamde labvoeding waarbij je de spanning en/of stroom kunt regelen. Ze zijn typisch niet gemaakt om erg efficient te leveren. Technisch zou je inderdaad twee voedingen kunnen gebruiken, bijvoorbeeld een tweede ATX voeding.

ik zag trouwens dat een x570 bord 12 sata aansluitingen had. zou dat een mogelijk positief punt kunnen zijn als je heel veel drives wilt aansluiten? Alhoewel ik volgens mij heb gelezen dat een losse kaart minder verbruikt dan een x570 tov x470. Ben toch wel benieuwd wat een goede b450 verbruikt nu. ik ga maar eens op onderzoek uit (weliswaar heel rustig, ben aardig geinteresseert in die nieuwe ryzen 3th gen cpu, hopelijk komen er snel resultaten van de goedkopere cpu's uit)

Ik denk dat je sowieso beter af bent met een insteekkaart als je 6 + 4 extra SATA aansluitingen wil hebben. Kaarten met een Marvell 9215 of 9230 chip zou 2W verbruiken volgens een test. Het kost wat onderzoek om na te gaan of de kaart compatible is met de software die je wil gebruiken, met name wat betreft Vt-d, VM hosts en beschikbaarheid van drivers.

[Lemur]

Ik heb een Fujitsu D3643-H moederbord met een Intel Pentium Gold G5400 Boxed processor gecombineerd.

Dmesg geeft de volgende foutmeldingen.

[ 0.237004] smpboot: CPU0: Intel(R) Pentium(R) Gold G5400 CPU @ 3.70GHz (family: 0x6, model: 0x9e, stepping: 0xa)
[ 0.237045] mce: [Hardware Error]: Machine check events logged
[ 0.237046] mce: [Hardware Error]: CPU 0: Machine Check: 0 Bank 6: ee00000000801136
[ 0.237049] mce: [Hardware Error]: TSC 0 ADDR 8d9e0180 MISC 3040000086
[ 0.237051] mce: [Hardware Error]: PROCESSOR 0:906ea TIME 1563008469 SOCKET 0 APIC 0 microcode b4
[ 0.237053] mce: [Hardware Error]: Machine check events logged
[ 0.237053] mce: [Hardware Error]: CPU 0: Machine Check: 0 Bank 7: ee00000000801136
[ 0.237054] mce: [Hardware Error]: TSC 0 ADDR 8d9e01c0 MISC 3040000086
[ 0.237056] mce: [Hardware Error]: PROCESSOR 0:906ea TIME 1563008469 SOCKET 0 APIC 0 microcode b4
[ 0.237058] mce: [Hardware Error]: CPU 0: Machine Check: 0 Bank 8: ee00000000801136
[ 0.237059] mce: [Hardware Error]: TSC 0 ADDR 8d9e0200 MISC 43040000086
[ 0.237060] mce: [Hardware Error]: PROCESSOR 0:906ea TIME 1563008469 SOCKET 0 APIC 0 microcode b4
[ 0.237062] mce: [Hardware Error]: CPU 0: Machine Check: 0 Bank 9: ae00000000801136
[ 0.237063] mce: [Hardware Error]: TSC 0 ADDR 8d9e0240 MISC 43040000086
[ 0.237065] mce: [Hardware Error]: PROCESSOR 0:906ea TIME 1563008469 SOCKET 0 APIC 0 microcode b4

Hoe zou dit zitten?

[mrmrmr]

Welke distributie, versienummer en kernel gebruik je? Een volledige dmesg geeft waarschijnlijk meer informatie.

[ Voor 4% gewijzigd door mrmrmr op 13-07-2019 12:50 ]

[Lemur]

De Debian Linux installer herkende de Intel I219-LM network controller op het Fujitsu D3643-H moederbord niet. Een rondslingerend wifi-stikkie bracht helaas geen verbinding tot stand. Toen heb ik mijn Android-telefoon op usb-theterering gezet en op de computer aangesloten. De installer herkende deze verbinding en ging aan het werk. :-)

[Lemur]

mrmrmr schreef op zaterdag 13 juli 2019 @ 12:49:
Welke distributie, versienummer en kernel gebruik je? Een volledige dmesg geeft waarschijnlijk meer informatie.

Debian, Buster = 10, 4.19.0-5-amd64

jaap@debian:/boot$ sudo dmesg
[sudo] password for jaap:
[ 0.000000] microcode: microcode updated early to revision 0xb4, date = 2019-04-01
[ 0.000000] Linux version 4.19.0-5-amd64 ([e-mail]) (gcc version 8.3.0 (Debian 8.3.0-7)) #1 SMP Debian 4.19.37-5 (2019-06-19)
[ 0.000000] Command line: BOOT_IMAGE=/boot/vmlinuz-4.19.0-5-amd64 root=UUID=3b7909ed-3ac5-46e5-ba42-3827718d7974 ro quiet
<rest van de code in vorige versie van dit bericht>

[ Voor 98% gewijzigd door Lemur op 13-07-2019 22:00 . Reden: klachten ]

[kronolith]

Kon je dat niet even in een Pastebin plempen?

[Lemur]

kronolith schreef op zaterdag 13 juli 2019 @ 15:43:
Kon je dat niet even in een Pastebin plempen?

Had gekund, ja.

[Raven]

Lemur schreef op zaterdag 13 juli 2019 @ 16:21:
[...]

Had gekund, ja.

Of op zijn minst quote of code tags eromheen

[mrmrmr]

@Lemur
Bij mijn installatie (Stretch) herkent hij Gabi0002 onder "(v02 FUJ", dus het ziet er naar uit dat enkele onderdelen niet worden herkend bij jou. Gabi is een BIOS interface van Fujitsu. Daarvoor heb je een driver nodig als je het zou willen gebruiken. Maar ik doe dat niet.

Ik heb verder dezelfde error berichten. Alles dat ik nodig heb werkt wel na installatie van kernel 4.19, uit de stretch-backports. Ook de Intel 219LM. Ik heb Buster nog niet getest op de D3643-H.

(haal de hele dmesg maar weer weg, dat scheelt irritaties.)

[Lemur]

Raven schreef op zaterdag 13 juli 2019 @ 17:38:
[...]

Of op zijn minst quote of code tags eromheen

Dat heb ik geprobeerd, maar dan nog steeds veel niet inklapbare tekst. Ik heb het nu maar verwijderd. Voor liefhebbers kan ik het nog op een servertje zetten.

[Lemur]

mrmrmr schreef op zaterdag 13 juli 2019 @ 20:56:
@Lemur
Bij mijn installatie (Stretch) herkent hij Gabi0002 onder "(v02 FUJ", dus het ziet er naar uit dat enkele onderdelen niet worden herkend bij jou. Gabi is een BIOS interface van Fujitsu. Daarvoor heb je een driver nodig als je het zou willen gebruiken. Maar ik doe dat niet.

Ik heb verder dezelfde error berichten. Alles dat ik nodig heb werkt wel na installatie van kernel 4.19, uit de stretch-backports. Ook de Intel 219LM. Ik heb Buster nog niet getest op de D3643-H.

Ik zal eens in het bios kijken naar dat Gabi. De driver van I219-lm zit ook gewoon in Debian Buster, maar niet in de installer.

Om me veel onnodig werk te besparen heb ik de installatie van Debian Stretch op mijn oude servertje overgezet naar de D3643-H. Deze lijkt nu te werken. Ik zal daar ook eens naar de dmesg kijken. Op termijn wil naar CoreOS met containers overstappen.

[Korvaag]

Hmm.. Zodra de 3000 serie APU's uitkomt met de GE-versies. Ga ik m'n 200GE toch upgraden:

https://www.reddit.com/r/...ock_a300_with_the_strong/

Deze persoon komt op 6,8 watt idle. Ik red het niet zuiniger dan 9 watt. Toch eens mee spelen Ik wil alleen de G-versie denk ik niet omdat ik gezien het feit dat ie in de meterkast staat de VRM en de CPU niet te heet wil laten worden, dus het wordt de GE-versie met 35-watt TPD dan

[FireDrunk]

Goed, een update van mijn kant uit.
Mijn mooie nieuwe server (Fujitsu D3644-B1, i3-8100, 32GB ECC geheugen) snort intussen enkele dagen.
Toch flinke problemen mee gehad. Blijkt dat de Seagate 2TB 2.5" Archive SMR schijfjes die ik heb, niet zo goed samen gaan met de AHCI controller en de Linux kernel die ik gebruik (Debian 10, dus op dit moment, kernel 4.19).

Geen idee of de incompatibility komt door de combinatie van AHCI controller en schijfje, of linux kernel en schijfjes, maar 1 van de twee is het in ieder geval. (De schijfjes werkten prima in mijn vorige setup, daar zaten ze alleen op een onboard LSI Logic SAS controller).

Al met al een paar dagen bezig geweest om de fouten te mitigeren. Ik ben *BEHOORLIJK* blij dat ik ZFS heb, want ik had flinke silent corruption op de schijfjes, dmesg log stond vol met IO errors, en er bokte vanalles.

Uiteindelijk lijkt het opgelost met de volgende kernel parameters (te zetten in /etc/default/grub):

GRUB_CMDLINE_LINUX_DEFAULT="libata.force=noncq libata.force=1.5 libata.noacpi=1"

Wat de opties doen: NCQ (Native Command Queuing) uitzetten, de link op SATA1 forceren, en ACPI Power saving features op de schijfjes uitzetten.

Vooralsnog lijkt dit te werken, maar een scrub moet uitwijzen of alles blijft werken. Voor nu in ieder geval de afgelopen 24h geen IO errors meer gezien in dmesg, dus *fingers crossed*.

[GioStyle]

En de verbruikscijfers?

[FireDrunk]

30W idle, 45 tijdens een scrub en 51 ofzo tijdens maximale download werkzaamheden. Veel hoger dan dat heb ik nog niet gezien.

[HyperBart]

FireDrunk schreef op zondag 14 juli 2019 @ 10:49:
Goed, een update van mijn kant uit.
Mijn mooie nieuwe server (Fujitsu D3644-B1, i3-8100, 32GB ECC geheugen) snort intussen enkele dagen.
Toch flinke problemen mee gehad. Blijkt dat de Seagate 2TB 2.5" Archive SMR schijfjes die ik heb, niet zo goed samen gaan met de AHCI controller en de Linux kernel die ik gebruik (Debian 10, dus op dit moment, kernel 4.19).

Geen idee of de incompatibility komt door de combinatie van AHCI controller en schijfje, of linux kernel en schijfjes, maar 1 van de twee is het in ieder geval. (De schijfjes werkten prima in mijn vorige setup, daar zaten ze alleen op een onboard LSI Logic SAS controller).

Al met al een paar dagen bezig geweest om de fouten te mitigeren. Ik ben *BEHOORLIJK* blij dat ik ZFS heb, want ik had flinke silent corruption op de schijfjes, dmesg log stond vol met IO errors, en er bokte vanalles.

Uiteindelijk lijkt het opgelost met de volgende kernel parameters (te zetten in /etc/default/grub):

GRUB_CMDLINE_LINUX_DEFAULT="libata.force=noncq libata.force=1.5 libata.noacpi=1"

Wat de opties doen: NCQ (Native Command Queuing) uitzetten, de link op SATA1 forceren, en ACPI Power saving features op de schijfjes uitzetten.

Vooralsnog lijkt dit te werken, maar een scrub moet uitwijzen of alles blijft werken. Voor nu in ieder geval de afgelopen 24h geen IO errors meer gezien in dmesg, dus *fingers crossed*.

Dus zo wat alles wat SATA anno 2019 interessant maakt in een NAS doet mottig en heb je moeten uitschakelen? Nou nou

[FireDrunk]

De array haalt vrolijk 400MB/s, dus /care

[Borromini]

Enig idee hoeveel invloed dat heeft op je stroomverbruik? Al vermoed ik dat je je daar evenmin druk over maakt .

[FireDrunk]

De opties zelf bedoel je? Niets meetbaars.

[HyperBart]

FireDrunk schreef op zondag 14 juli 2019 @ 15:31:
De opties zelf bedoel je? Niets meetbaars.

Acpi power saving, gaat daar ook spindown over?

[mrmrmr]

Hoe ziet het complete systeem eruit qua samenstelling? #nieuwsgierig

[mdbraber]

FireDrunk schreef op zondag 14 juli 2019 @ 10:49:
Goed, een update van mijn kant uit.
Mijn mooie nieuwe server (Fujitsu D3644-B1, i3-8100, 32GB ECC geheugen) snort intussen enkele dagen.
Toch flinke problemen mee gehad. Blijkt dat de Seagate 2TB 2.5" Archive SMR schijfjes die ik heb, niet zo goed samen gaan met de AHCI controller en de Linux kernel die ik gebruik (Debian 10, dus op dit moment, kernel 4.19).

Geen idee of de incompatibility komt door de combinatie van AHCI controller en schijfje, of linux kernel en schijfjes, maar 1 van de twee is het in ieder geval. (De schijfjes werkten prima in mijn vorige setup, daar zaten ze alleen op een onboard LSI Logic SAS controller).

Al met al een paar dagen bezig geweest om de fouten te mitigeren. Ik ben *BEHOORLIJK* blij dat ik ZFS heb, want ik had flinke silent corruption op de schijfjes, dmesg log stond vol met IO errors, en er bokte vanalles.

Uiteindelijk lijkt het opgelost met de volgende kernel parameters (te zetten in /etc/default/grub):

GRUB_CMDLINE_LINUX_DEFAULT="libata.force=noncq libata.force=1.5 libata.noacpi=1"

Wat de opties doen: NCQ (Native Command Queuing) uitzetten, de link op SATA1 forceren, en ACPI Power saving features op de schijfjes uitzetten.

Vooralsnog lijkt dit te werken, maar een scrub moet uitwijzen of alles blijft werken. Voor nu in ieder geval de afgelopen 24h geen IO errors meer gezien in dmesg, dus *fingers crossed*.

Ik heb een bijna exact gelijk systeem - maar ik heb 5TB Seagate SMR schrijven (ST5000LM000) - ik heb helemaal nergens probleem mee (gehad). In het begin was er een rare glitch van een schijf die uit de ZFS pool knalde, maar die heb ik na wat checken gewoon weer in gebruik kunnen nemen (nu als losse schijf in een single disk ZFS pool voor backup). Wel benieuwd waar jouw problemen dan vandaan komen...

FireDrunk schreef op zondag 14 juli 2019 @ 11:58:
30W idle, 45 tijdens een scrub en 51 ofzo tijdens maximale download werkzaamheden. Veel hoger dan dat heb ik nog niet gezien.

30W idle? Is dat met de schijven aan? Ik heb hier de machine 24/7 aanstaan en meestal is het verbruik 9W met 5 schijven (20 min spindown) en een m2 SSD... Vanwaar is jouw verbruik dan zo relatief hoog? Tijdens download hier is het verbruik meestal 20-26W. Ik download eigenlijk altijd naar SSD en doe dan pas in 1x na het einde van de download een write naar de ZFS array met de 2.5" HDDs

[ Voor 3% gewijzigd door mdbraber op 14-07-2019 16:04 ]

[FireDrunk]

Geen picopsu, maar een Cooler Master CX450, (de seasonic waar ik het eerder over had zit in een andere behuizing). Misschien eens kijken of dat veel verschil maakt.

Geen spindowm overigens. En de NVME drive (Toshiba TXG3) staat niet echt bekend om zijn zuinigheid.

[ Voor 24% gewijzigd door FireDrunk op 14-07-2019 16:52 ]

[devastator83]

mdbraber schreef op woensdag 10 juli 2019 @ 22:46:
[...]


Ik heb ongeveer een gelijkwaardige setup, maar dan met een 3644-B (32GB ECC) en 5x2.5" HDD. Als CPU een i3-8100 en ongeveer 20-25 dockers draaiende. Tenzij hij nzb's aan het repareren is of meerdere Plex streams aan het versturen heeft 'ie weinig te doen. Een i3-8100 is prima, maar als je voor een tientje meer iets meer vermogen kan meepakken, waarom niet? Als je niet meer schijven wil / kan dan is de 60W picoPSU wsl genoeg - als je meer nodig hebt kan je ook voor iets meer gaan zoals de 160XT (die ik heb icm de Leicke 120W). Mijn verbruik is met keyboard + display, 5 schijven in idle en m2 SSD zo'n 8-10W.

Aan wat voor verbruik zit je als je het systeem zeg maar voor 50-70% belast? Ik ben op zoek naar een nieuwe server voor Blueiris ...

[mdbraber]

Lemur schreef op zaterdag 13 juli 2019 @ 13:16:
[...]


Debian, Buster = 10, 4.19.0-5-amd64

jaap@debian:/boot$ sudo dmesg
[sudo] password for jaap:
[ 0.000000] microcode: microcode updated early to revision 0xb4, date = 2019-04-01
[ 0.000000] Linux version 4.19.0-5-amd64 ([e-mail]) (gcc version 8.3.0 (Debian 8.3.0-7)) #1 SMP Debian 4.19.37-5 (2019-06-19)
[ 0.000000] Command line: BOOT_IMAGE=/boot/vmlinuz-4.19.0-5-amd64 root=UUID=3b7909ed-3ac5-46e5-ba42-3827718d7974 ro quiet
<rest van de code in vorige versie van dit bericht>

Btw, ik moest vandaag mijn server rebooten voor een upgrade en kwam dezelfde meldingen tegen als jij had (ik heb hier een i3-8100). Verder nergens last van...

[FireDrunk]

Zelfde meldingen als wie bedoel je?

[mrmrmr]

Als de gequote meldingen. Die heb ik ook op mijn Debian Stretch. Ik denk dat het een gevolg is van systeemonderdelen waarvoor standaard geen driver beschikbaar is. Er zitten op het Fujitsu moederbord een paar Fujitsu specifieke onderdelen om de BIOS te benaderen en dergelijke. Je kunt ze ook zien onder Windows devices als FUJ0420 device (=Gabi ACPI).

[mdbraber]

Voor iedereen die wat meer efficiency uit z'n Proxmox setup wil persen, hier wat tips over processen die je niet nodig hebt als je een single node Proxmox setup draait: https://forum.proxmox.com...nc-pve-ha-services.55938/

[mdbraber]

devastator83 schreef op zondag 14 juli 2019 @ 20:00:
[...]


Aan wat voor verbruik zit je als je het systeem zeg maar voor 50-70% belast? Ik ben op zoek naar een nieuwe server voor Blueiris ...

Ik zou even wat beter moeten kijken, maar 100% belasting heb ik nooit hoger gekregen dan ~60W. Ik denk dat je zo ongeveer op 30-35W zit als je op 50-70% belast.

[devastator83]

Met mijn oude I5-3330 build met 50% load zit ik op 57W. Het verbruik moet wel liefst een behoorlijk stuk lager liggen im de terugverdientijd niet te lang te hebben.

[Bobbika]

Op amazon.de is de Seagate Backup Plus Portable 5TB met Prime te krijgen voor 99,99, max 2 per bestelling.

Edit: en hij is uitverkocht..

[ Voor 10% gewijzigd door Bobbika op 16-07-2019 15:57 ]

[Kek]

Bobbika schreef op dinsdag 16 juli 2019 @ 14:57:
Op amazon.de is de Seagate Backup Plus Portable 5TB met Prime te krijgen voor 99,99, max 2 per bestelling.

al niet meer..

[h3nr1]

Ik had al de 4TB seagate expansion aangeschaft. Er zit een ST4000LM024 disk in dus een Seagate Barracuda Compute 2,5", 4TB

[dimmak]

De meeste onderdelen voor mijn build heb ik besteld. Volgens de pricewatch was ik goedkoper uit bij verschillende shops, maar toen ik alles bij Amazon in mijn mandje had kwam ik op een lager bedrag. Amazon doet alleen nu moeilijk over betalen. Betalen doe ik altijd met automatische afschrijving en nu krijg ik net een mail dat ik vanavond mijn creditcard moet toevoegen anders vervalt mijn bestelling. Als dat gelukt is moet ik alleen nog op zoek naar een geschikte behuizing en HDD.

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Pentium Gold G5400 Boxed	€ 61,75	€ 61,75
1	Moederborden	Fujitsu D3643-H	€ 94,50	€ 94,50
1	Kabels	Akasa PROSLIM SATA 3.0 50cm	€ 5,95	€ 5,95
1	Kabels	Mini-box P4 convertercable (for PicoPSU)	€ 6,05	€ 6,05
1	Kabels	Startech.com 4x SATA Power Splitter Adapter Cable (PYO4SATA)	€ 5,36	€ 5,36
1	Externe harde schijven	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 129,-	€ 129,-
1	Processorkoeling	Arctic Alpine 12 Passive	€ 12,15	€ 12,15
2	Geheugen intern	Crucial CT8G4DFS824A	€ 31,13	€ 62,26
1	Voedingen	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 55,50	€ 55,50
1	Solid state drives	Samsung 970 EVO 250GB	€ 76,90	€ 76,90
Bekijk collectie Importeer producten			Totaal	€ 559,32

Dit is mijn setup. Die HDD wil ik er graag in doen en in de toekomst nog 1. Qua behuizing twijfel ik tussen de volgende:
https://www.megekko.nl/pr...izing-Micro-ATX-Behuizing
https://www.megekko.nl/pr...00-U3-Micro-ATX-Behuizing
https://www.megekko.nl/pr...mline-Micro-ATX-Behuizing

Het liefst wil ik zo compact mogelijk, maar weet niet of dat slim is ivm de warmte. Als iemand nog een betere suggestie heeft hoor ik die uiteraard graag.

[ Voor 79% gewijzigd door dimmak op 17-07-2019 14:11 ]

[HellStorm666]

Hi all,

Vraagje,
Ik heb nu een Intel G4500 er in zitten.
Toch wil ik wat meer rekenkracht.
Hoeveel meer Watt zal de Intel Core i3-9350KF gebruiken in idle/lage load?

T is een nieuwere chip, dus verwacht dat ie beter terug kan schalen.
Uiteraard zal ie onder load meer verbruiken, maar zal ook eerder klaar zijn.

Mobo is de Gigabyte GA-X150M-PRO ECC.

[Raydo88]

HellStorm666 schreef op woensdag 17 juli 2019 @ 16:20:
Hi all,

Vraagje,
Ik heb nu een Intel G4500 er in zitten.
Toch wil ik wat meer rekenkracht.
Hoeveel meer Watt zal de Intel Core i3-9350KF gebruiken in idle/lage load?

T is een nieuwere chip, dus verwacht dat ie beter terug kan schalen.
Uiteraard zal ie onder load meer verbruiken, maar zal ook eerder klaar zijn.

Mobo is de Gigabyte GA-X150M-PRO ECC.

Dat bord is 6/7 gen, die i3 is van de 9e generatie, dus dat gaat niet werken.

[mrmrmr]

HellStorm666 schreef op woensdag 17 juli 2019 @ 16:20:
Hi all,

Vraagje,
Ik heb nu een Intel G4500 er in zitten.
Toch wil ik wat meer rekenkracht.
Hoeveel meer Watt zal de Intel Core i3-9350KF gebruiken in idle/lage load?

T is een nieuwere chip, dus verwacht dat ie beter terug kan schalen.
Uiteraard zal ie onder load meer verbruiken, maar zal ook eerder klaar zijn.

Mobo is de Gigabyte GA-X150M-PRO ECC.

De opties met dit moederbord zijn Skylake of Kaby Lake (6th/7th gen.). Voor Coffee Lake (8th/9th gen) is een ander moederbord nodig. i3-9350KF is een 9th gen Coffee Lake referesh zonder GPU.

Waarvoor wil je meer rekenkracht?

[HellStorm666]

mrmrmr schreef op woensdag 17 juli 2019 @ 17:09:
[...]


De opties met dit moederbord zijn Skylake of Kaby Lake (6th/7th gen.). Voor Coffee Lake (8th/9th gen) is een ander moederbord nodig. i3-9350KF is een 9th gen Coffee Lake referesh zonder GPU.

Waarvoor wil je meer rekenkracht?

Ohw, das jammer.
Er worden nu tot 3 films tegelijk gestreamd vanaf de server. Alle 3 in 4k. 2 daarvan via ftp en 1 via NFS.
Als er dan gelijktijdig een film wordt gedownload (+par+unrar) dan wil een film wel eens hikken.

[mrmrmr]

Misschien kun je dat verhelpen door de decompressie minder processorprioriteit te geven (Linux opdracht: "nice")?

[Mars Warrior]

HellStorm666 schreef op woensdag 17 juli 2019 @ 17:19:
[...]
Ohw, das jammer.
Er worden nu tot 3 films tegelijk gestreamd vanaf de server. Alle 3 in 4k. 2 daarvan via ftp en 1 via NFS.
Als er dan gelijktijdig een film wordt gedownload (+par+unrar) dan wil een film wel eens hikken.

par en unrar op andere disk doen misschien??

Oftewel is het een CPU bottleneck of je schijf die volloopt door en streamen en par+unrar ??

[HellStorm666]

Mars Warrior schreef op woensdag 17 juli 2019 @ 17:32:
[...]

par en unrar op andere disk doen misschien??

Oftewel is het een CPU bottleneck of je schijf die volloopt door en streamen en par+unrar ??

Downloaden, parten en rarren (bron) gebeurt op de SSD.
Opslag (rar doel) is een 6tb WD Red hdd. (mits t een film is, voor serie is het de 3tb variant.

[WeaZuL]

Mars Warrior schreef op woensdag 17 juli 2019 @ 17:32:
[...]

par en unrar op andere disk doen misschien??

Oftewel is het een CPU bottleneck of je schijf die volloopt door en streamen en par+unrar ??

Of gewoon simpelweg beter plannen van de activiteiten? Je zou daarbij kunnen denken aan snachts de overige taken uitvoeren buiten de tijden dat er vraag is naar streaming capaciteit

[mkleinman]

HellStorm666 schreef op woensdag 17 juli 2019 @ 17:19:
[...]

Ohw, das jammer.
Er worden nu tot 3 films tegelijk gestreamd vanaf de server. Alle 3 in 4k. 2 daarvan via ftp en 1 via NFS.
Als er dan gelijktijdig een film wordt gedownload (+par+unrar) dan wil een film wel eens hikken.

Of het parren etc in de nachturen doen wanneer niemand kijkt?

[HellStorm666]

mkleinman schreef op woensdag 17 juli 2019 @ 22:36:
[...]


Of het parren etc in de nachturen doen wanneer niemand kijkt?

Dat zou natuurlijk ook kunnen.
Die i3-9350KF was(is?) via alternate nu €99,- en had dus een hele interessante upgrade geweest.... Als t ondersteund werd.

Tzt (wanneer ik echt power te kort kom) maar eens upgraden van Server 2012 r2 naar ESXi en een AMD cpu (3600x ofzo)

[borft]

HellStorm666 schreef op woensdag 17 juli 2019 @ 17:19:
[...]

Ohw, das jammer.
Er worden nu tot 3 films tegelijk gestreamd vanaf de server. Alle 3 in 4k. 2 daarvan via ftp en 1 via NFS.
Als er dan gelijktijdig een film wordt gedownload (+par+unrar) dan wil een film wel eens hikken.

Hmm, dat klinken als io-bound processen, denk niet dat een snellere CPU daar gaat helpen. Heb je al eens gekeken met tools als iostat/iotop/vmstat ed, of de bottleneck daadwerkelijk de CPU is?

protip: als de cpu op 100% staat (in bv top), kijk dan ook even waar ie mee bezig is. Als een groot percentage in wait state (wa) is, dan ben je waarschijnlijk op je IO subsystem aan het wachten. Een andere CPU gaat dan niet helpen.

Ik zou werkelijk niet weten waarom je voor die 3 processen een snellere CPU nodig hebt. Mijn CPU (J5005), is trager, en die kan makkelijk 100-en MB's per seconden verwerken.

[Yelti]

Even mijn ervaringen delen:
Mijn eerste zuinige server setup was volgende:
Asrock J5005, 16GB ram, 2x 3TB Toshiba 2.5" hdd en 2x 1TB Patriod SSD.
TBS 6981 DVB-S kaart
Gevoed door een pico psu met level V voeding.
Boot van usb hdd.
OS was een proxmox met daarop 3 vm's: XPenology(sata passthrough) + docker containers, Pfsense en tvheadend.
Deed standaard iets van een 20w gemiddeld en ging hier niet over.
Echter was mij dit toch niet krachtig genoeg ivm tvheadend en XPenology + docker.
De load ging regelmatig naar 5-6 bij meerdere opnames.


Hiervoor een vervanger gezocht en op het volgende uitgekomen:
Asrock H370m-itx/ac, i3 8100, 16GB kingston ram.
TBS 6981 DVB-S kaart.
Boot van usb hdd.
Os dezelfde setup, load gaat niet boven de 1, zit dus wel goed snor.
Gemiddeld verbruik is echter wel naar 30w gestegen, dus wel iets minder, zelfs met powertop niet echt lager te krijgen.

Verder:
Bord heeft 6 sata aansluitingen, maar deze zitten op 1 controller, dus booten van een ssd en sata passthrough voor de xpenology werktie niet. Jammer, want had graag geboot van interne ssd.
raw device mapping passthrough werkte niet voor de SSD's => geen trim mogelijk in XPenology want ze werden als gewone hdd herkend.
Dit werkte wel via Vmware ESX en rdm, maar verbruik ligt iest hoger .

Ook wat zuinigheidstesten gedaan met het bord(proxmox + powertop):
6-8w idle met bios versie 3.10 (board, cpu, ram, pico psu en 256GB nvme sata disk, zonder wifi kaart)
10-12w idle met bios versie 4.10 (board, cpu, ram, pico psu en 256GB nvme sata disk), echt bummer, want downgrade van de bios is niet mogelijk.

[skinpatch]

Ik volg dit topic nu al een tijdje, super interessant! Nu is het moment gekomen om mijn eigen servertje te bouwen. Qua hardware ben ik er al redelijk uit. Het wordt de hier al veelvuldig besproken Fujitsu D3643-H - Intel Pentium Gold G5400 - Pico PSU combo.

Wel ben ik benieuwd naar de ervaring van mensen die hun server ook als router gebruiken. Ik ben namelijk van plan om over een tijdje mijn glasvezelverbinding te upgraden van 100Mbit naar gigabit (scheelt een paar euro per maand bij overstap naar een andere provider).

Het plan is om Proxmox te draaien, met PfSense of OpenWRT (schijnt in een LXC container te kunnen draaien) als guest. Plus nog andere guests voor de server taken natuurlijk.

Grote nadeel van deze setup is natuurlijk: server uit/kapot = geen internet. Ben erg benieuwd hoe mensen met een vergelijkbare setup hiermee omgaan.

[borft]

Yelti schreef op donderdag 18 juli 2019 @ 13:48:
Even mijn ervaringen delen:
Mijn eerste zuinige server setup was volgende:
Asrock J5005, 16GB ram, 2x 3TB Toshiba 2.5" hdd en 2x 1TB Patriod SSD.
TBS 6981 DVB-S kaart
Gevoed door een pico psu met level V voeding.
Boot van usb hdd.
OS was een proxmox met daarop 3 vm's: XPenology(sata passthrough) + docker containers, Pfsense en tvheadend.
Deed standaard iets van een 20w gemiddeld en ging hier niet over.
Echter was mij dit toch niet krachtig genoeg ivm tvheadend en XPenology + docker.
De load ging regelmatig naar 5-6 bij meerdere opnames.

Hmm vreemd, ik draai een vergelijkbare setup, die zit idle rond de 11W (wel met een stuk meer schijven en nog een extra sata controller). Overigens gebruik ik alleen docker en geen VM's (heb je een specifieke reden om VM's te gebruiken? lijkt me niet optimaal voor low power usage). Je zou verwachten dat een dergelijke workload alleen tot (disk) IO leidt, en niet je CPU belast. Of doe je ook real-time transcoding voordat je het opslaat?

[Yelti]

borft schreef op donderdag 18 juli 2019 @ 14:39:
[...]


Hmm vreemd, ik draai een vergelijkbare setup, die zit idle rond de 11W (wel met een stuk meer schijven en nog een extra sata controller). Overigens gebruik ik alleen docker en geen VM's (heb je een specifieke reden om VM's te gebruiken? lijkt me niet optimaal voor low power usage). Je zou verwachten dat een dergelijke workload alleen tot (disk) IO leidt, en niet je CPU belast. Of doe je ook real-time transcoding voordat je het opslaat?

De DVB-S kaart verbruikt iets van een 5-7 watt.
De reden voor de vm's: pfsense draait op openbsd, dus niet op docker. Heb hiervoor nog geen echte vervanging voor gevonden.
En voor tvheadend doe ik een pci passthrough van de dvbkaart naar een vm omdat xpenology deze niet ondersteund.
Ik had de indruk dat het systeem het lastig had met 2 opnames + 1 opname afspelen. Ging iets beter indien alles op de ssd's draaide, maar toch niet optimaal.

[mdbraber]

Yelti schreef op donderdag 18 juli 2019 @ 15:55:
[...]
De reden voor de vm's: pfsense draait op openbsd, dus niet op docker. Heb hiervoor nog geen echte vervanging voor gevonden.

Ik heb ook 2 VMs: pfSense en een VM voor Docker containers. De reden is voornamelijk dat ik een Docker networking setup heb die best complex is om te combineren met host network. En aangezien ik nog wel eens iets wil veranderen is het fijn om de VM met Docker containers te kunnen restarten als het nodig is, zonder dat bijv. de internet toegang dan niet meer werkt. Idle van de setup pfSense + VM voor Docker containers is 8-9W op een Fujitsu 3644-B met 5 HDDs (idle) en een i3-8100

[grubby]

mdbraber schreef op donderdag 18 juli 2019 @ 17:23:
[...]
Ik heb ook 2 VMs: pfSense en een VM voor Docker containers....

Mag ik vragen hoe je je netwerken hebt gescheiden? L3 switch + VLAN's of losse NIC(s) en in het geval van een extra NIC, wat voor type gebruik je dan?

[mdbraber]

grubby schreef op donderdag 18 juli 2019 @ 20:55:
[...]

Mag ik vragen hoe je je netwerken hebt gescheiden? L3 switch + VLAN's of losse NIC(s) en in het geval van een extra NIC, wat voor type gebruik je dan?

Ik heb 2 NIC (1x onboard, 1x HP i210-T1). Op één NIC heb ik de WAN aangesloten (naar de Experia box) en op de andere NIC heb ik een L3 switch aangesloten (TP-Link SG108PE) waar ik via VLAN verschillende netwerken heb aangesloten.

Ik had het praktisch overigens ook gewoon op 1 NIC kunnen aansluiten en ook de WAN via een VLAN kunnen doen (praktisch gaan zowel LAN als WAN in dezelfde switch). Maar zo heb ik wat meer uitbreid opties... (en niet iets makkelijker configureren).

[Tomba]

skinpatch schreef op donderdag 18 juli 2019 @ 14:16:
Ik volg dit topic nu al een tijdje, super interessant! Nu is het moment gekomen om mijn eigen servertje te bouwen. Qua hardware ben ik er al redelijk uit. Het wordt de hier al veelvuldig besproken Fujitsu D3643-H - Intel Pentium Gold G5400 - Pico PSU combo.

Wel ben ik benieuwd naar de ervaring van mensen die hun server ook als router gebruiken. Ik ben namelijk van plan om over een tijdje mijn glasvezelverbinding te upgraden van 100Mbit naar gigabit (scheelt een paar euro per maand bij overstap naar een andere provider).

Het plan is om Proxmox te draaien, met PfSense of OpenWRT (schijnt in een LXC container te kunnen draaien) als guest. Plus nog andere guests voor de server taken natuurlijk.

Grote nadeel van deze setup is natuurlijk: server uit/kapot = geen internet. Ben erg benieuwd hoe mensen met een vergelijkbare setup hiermee omgaan.

Ik heb dat dus (zij het op Hyper-V i.p.v. Proxmox) en mijn moederbord is op enig moment overleden. Dat was dus redelijk k. want niks werkte meer (zowel Sophos UTM als Unify als BlueIris als Exchange draaide op die bak) we hebben toen dus 2 dagen (nieuw mobo werd toen pas geleverd...) zonder internet, WiFi, mail, camera opnames en TV gezeten

[MewBie]

skinpatch schreef op donderdag 18 juli 2019 @ 14:16:
Ik volg dit topic nu al een tijdje, super interessant! Nu is het moment gekomen om mijn eigen servertje te bouwen. Qua hardware ben ik er al redelijk uit. Het wordt de hier al veelvuldig besproken Fujitsu D3643-H - Intel Pentium Gold G5400 - Pico PSU combo.

Wel ben ik benieuwd naar de ervaring van mensen die hun server ook als router gebruiken. Ik ben namelijk van plan om over een tijdje mijn glasvezelverbinding te upgraden van 100Mbit naar gigabit (scheelt een paar euro per maand bij overstap naar een andere provider).

Het plan is om Proxmox te draaien, met PfSense of OpenWRT (schijnt in een LXC container te kunnen draaien) als guest. Plus nog andere guests voor de server taken natuurlijk.

Grote nadeel van deze setup is natuurlijk: server uit/kapot = geen internet. Ben erg benieuwd hoe mensen met een vergelijkbare setup hiermee omgaan.

Bouw een Proxmox cluster.
Maar in thuis situaties hou je altijd single points of failure. Zoals je elektriciteit en je modem/router/switch. Die 4 ontkom je haast niet aan en is dus niet iets waar je je erg druk om moet maken.

Wil je ze minimaliseren dan moet je 2 UPSen nemen en glasvezel internet dat je direct in een van je redundante switches kan prikken en vervolgens je router software in een server cluster draaien.

Prima mogelijk om te doen, maar maar voor thuis misschien een beetje overkill.

[mdbraber]

Tomba schreef op donderdag 18 juli 2019 @ 21:48:
[...]

Ik heb dat dus (zij het op Hyper-V i.p.v. Proxmox) en mijn moederbord is op enig moment overleden. Dat was dus redelijk k. want niks werkte meer (zowel Sophos UTM als Unify als BlueIris als Exchange draaide op die bak) we hebben toen dus 2 dagen (nieuw mobo werd toen pas geleverd...) zonder internet, WiFi, mail, camera opnames en TV gezeten

Klopt - mijn server hangt (omdat het niet anders kan) achter een Experia Box die ook als router fungeert. Als om wat voor reden dan ook mijn server het niet meer doet kan ik simpelweg de WiFi van de Experia Box weer aanslingeren als noodmaatregel.

[Crateagus]

Als newbie in de (zunige) server wereld ben ik ook in de markt voor een server. Ik wil eigenlijk nagenoeg de build van dimmak overnemen. Nu zie ik vaak vergelijkbare builds voorbij komen met G5400 of I3-8100 cpu.

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Pentium Gold G5400 Boxed	€ 61,75	€ 61,75
1	Moederborden	Fujitsu D3643-H	€ 94,50	€ 94,50
1	Behuizingen	Chieftec CI-01B-OP	€ 49,90	€ 49,90
1	Kabels	Akasa PROSLIM SATA 3.0 50cm	€ 5,95	€ 5,95
1	Kabels	Mini-box P4 convertercable (for PicoPSU)	€ 6,05	€ 6,05
1	Kabels	Startech.com 4x SATA Power Splitter Adapter Cable (PYO4SATA)	€ 5,36	€ 5,36
1	Externe harde schijven	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 129,-	€ 129,-
1	Processorkoeling	Arctic Alpine 12 Passive	€ 12,15	€ 12,15
1	Geheugen intern	Crucial CT16G4DFD8266	€ 63,99	€ 63,99
1	Voedingen	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 55,50	€ 55,50
1	Solid state drives	Intel 660p 512GB	€ 60,96	€ 60,96
Bekijk collectie Importeer producten			Totaal	€ 545,11

Is het mogelijk om iets van richting te geven wat bepalend is om voor één van de twee te kiezen. Of wanneer loop je tegen de beperkingen van de G5400 aan?

Zelf meen ik te lezen dat het aantal dockers en VM's bepalend zijn en dan in combinatie met verschillende streams en rar/par van downloads tegelijk.

[|sWORDs|]

Crateagus schreef op vrijdag 19 juli 2019 @ 13:46:
Als newbie in de (zunige) server wereld ben ik ook in de markt voor een server. Ik wil eigenlijk nagenoeg de build van dimmak overnemen. Nu zie ik vaak vergelijkbare builds voorbij komen met G5400 of I3-8100 cpu.

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Pentium Gold G5400 Boxed	€ 61,75	€ 61,75
1	Moederborden	Fujitsu D3643-H	€ 94,50	€ 94,50
1	Behuizingen	Chieftec CI-01B-OP	€ 49,90	€ 49,90
1	Kabels	Akasa PROSLIM SATA 3.0 50cm	€ 5,95	€ 5,95
1	Kabels	Mini-box P4 convertercable (for PicoPSU)	€ 6,05	€ 6,05
1	Kabels	Startech.com 4x SATA Power Splitter Adapter Cable (PYO4SATA)	€ 5,36	€ 5,36
1	Externe harde schijven	Seagate Backup Plus Portable Drive (STDR) 5TB Zwart	€ 129,-	€ 129,-
1	Processorkoeling	Arctic Alpine 12 Passive	€ 12,15	€ 12,15
1	Geheugen intern	Crucial CT16G4DFD8266	€ 63,99	€ 63,99
1	Voedingen	Mini-box picoPSU 80 + 60W Adapter Power Kit	€ 55,50	€ 55,50
1	Solid state drives	Intel 660p 512GB	€ 60,96	€ 60,96
Bekijk collectie Importeer producten			Totaal	€ 545,11

Is het mogelijk om iets van richting te geven wat bepalend is om voor één van de twee te kiezen. Of wanneer loop je tegen de beperkingen van de G5400 aan?

Zelf meen ik te lezen dat het aantal dockers en VM's bepalend zijn en dan in combinatie met verschillende streams en rar/par van downloads tegelijk.

Ik zou niet voor een G5400 gaan, als je safe wil zijn met L1TF/MDS heb je niets aan HT en dan zijn twee cores wel erg weinig. Ik zou ook wegblijven bij drives met Silicon Image controller.

[Weiman]

Heeft er iemand al een enigzins zuinig build gedaan met een nieuwe Ryzen CPU? Ik heb me suf gezocht naar duidelijke reviews wat betreft stroomgebruik maar het is lastig te vinden wat ik zoek.

De product: AMD Ryzen 5 3600 lijkt voor price/performance echt ideaal te zijn voor VM's omdat je er een sloot geheugen bij kan prikken en de review die vandaag op de frontpage verschenen is wijst aan dat de CPU zelf in idle maar ~8W gebruikt.
Dat is toch wel interessant zou je zeggen.


De grote vraag is, hoeveel gebruikt zo'n moederbord, bijvoorbeeld een B450? Kan dat uberhaupt opboksen tegen die superzuinige Fujitsu borden? Ik heb nu een setup met een Pentium G620, alles (incl HP 1810-24 switch, glasvezel kastje, Unifi AP Pro) hangt achter een UPS die 24/7 op minimaal 60W verbruik staat en het liefst zou ik dat wat naar beneden willen helpen.

[kh65]

Weiman schreef op vrijdag 19 juli 2019 @ 14:06:
…
De product: AMD Ryzen 5 3600 lijkt voor price/performance echt ideaal te zijn voor VM's omdat je er een sloot geheugen bij kan prikken en de review die vandaag op de frontpage verschenen is wijst aan dat de CPU zelf in idle maar ~8W gebruikt.
Dat is toch wel interessant zou je zeggen.

De grote vraag is, hoeveel gebruikt zo'n moederbord, bijvoorbeeld een B450? Kan dat uberhaupt opboksen tegen die superzuinige Fujitsu borden? Ik heb nu een setup met een Pentium G620, alles (incl HP 1810-24 switch, glasvezel kastje, Unifi AP Pro) hangt achter een UPS die 24/7 op minimaal 60W verbruik staat en het liefst zou ik dat wat naar beneden willen helpen.

In hetzelfde artikel wat je aanhaalt staat ook dat Intel processoren Idle toch flink wat zuiniger zijn.
Ik denk dat je bij AMD Ryzen 8+ Watt hoger uitkomt als het over zuinigheid gaat, alleen al voor de processor.
En inderdaad, de chipsets tellen ook mee.

Als je het vooral om veel geheugen gaat, dan moet je toch anders kijken denk ik.
Nieuwere processoren ondersteunen grotere DIMMs maar die zijn ook duur...
Een oudere Opteron G34 socket (is niet zuinig) met 8 DIMM sloten daar kun je vrij goedkoop veel
(64GB bijv.) geheugen in kwijt. Als bij jouw 'veel' beperkt blijft tot 32GB dan kan de intel
processor het ook aan met 8GB DDR3 DIMMs.

[mrmrmr]

Crateagus schreef op vrijdag 19 juli 2019 @ 13:46:
Als newbie in de (zunige) server wereld ben ik ook in de markt voor een server. Ik wil eigenlijk nagenoeg de build van dimmak overnemen. Nu zie ik vaak vergelijkbare builds voorbij komen met G5400 of I3-8100 cpu.

Is het mogelijk om iets van richting te geven wat bepalend is om voor één van de twee te kiezen. Of wanneer loop je tegen de beperkingen van de G5400 aan?

Zelf meen ik te lezen dat het aantal dockers en VM's bepalend zijn en dan in combinatie met verschillende streams en rar/par van downloads tegelijk.

Het gaat met name om hoe groot de belasting is tijdens realtime werkzaamheden zoals streamen of webserver. Daarvoor is de G5400 meestal genoeg tenzij je veel zware processen tegelijk wilt laten draaien, bijvoorbeeld meer dan 2 hoge resolutie streams. Dan zijn 4 cores van een 8100 handig.

Par en RAR doen veel rekenwerk op processorniveau. Je kunt elk systeem met enorm snelle processoren met RAR vol pompen, maar dat is niet de bottleneck. Het gaat erom dat je voldoende ruimte over hebt voor normale taken of dat je bijvoorbeeld RAR niet alle cores laat gebruiken. RAR is sowieso goed in ruimte overlaten, die kun je op lage prioriteit laten draaien en eventueel single core.
RAR pakt eerst uit naar de temp directory en verplaatst dan alle bestanden. Op een mechanische hard disk kan dat wat traag aanvoelen. SSD is aan te raden voor de temp directory.

@Weiman

Ryzen 5 3600 is niet echt geschikt voor zuinige servers (tenzij je een en ander aan functies terugschroeft). In het algemeen en in theorie is bijvoorbeeld een Ryzen 3200G met een A300 of A320 chipset het zuinigst van de huidige 3000 serie. Dat is vooral interessant als je server continu (het hele jaar door) een flinke belasting heeft en 50W zou verbruiken op een wat ouder systeem. Op dat punt kun je energie besparen door de energiezuinigheid van 7nm architectuur. De idle overhead van AMD is te groot om ook bij lage belasting effectief te zijn. Intel is onder idle veel zuiniger.

TLDR;
lage idle belasting: Intel (normaal voor thuisservers)
24x7 zware belasting: overweeg AMD (niet normaal )

@|sWORDs|

Ik denk niet dat hyperthreading veiligheidsproblemen vaak een probleem vormen bij thuisservers. Dat is wel een probleem bij shared hosting e.d. Maar daar heb je vaak al een ander ernstig probleem, want de provider kan meestal root overnemen.

[Weiman]

Veel geheugen is gelukkig ook niet bepaald duur meer, dus ik wilde gewoon gaan voor 64GB DDR4, een pricewatch: Fujitsu D3643-H en de pricewatch: Intel Core i3-8100 Boxed zou dat ook gewoon moeten trekken als ik de specs bekijk.

Als dat gewoon nog steeds het zuinigste is, so be it. Thanks voor de feedback

[|sWORDs|]

mrmrmr schreef op vrijdag 19 juli 2019 @ 14:25:
[...]
@|sWORDs|

Ik denk niet dat hyperthreading veiligheidsproblemen vaak een probleem vormen bij thuisservers. Dat is wel een probleem bij shared hosting e.d. Maar daar heb je vaak al een ander ernstig probleem, want de provider kan meestal root overnemen.

Vanaf één VM kunnen wachtwoorden/tokens/keys van andere VMs verkregen worden, niet echt wenselijk.

|sWORDs| schreef op vrijdag 19 juli 2019 @ 13:53:
[...]
als je safe wil zijn met L1TF/MDS heb je niets aan HT
[...]

[ Voor 16% gewijzigd door |sWORDs| op 19-07-2019 15:03 ]

[skinpatch]

mdbraber schreef op vrijdag 19 juli 2019 @ 09:30:
[...]
Klopt - mijn server hangt (omdat het niet anders kan) achter een Experia Box die ook als router fungeert. Als om wat voor reden dan ook mijn server het niet meer doet kan ik simpelweg de WiFi van de Experia Box weer aanslingeren als noodmaatregel.

Ahh ja natuurlijk, ik kan altijd de router van mijn provider er weer tussen hangen als alles kapot is ....

Heb de onderdelen inmiddels besteld. Moet alleen nog wat 2.5" schijven en zo'n Intel netwerkkaart scoren, maar dat komt nog wel een keer.

Bedankt voor jullie reacties

[mrmrmr]

|sWORDs| schreef op vrijdag 19 juli 2019 @ 15:01:
Vanaf één VM kunnen wachtwoorden/tokens/keys van andere VMs verkregen worden, niet echt wenselijk.

Dan moet je eerst toegang hebben tot een VM. Vandaar dat het bij shared hosting een probleem is. Dan heb je een onvertrouwde hypervisor en onvertrouwde VM's.

Het risico is klein bij thuisgebruik waar de eigenaar van de server/hypervisor ook degene is die de VM's beheert. Er zijn grotere beveiligingsproblemen om je zorgen over te maken. In dit topic gaat het vooral over thuisservers.

[|sWORDs|]

T

mrmrmr schreef op vrijdag 19 juli 2019 @ 15:57:
[...]


Dan moet je eerst toegang hebben tot een VM. Vandaar dat het bij shared hosting een probleem is. Dan heb je een onvertrouwde hypervisor en onvertrouwde VM's.

Het risico is klein bij thuisgebruik waar de eigenaar van de server/hypervisor ook degene is die de VM's beheert. Er zijn grotere beveiligingsproblemen om je zorgen over te maken. In dit topic gaat het vooral over thuisservers.

Je hoeft maar met één VM naar een foute pagina te gaan en in theorie kan er van alles misgaan. Prima als je dat risico wil nemen, maar om dan te zeggen dat als alle VMs eigen zijn het probleem er niets is klopt niet. Bij private cloud worden de mitigations ook toegepast met enorme performance hits, dat doen ze niet zo maar.

[Mars Warrior]

|sWORDs| schreef op vrijdag 19 juli 2019 @ 21:42:
Je hoeft maar met één VM naar een foute pagina te gaan en in theorie kan er van alles misgaan. Prima als je dat risico wil nemen, maar om dan te zeggen dat als alle VMs eigen zijn het probleem er niets is klopt niet. Bij private cloud worden de mitigations ook toegepast met enorme performance hits, dat doen ze niet zo maar.

Puur theoretisch kun jij ook dood neervallen nadat je dit bericht gelezen heb, of kan ik een boete krijgen als ik rustig met 250km/h over de A2 rijdt. Puur theoretisch hè? Want de kans is praktisch 0.

Ik denk dat de meeste zuinige thuisservers niet eens een browser bevatten, maar headless draaien en soms enkel file en backupserver spelen en in een bepaald percentage van de gevallen een hele rits docker containers draaien.

Maar de meeste thuisservers zijn voornamelijk idle, en omdat we ze niet steeds aan en uit willen zetten zijn we op zoek naar mega zuinige servers, zodat we onze wederhelft kunnen vertellen dat onze hobby "groen" is en ze niet bang hoeft te zijn voor een vette energierekening, toch

[|sWORDs|]

Mars Warrior schreef op vrijdag 19 juli 2019 @ 22:34:
[...]

Puur theoretisch kun jij ook dood neervallen nadat je dit bericht gelezen heb, of kan ik een boete krijgen als ik rustig met 250km/h over de A2 rijdt. Puur theoretisch hè? Want de kans is praktisch 0.

Ik denk dat de meeste zuinige thuisservers niet eens een browser bevatten, maar headless draaien en soms enkel file en backupserver spelen en in een bepaald percentage van de gevallen een hele rits docker containers draaien.

Maar de meeste thuisservers zijn voornamelijk idle, en omdat we ze niet steeds aan en uit willen zetten zijn we op zoek naar mega zuinige servers, zodat we onze wederhelft kunnen vertellen dat onze hobby "groen" is en ze niet bang hoeft te zijn voor een vette energierekening, toch

Waarom zo op de man? Iedereen zijn eigen mening, maar laten we elkaar in waarde laten.

Ik zeg toch al “als”? Hij heeft de keuze tussen een CPU met of zonder HT, waarom dan niet voor de CPU met meer cores en geen HT gaan? Procentueel op het hele system marginaal meer en meer CPU power, zeker mocht je HT uit willen zetten of alleen intra VM willen gebruiken.
Dat is de strekking van het verhaal. Ik gebruik hier gewoon HT op mijn kleine hosts en TPS, maar dat wil niet zeggen dat het niets is om mee te nemen in de aanschaf. De totale impact van Spectre/Meltdown/L1TF/MDS is gigantisch bij hogere loads, iets waar je met 2 cores zo aan zit. Mijne nieuwe grote hosts zijn niet voor niets voorzien van EPYC CPU’s, die trouwens hun eigen performance problemen hebben. Als AMD de idle power onder controle zou hebben dan zou Ryzen ook een goede overweging kunnen zijn voor een zuinige server.

[mrmrmr]

Besturingssystemen zijn voor diverse aanvallen al voorzien van mitigations (tegenmaatregelen).

Om on topic te blijven: de microupdates of BIOS patches kunnen wel voor problemen zorgen in zuinige servers. Die BIOS updates zijn vaak niet downgradable en dat kan invloed hebben op het verbruik. Het zou daardoor zo kunnen zijn dat moederborden met een ouder BIOS een lager verbruik hebben dan nieuwere BIOS. Als je een moederbord nieuw koopt met een nieuw BIOS, dan kun je daar niet veel aan veranderen.

Browsers zijn ook al voorzien van mitigations voor diverse typen aanvallen. Het is ongetwijfeld een zeer serieus probleem voor shared hosters (zoals VPS, cloud), waar de "buren" en de "huurbaas" niet vertrouwd zijn. Het is goed dat daar stringente maatregelen worden genomen, met name op hypervisor, microcode en BIOS niveau.

Als je zelf de volledige controle hebt over systeem en VM's, kun in principe alle soorten mitigations toepassen. Niet alle typen mitigations bieden volledige bescherming, het risico kan wel worden geminimaliseerd en er zijn vaak meerdere mitigations per beveiligingsprobleem. Als je softwarepatches toepast ben je redelijk beschermd, voor zover nu bekend.

[Crateagus]

@mrmrmr & @|sWORDs|
Dank voor jullie reactie.

euhh, sommige zaken gaan mijn pet te boven en heb geen idee waar het over gaat en dat ligt aan mij.

Maar als ik geen zware taken tegelijk nodig heb, moet G5400 voldoen begrijp ik.
Ga het eens optellen en vergelijken. Bij die I3-8100 kan ik de passieve koeler achterwege laten lijkt me zo als die zwaar belast wordt en de stock koeler gebruiken.

[|sWORDs|]

Crateagus schreef op zaterdag 20 juli 2019 @ 11:03:
@mrmrmr & @|sWORDs|
[...]

euhh, sommige zaken gaan mijn pet te boven en heb geen idee waar het over gaat en dat ligt aan mij.

[...]

In het kort heeft Intel een 'viertal' security flaws, op een fysieke machine merk je daar vrij weinig van, maar voor bepaalde virtuele workloads KAN de impact bijna 50% zijn, ALS je alle mitigations toe past.

Spectre+Meltdown:

https://www.loginvsi.com/...essons-learned-april-2018
Be aware that a fully patched system, as an example worst case scenario, could set you back 40% in density.

Nou zijn deze percentage een stuk (50%?) lager bij Skylake+ en een stuk lager zonder RDSH, maar Haswell en Broadwell kunnen retpoline gebruiken (maar meestal niet in combinatie met virtualisatie ivm live migration compatibility), Skylake+ niet.

https://wccftech.com/windows-10-2019-spectre-v2-slowdowns/
Microsoft is currently pushing out new Preview Builds from Windows 10 2019 edition to Insiders in Skip Ahead and Fast Ring. Along with other improvements and features, it looks like the next version of the desktop operating system carries a mitigation for the Spectre v2 speculative execution side-channel attack that will stop the machines from slowing down.

When the companies hustled to address Spectre and Meltdown vulnerabilities, one of the major concerns was the reduced performance of the PCs. Mitigation, in some tests, showed a severe impact on performance that could go from 5% to 30%. Intel’s microcode mitigations for Spectre variant 2, tracked as CVE- 2017-5715, were specifically of concern as they change how hardware speculatively executes.

However, Google’s cloud systems suffered little to no impact as the company engineers developed a software-based mitigation for Variant 2 known as Retpoline that offers near to no impact on performance.

“Retpoline as a mitigation strategy swaps indirect branches for returns, to avoid using predictions which come from the BTB, as they can be poisoned by an attacker.

The problem with Skylake+ is that an RSB underflow falls back to using a BTB prediction, which allows the attacker to take control of speculation.”

AMD heeft sowieso nauwelijks impact en kan retpoline gebruiken.

L1TF+MDS:

https://www.go-euc.com/th...l-desktop-infrastructure/
It is expected to see an impact when applying these mitigations and the result shows an impact of around 25%.

AMD heeft het hele probleem niet, maar heeft een nadeel qua memory latency tussen cores (en sockets).

Als je de laatste Windows versies wil draaien zit daar ook een flinke impact (los van de security updates), ook hierbij KAN de impact bijna 50% zijn.

https://www.loginvsi.com/...-with-these-simple-tricks

De dip van 1809 naar 1903 is nog een stapje erger dan we eerder gezien hebben. VSIMAX (aantal VMs wat je kunt draaien met acceptabele latency) zou ongeveer 82-83 op de dual E5 2670-v3 host gebruikt in de diagram hierboven zijn.

Echter merk je al deze zaken pas als je tegen de maximums aanloopt, blijf je daar onder is de impact zeer gering.

Crateagus schreef op zaterdag 20 juli 2019 @ 11:03:
@mrmrmr & @|sWORDs|
Maar als ik geen zware taken tegelijk nodig heb, moet G5400 voldoen begrijp ik.
Ga het eens optellen en vergelijken. Bij die I3-8100 kan ik de passieve koeler achterwege laten lijkt me zo als die zwaar belast wordt en de stock koeler gebruiken.

Ja, zolang je niet langer dan heel even boven de 80% CPU usage uit komt met een G5400 is er geen enkele reden om voor een 8100 te gaan.
Twee jaar geleden zou ik al snel een quad core aanraden boven een dual core, maar nu denk ik dat voor veel workloads (zelfs thuis) een dual core veel sneller de bottleneck kan zijn.
En een quad core mag dan meer dan het dubbele kosten, op het hele systeem is het meestal maar 15% extra, waar je dan toch de dubbele performance voor terug krijgt en zolang je het niet nodig hebt is het verbruik nauwelijks hoger, zodra je het wel nodig hebt kan het verbruik zelfs lager zijn (zie race to idle en een overloaded systeem doet veel langer over taken).
Heb je een echt lage workload, veel Linux of oudere Windows versies, of pas je de mitigations niet toe dan gaat dat mogelijk niet op. Ook zijn weinige zware taken beter dan veel lichte.

[ Voor 94% gewijzigd door |sWORDs| op 20-07-2019 13:50 ]

[N8w8]

Asus N4000T + Mean Well GST25E12
Zo, ik heb wat nieuw speelgoed, voornamelijk gekocht bij Reichelt.nl.

86,33 mobo: Asus N4000T (thin-ITX, dualcore Gemini Lake 6W TDP, DCin, solid caps)
19,32 ram: Crucial CT4G4SFS824A (1x4GB DDR4-2400)
13,54 adapter: Mean Well GST25E12 (25W 12V, 81,7% efficient bij 2,5W belasting)
0,16 adapter plug die op mobo past (erop gesoldeerd)
5,60 verzendkosten
20,60 kast: Realan/E-Mini E-T3 (185x198x44mm, van chinees op eBay)
145,55 totaal

Dit gebruik ik ook maar heb ik geen extra kosten aan:
HDDs: 2x Toshiba MQ01ABD050 (2,5" 500GB 17dB(!) 5400rpm singleplatter PMR TLER)
SATA kabels: meebesteld maar zaten ook bij mobo, dus niet vermeld hierboven
energiemeter: Voltcraft SBC-500 (accuratesse 5%/0,05W@<2W, 3%@>2W)
software: Debian Buster op btrfs op luks op lvm-raid1

Gemeten verbruik, idle in Debian met TLP:

lan	mon	kbd	hdds	pen	led	W	W-hdds
J	J	J	L	J	N	5,2	3,5
J	N	J	L	J	N	4,7	3,0
J	N	J	U	J	N	3,26	2,16
J	N	J	S	J	N	2,43	2,07
J	N	N	S	J	J	2,40	2,04
J	N	N	S	J	N	2,34	1,98
N	N	N	S	J	N	1,69	1,33
N	N	N	S	N	N	1,65	1,29
suspend						0,53	0,53
uit						0,45	0,45

lan/mon/kbd/pen/led: of ie ingeplugd is. pen = pendrive met decrypt sleutel.
led = power LED, nog even erbij gemeten nadat kast arriveerde (60mW dus, ja hij is erg fel ).
hdds: heads Loaded/Unloaded of Standby. W-hdds: gemeten W, minus hdd verbruik vlgs datasheet.
Ik had t overigens nog geprobeerd met LAN uitgeschakeld in BIOS, maar toen verbruikte ie 0,9W meer.
Daarna mat ik nogmaals met LAN ingeschakeld maar kabel eruit bij booten, toen was t nog eens (0,9+)0,4W meer.
Daarna booten met kabel erin, en na boot eruit trekken, was het weer laag (zelfde als wat ik eerst ook mat).
Zal wel aan mn software liggen, maar geen zin dat verder uit te zoeken.

iig, dit is dus wel een super zuinig (muv HDDs) en voordelig systeempje, als je niet zoveel nodig hebt!

Waarom die HDDs, nou ik heb nog enkele van deze liggen (ihkv onze ouwe Synology) en ze bevallen prima. En de kast, nouja hij is goedkoop, compact, stevig, en vind m zelf iig niet lelijk.
Ruimte tussen deksel en mobo heatsink is 19mm dus ruimte genoeg voor schijven.
Het was even MacGyveren, maar die hangen daar nu mooi en stil tussen, in een aan de deksel gekit PVC U-profiel bekleed met tochtstrip. CPU+HDD temp is ca +10C boven kamer (idle met heads loaded).

Oja, en in mn zoektocht naar de Ultieme Adapter kwam ik nog tegen:
Mean Well MFM-30-12: 30W 12V 90% efficient, open frame voeding van 66x35x23mm, €20 bij Conrad.
De meesten hier hebben wat meer power nodig, maar het is immers het zuinige server topic.
iig heeft Mean Well ook zwaardere GST voedingen (tot 280W en 95% efficient!), het checken waard.
(Laat je niet afschrikken door de naam; het mag dan wel Gemene Put betekenen, ze bedoelen het vast goed )
Reichelt heeft nog wel meer leuke adapters, ook van Phihong (schijnt goed te zijn).

Ben je geinteresseerd in dit mobo, kijk dan ook eens naar de Gigabyte IMB4100TN.
Grofweg dezelfde klasse, maar quadcore, dual LAN, PCIe-x1, en diverse extra I/O aansluitingen.
Maar die is nog maar net uit en kon ik nergens vinden.

[ Voor 39% gewijzigd door N8w8 op 08-11-2020 11:23 ]

[FireDrunk]

2.34W idle klinkt heel behoorlijk! Voor de hardware die je hebt klinkt het mij niet onmogelijk in de oren. Mooi resultaat!

[kooimens]

mdbraber schreef op donderdag 18 juli 2019 @ 21:16:
[...]


Ik heb 2 NIC (1x onboard, 1x HP i210-T1). Op één NIC heb ik de WAN aangesloten (naar de Experia box) en op de andere NIC heb ik een L3 switch aangesloten (TP-Link SG108PE) waar ik via VLAN verschillende netwerken heb aangesloten.

Ik had het praktisch overigens ook gewoon op 1 NIC kunnen aansluiten en ook de WAN via een VLAN kunnen doen (praktisch gaan zowel LAN als WAN in dezelfde switch). Maar zo heb ik wat meer uitbreid opties... (en niet iets makkelijker configureren).

Hoe verzorg je in deze setup de WIFI?

[mdbraber]

kooimens schreef op maandag 22 juli 2019 @ 10:59:
[...]
Hoe verzorg je in deze setup de WIFI?

Unifi AP (AC-Lite)

[dimmak]

De 5TB portable schijf van Seagate is in de aanbieding bij MaxICT.

Edit: en hij is weer duurder geworden.

[ Voor 10% gewijzigd door dimmak op 26-07-2019 12:08 ]

[Raven]

dimmak schreef op vrijdag 26 juli 2019 @ 07:46:
De 5TB portable schijf van Seagate is in de aanbieding bij MaxICT.

En dan noem je meteen een van de meest geweldige winkels die er zijn...

[dimmak]

Raven schreef op vrijdag 26 juli 2019 @ 07:57:
[...]

En dan noem je meteen een van de meest geweldige winkels die er zijn...

Ach, bij de reviews lees ik vooral over hun levertijd en verzending. Ik zit niet op de schijf te wachten want heb de komende tijd nog geen tijd om hem in te bouwen en ik laat hem bezorgen op mijn werk waar bijna altijd wel iemand aanwezig is.

[Rayures]

Heeft iemand ervaring met de D3643 en PWM / Voltages?

De chip op de D3643 is de NCT5581D, deze kunnen we uitlezen en resulteert in onderstaande (ongefilterd) readings (wat aan de warme kant, kamertemperatuur is wat hoog vandaag ).

Wat opvalt: +5v en +12v ontbreken. Wellicht niet aangesloten? Hebben jullie dat ook?

Fan2 is de cpu cooler, deze draait op 2600rpm. fancontrol kan de fan naar 100% rpm krijgen (3200rpm), maar niet meer terug naar een andere waarde. Hebben jullie dat ook? (werkt pwm uberhaupt op dit bord?)

In de bios van de D3643 valt niets te configuren hieromtrent.

Wat is de ervaring op andere Fujitsu bordjes? D3642 en D3644?

 root@pve:~# sensors
pch_cannonlake-virtual-0
Adapter: Virtual device
temp1:        +56.0°C

coretemp-isa-0000
Adapter: ISA adapter
Package id 0:  +47.0°C  (high = +82.0°C, crit = +100.0°C)
Core 0:        +46.0°C  (high = +82.0°C, crit = +100.0°C)
Core 1:        +46.0°C  (high = +82.0°C, crit = +100.0°C)
Core 2:        +46.0°C  (high = +82.0°C, crit = +100.0°C)
Core 3:        +44.0°C  (high = +82.0°C, crit = +100.0°C)
Core 4:        +46.0°C  (high = +82.0°C, crit = +100.0°C)
Core 5:        +46.0°C  (high = +82.0°C, crit = +100.0°C)

nct6796-isa-0a20
Adapter: ISA adapter
in0:                    +0.00 V  (min =  +0.00 V, max =  +2.04 V)
in1:                    +1.02 V  (min =  +0.94 V, max =  +1.06 V)
in2:                    +3.31 V  (min =  +3.10 V, max =  +3.49 V)
in3:                    +3.38 V  (min =  +3.10 V, max =  +3.49 V)
in4:                    +0.00 V  (min =  +0.00 V, max =  +2.04 V)
in5:                    +0.14 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in6:                    +0.62 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in7:                    +3.31 V  (min =  +3.10 V, max =  +3.49 V)
in8:                    +3.10 V  (min =  +2.58 V, max =  +3.30 V)
in9:                    +1.06 V  (min =  +0.46 V, max =  +1.06 V)  ALARM
in10:                   +0.18 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in11:                   +0.15 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in12:                   +0.16 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in13:                   +0.14 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in14:                   +0.68 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
fan1:                     0 RPM  (min =    0 RPM)
fan2:                  2662 RPM  (min =    0 RPM)
fan3:                     0 RPM  (min =    0 RPM)
SYSTIN:                +122.0°C  (high = +80.0°C, hyst = +75.0°C)  ALARM  sensor = thermistor
CPUTIN:                 +46.5°C  (high = +80.0°C, hyst = +75.0°C)  sensor = thermistor
AUXTIN0:                +48.5°C    sensor = thermistor
AUXTIN1:               +108.0°C    sensor = thermistor
AUXTIN2:               +111.0°C    sensor = thermistor
AUXTIN3:                +44.0°C    sensor = thermistor
PECI Agent 0:           +47.0°C
PCH_CHIP_CPU_MAX_TEMP:   +0.0°C
PCH_CHIP_TEMP:           +0.0°C
PCH_CPU_TEMP:            +0.0°C
intrusion0:            ALARM
intrusion1:            ALARM
beep_enable:           disabled

[mdbraber]

@Rayures op de 3644B gebruik ik ftsteutates driver van Fujitsu, daar staat wel netjes de 5V en 12V output in.

pch_cannonlake-virtual-0
Adapter: Virtual device
temp1:        +46.0°C  
 
jc42-i2c-0-19
Adapter: SMBus I801 adapter at efa0
temp1:        +35.8°C  (low  =  +0.0°C)                  ALARM (HIGH, CRIT)
                       (high =  +0.0°C, hyst =  +0.0°C)
                       (crit =  +0.0°C, hyst =  +0.0°C)
 
coretemp-isa-0000
Adapter: ISA adapter
Package id 0:  +40.0°C  (high = +80.0°C, crit = +100.0°C)
Core 0:        +40.0°C  (high = +80.0°C, crit = +100.0°C)
Core 1:        +40.0°C  (high = +80.0°C, crit = +100.0°C)
Core 2:        +40.0°C  (high = +80.0°C, crit = +100.0°C)
Core 3:        +39.0°C  (high = +80.0°C, crit = +100.0°C)
 
ftsteutates-i2c-0-73
Adapter: SMBus I801 adapter at efa0
VCC 3.3V:     +3.30 V  
3.3V AUX:     +3.26 V  
V_IN (12V):  +12.17 V  
VBAT 3.0V:    +2.69 V  
Fan 1:        720 RPM
CPU:          +41.0°C  
Ambient:      +34.0°C  
Core:         +36.0°C  
Graphics:     +34.0°C  
Memory:       +34.0°C  
PCH:          +44.0°C  
 
jc42-i2c-0-18
Adapter: SMBus I801 adapter at efa0
temp1:        +35.8°C  (low  =  +0.0°C)                  ALARM (HIGH, CRIT)
                       (high =  +0.0°C, hyst =  +0.0°C)
                       (crit =  +0.0°C, hyst =  +0.0°C)

Wat is overigens die cmdcontrol waar je het over hebt?

[Rayures]

@Rayures op de 3644B gebruik ik ftsteutates driver van Fujitsu, daar staat wel netjes de 5V en 12V output in.

Dat ziet er inderdaad netjes uit. Dat zou ik ook verwachten op de D3643, omdat in de bios wel +12 en +5 te zien zijn. Waarschijnlijk doe ik iets niet goed....
Welke chip zit er fysiek op het bord?

Wat is overigens die cmdcontrol waar je het over hebt?

fancontrol: automated software based fan speed regulation (ala Speedfan (Windows)).

werkt fan snelheid middels PWM wel goed op de 3644?

[ Voor 3% gewijzigd door Rayures op 27-07-2019 15:39 ]

[Gamerkoe]

Wie kan me helpen om mijn vraagstuk te beantwoorden? Ik wil een thuis server bouwen met ProxMox en vooralsnog twee VM's. Dit zijn Home Assistant / Domoticz (of desnoods beide) + TVHeadend (+oscam). Tevens wil ik in de toekomst misschien nog andere servers draaien, maar ik houd het hier voorlopig op de 'voorbereiding' dat het mogelijk moet zijn.

Ik heb nog een oude PC staan (Asus P5Q-EM, Intel Core2 Q9300, 2 reepjes Kingston 8GB DDR2). Van de processor heb ik gevonden dat deze geen virtualisatie ondersteund, dus voor zover ik kan zien moet die sowieso vervangen worden. Verder heb ik nog een Antec P180 met Antec 550w voeding die ik dacht om te hergebruiken.

Het idee wat ik had is om 2 nieuwe SSD's te kopen voor storage (niet TV recording, die gaan naar een NAS. Idem voor snapshot backups), dus VM opslag zelf - 1GB leek me voldoende. Loont het om een Socket 775 Processor te kopen die wél virtualisatie ondersteund en zo nog relatief goedkoop een server op te zetten? Of moet ik om technische redenen (ECC RAM bijv) beter uitwijken naar iets compleet nieuws?

[mrmrmr]

Intel Core2 Q9300 ondersteunt Vt-x en Vt-d volgens Intel. Het zou kunnen dat het moederbord het niet (juist) ondersteunt, vroeger waren daar wel eens problemen mee. Zonder die functies kun je ook een VM laten draaien.

Je kan gewoon je systeem bouwen met je oude server. Daarna kun je meten wat het verbruik is. Als dat tegenvalt kun je altijd makkelijk overstappen op een nieuw basissysteem, zoals een nieuwe processor/moederbord/geheugen, simpelweg door deze onderdelen te vervangen. Dat werkt bij de meeste besturingssystemen.

ECC heb je eigenlijk alleen nodig als je een erg actief opslagsysteem gebruikt dat schakelt tussen diverse caches (geheugen, SSD, HDD) waardoor het risico hoog wordt, of als je absoluut dataintegriteit nodig hebt omdat de data waardevol is. Maar sommigen vinden het gewoon leuk/fijn/handig/stoer om zo'n hardcore systeem te hebben, daar kan ik me ook wel iets bij voorstellen. Het kost wel wat meer. Een modern ECC capabel moederbord begint bij 150 euro: Fujitsu D3644-B, ook nog eens erg zuinig.

Let op: er zijn (gaming) moederborden die wel ECC geheugen accepteren, maar de foutcorrectiefunctie verder niet gebruiken. Je kunt ook niet alle typen processoren toepassen, de processor moet ook ECC te ondersteunen, bijvoorbeeld een moderne Pentium of een i3. Dus zowel het moederbord, processor als geheugen moet van het juiste type zijn.