Het grote zuinige server topic - deel 3

[heuveltje]

Raven schreef op vrijdag 7 april 2023 @ 12:15:
[...]

uitgangsspanningen:
- 9 V-3 A
- 12 V-3 A
- 15 V-2,4
- 19 V-1,89 A
Dat is niet veel vermogen

Runtime bij halve belasting: 30 min
Ik heb niet bijgehouden hoe lang mijn diy-UPS het kan uithouden, maar op basis van stroomverbruik en accucapaciteit minimaal een halve dag.

aan de andere kant is 37W meer dan voldoende voor de meeste mini servertjes hier.
en 15 min is meer dan genoeg om de logs en cache weg te schrijven en dan afsluiten

thof schreef op vrijdag 7 april 2023 @ 13:48:
[...]


Het jammere is alleen dat deze mini UPS geen interface heeft naar je systeem om een clean shutdown te triggeren. Dat was voor mij de doorslag om hem niet aan te schaffen. Al kan je daar zelf natuurlijk wel weer wat voor maken/verzinnen.

Dan is het idd een crappy ding. Zie alleen nog wat nut als je het bv gebruikt voor iets op een truck of boot waarbij je wat stroom pieken en dippen kunt verwachten

[ Voor 40% gewijzigd door heuveltje op 07-04-2023 13:52 ]

[NordicMan]

mrmrmr schreef op vrijdag 7 april 2023 @ 12:05:
Een UPS is inefficient omdat er omzetting is van AC/DC naar DC en weer terug naar AC/DC. Het verbruik is vaak een veelvoud van dat van een zuinige thuisserver.

In de praktijk is een UPS ook van weinig waarde omdat het een computer maar voor korte tijd in de lucht kan houden en dat er geen belang is dat die computer blijft draaien als de stroom uitvalt, het is immers voor thuis, je hebt geen personeelskosten te betalen en de rest van de apparatuur en verlichting valt wel uit. Bovendien valt in het algemeen de stroom bijzonder weinig uit in Nederland en is het risico op onherstelbare problemen gering bij een zuinige server met externe backup.

Puur voor home deel ik je mening.

Hier is de home server naast plex/domotica, ook een hobbyproject (decentralized data storage). Rendabiliteit is genoeg om alle kosten te dekken(aankoop/upgrade/elek/inet/UPS) en winst te maken. Corrupte data is nogal nefast.

[thof]

heuveltje schreef op vrijdag 7 april 2023 @ 12:33:
[...]


aan de andere kant is 37W meer dan voldoende voor de meeste mini servertjes hier.
en 15 min is meer dan genoeg om de logs en cache weg te schrijven en dan afsluiten

Het jammere is alleen dat deze mini UPS geen interface heeft naar je systeem om een clean shutdown te triggeren. Dat was voor mij de doorslag om hem niet aan te schaffen. Al kan je daar zelf natuurlijk wel weer wat voor maken/verzinnen.

[Blamm]

Langzaamaan ben ik onderdelen aan het verzamelen om een doehetzelf NAS op te gaan zetten naast of ipv de SFF pc die nu al heb voor mijn docker stacks en Home Assistant. Graag een beetje zuinig dus ben druk aan het lezen in deze topicreeks.

Nu ben ik op het punt aangekomen dat ik moet gaan kiezen wat voor storage ik wil hebben en n.a.v. wat ik onder andere hier gelezen heb ben ik gaan kijken naar de mogelijkheid om de 5TB 2.5" schijven te gaan gebruiken in een MergerFS+Snapraid opstelling.

Hoe erg zou het echter zijn dat deze schijven SMR zijn, wanneer bijvoorbeeld een schijf gerecovered moet worden? De parity disk zal sowieso een 3.5" CMR moeten worden, maar die slaat alleen aan wanneer er gesynced of gescrubbed wordt.

Heeft iemand hier wellicht ervaring mee al?

[ Voor 4% gewijzigd door Blamm op 07-04-2023 14:04 ]

[Mars Warrior]

Blamm schreef op vrijdag 7 april 2023 @ 14:02:
Langzaamaan ben ik onderdelen aan het verzamelen om een doehetzelf NAS op te gaan zetten naast of ipv de SFF pc die nu al heb voor mijn docker stacks en Home Assistant.

Nu ben ik op het punt aangekomen dat ik moet gaan kiezen wat voor storage ik wil hebben en n.a.v. wat ik onder andere hier gelezen heb ben ik gaan kijken naar de mogelijkheid om de 5TB 2.5" schijven te gaan gebruiken in een MergerFS+Snapraid opstelling.

Hoe erg zou het echter zijn dat deze schijven SMR zijn, wanneer bijvoorbeeld een schijf gerecovered moet worden? De parity disk zal sowieso een 3.5" CMR moeten worden, maar die slaat alleen aan wanneer er gesynced of gescrubbed wordt.

Heeft iemand hier wellicht ervaring mee al?

Waarom moet de parity disk een CMR disk zijn?
Ik gebruik gewoon 3x4TB 2.5" schijven. 2 voor data icm MergerFS, en de derde voor SnapRaid.

[Blamm]

Mars Warrior schreef op vrijdag 7 april 2023 @ 14:05:
[...]

Waarom moet de parity disk een CMR disk zijn?
Ik gebruik gewoon 3x4TB 2.5" schijven. 2 voor data icm MergerFS, en de derde voor SnapRaid.

Die veronderstelling had ik, in verband met de grote hoeveelheden data die weggeschreven worden daarop, of zie ik dat helemaal verkeerd? Heb me blijkbaar nog niet genoeg ingelezen

[Mars Warrior]

Blamm schreef op vrijdag 7 april 2023 @ 14:07:
[...]

Die veronderstelling had ik, in verband met de grote hoeveelheden data die weggeschreven worden daarop, of zie ik dat helemaal verkeerd? Heb me blijkbaar nog niet genoeg ingelezen

Ik heb geen andere ervaringen dan met deze combi, dus weet ook niet hoe een ander type schijf is als parity schijf. En dus ook niet of dit snel of langzaam is.

• De initiele sync met ca 7TB aan data duurde ruim 7 uur.
• De dagelijkse syncs zijn in de regel 1-2 minuten met ca 10GB aan gewijzigde data.
• Volgens SnapRaid zit de meeste wachttijd bij de data schijven.

Doe ik de sync vaker, dan is het altijd minder dan 1 minuut. De parity schijf draait dus maar een paar minuten per dag, en is de rest van de tijd lekker aan het slapen.

De externe backup met Crashplan duurt enkele uren, dus dit valt geheel in het niet qua tijd

[ Voor 3% gewijzigd door Mars Warrior op 07-04-2023 14:18 ]

[Blamm]

Mars Warrior schreef op vrijdag 7 april 2023 @ 14:16:
[...]

Ik heb geen andere ervaringen dan met deze combi, dus weet ook niet hoe een ander type schijf is als parity schijf. En dus ook niet of dit snel of langzaam is.

• De initiele sync met ca 7TB aan data duurde ruim 7 uur.
• De dagelijkse syncs zijn in de regel 1-2 minuten met ca 10GB aan gewijzigde data.

Doe ik de sync vaker, dan is het altijd minder dan 1 minuut. De parity schijf draait dus maar een paar minuten per dag, en is de rest van de tijd lekker aan het slapen.

De externe backup met Crashplan duurt enkele uren, dus dit valt geheel in het niet qua tijd

Dat is geweldige real-life data, bedankt daar heb ik wat aan!

[Mars Warrior]

Blamm schreef op vrijdag 7 april 2023 @ 14:17:
[...]

Dat is geweldige real-life data, bedankt daar heb ik wat aan!

15GB in ff meer dan 1 minuut...

Bash:

:~$ sudo snapraid sync
Self test...
Loading state from /var/snapraid.content...
Scanning...
Scanned d2 in 0 seconds
Scanned d1 in 9 seconds
Using 689 MiB of memory for the file-system.
Initializing...
Resizing...
Saving state to /var/snapraid.content...
Saving state to /mnt/data1/.snapraid.content...
Saving state to /mnt/data2/.snapraid.content...
Verifying...
Verified /var/snapraid.content in 0 seconds
Verified /mnt/data2/.snapraid.content in 0 seconds
Verified /mnt/data1/.snapraid.content in 0 seconds
Using 48 MiB of memory for 64 cached blocks.
Selecting...
Syncing...
100% completed, 15122 MB accessed in 0:01    , 0:00 ETA

     d1 57% | ***********************************
     d2  0% |
 parity 36% | **********************
   raid  1% |
   hash  4% | **
  sched  0% |
   misc  0% |
            |______________________________________________________________
                           wait time (total, less is better)

Everything OK
Saving state to /var/snapraid.content...
Saving state to /mnt/data1/.snapraid.content...
Saving state to /mnt/data2/.snapraid.content...
Verifying...
Verified /var/snapraid.content in 0 seconds
Verified /mnt/data1/.snapraid.content in 0 seconds
Verified /mnt/data2/.snapraid.content in 0 seconds

Ik heb overigens de guide van Perfect Media Server gebruikt.

Mijn schijven:

Bash:

root@root:~$ df -h
Bestandssysteem           Grootte Gebruikt Besch Geb% Aangekoppeld op
tmpfs                        3,1G     5,7M  3,1G   1% /run
/dev/mapper/vgubuntu-root    1,8T      96G  1,7T   6% /
tmpfs                         16G        0   16G   0% /dev/shm
tmpfs                        5,0M        0  5,0M   0% /run/lock
mergerfs                     7,2T     5,5T  1,4T  81% /mnt/pool
/dev/nvme0n1p1               511M     6,1M  505M   2% /boot/efi
/dev/sdc1                    3,6T     2,9T  557G  85% /mnt/parity1
/dev/sda1                    3,6T     2,8T  635G  82% /mnt/data1
/dev/sdb1                    3,6T     2,7T  754G  79% /mnt/data2

[Tebbie]

Hoi allemaal,

Ik heb net de Deskmini H470 in huis met Intel i5-10400F lga1200 chip.
Nu knal ik tegen een zwart scherm aan tijdens opstarten. Geen bios scherm niets. Je ziet scherm wel ff actief worden maar blijft zwart. Verder cpu fan draait en geheugen beide banken geprobeerd (crucial ddr4 1x32 Gb 3200]. Iemand tips? Cpu is gen10 dus zou ok moeten zijn met dit boardje.

Thx

[mrmrmr]

@Tebbie

De processor heeft geen gpu, het is een 'F' versie.

Gebruik dus een processor met gpu.

[Tebbie]

mrmrmr schreef op vrijdag 7 april 2023 @ 17:35:
@Tebbie

De processor heeft geen gpu, het is een 'F' versie.

Gebruik dus een processor met gpu.

Bedankt @mrmrmr voor je snelle reactie, stom van mij dat ik daar mis gegaan ben. Ik ga het proberen om te ruilen bij megekko. Thx

[mrmrmr]

@Tebbie

Dit soort dingen moet je maar net weten.

Als er PCIe slots aanwezig waren zou je er tijdelijk een grafische kaart kunnen gebruiken, installatie uitvoeren en verder werken op afstand. Maar de DeskMini heeft geen pcie slots. Dat is juist een van de redenen waarom hij zuinig kan zijn.

Er zijn nog wat andere oplossingen, maar daarvoor moet je meestal toch eerst in de BIOS kunnen. Je zou bijvoorbeeld kunnen starten vanaf een image op het netwerk. Of een M.2 gpu insteken als je die kunt vinden.

Omwisselen voor een processor met gpu is toch de makkelijkste oplossing.

[Tebbie]

mrmrmr schreef op vrijdag 7 april 2023 @ 18:06:
@Tebbie

Dit soort dingen moet je maar net weten.
…
Er zijn nog wat andere oplossingen, maar daarvoor moet je meestal
Omwisselen voor een processor met gpu is toch de makkelijkste oplossing.

Ja ben al een poosje uit het wereldje van pc’s in elkaar zetten en had hier niet bij stil gestaan. Wel posts in dit topic gelezen. Heb al heel lang een server draaien met Supermicro X10SL7-F en de1241v3 en watt technisch een dingetje aan het worden. Megekko had geen 10500 meer en dus koos ik de 10400F en daar ging het mis.

[Tebbie]

Los ik het met deze dan op? @mrmrmr

uitvoering: Intel Core i5-10400 (SRH78 / SRH3C) Boxed

[mrmrmr]

Tebbie schreef op vrijdag 7 april 2023 @ 19:05:
Los ik het met deze dan op? @mrmrmr

uitvoering: Intel Core i5-10400 (SRH78 / SRH3C) Boxed

Dit is de lijst ondersteunde processoren:
https://www.asrock.com/ne...70%20Series/index.asp#CPU

Stepping versies Q0 en G1 worden beide ondersteund.

Zou moeten werken denk ik.

[Mars Warrior]

Tebbie schreef op vrijdag 7 april 2023 @ 19:05:
Los ik het met deze dan op? @mrmrmr

uitvoering: Intel Core i5-10400 (SRH78 / SRH3C) Boxed

Tweedehands zie ik dat er 2 te koop staan voor €90

[GoBieN-Be]

De UPS die ik had was een oude van een server afbraak, had wel 3000VA.
Maar volgens het verschil in vermogen met UPS en daarna zonder te meten kwam ik tegen 50W uit.

[ Voor 5% gewijzigd door GoBieN-Be op 07-04-2023 20:07 ]

[Tebbie]

Mars Warrior schreef op vrijdag 7 april 2023 @ 19:42:
[...]

Tweedehands zie ik dat er 2 te koop staan voor €90

Hehe bedankt, maar ga toch liever voor nieuw.
Zal straks 24x7 draaien dus vind ik “nieuw” wel prettig dan.

[Tebbie]

mrmrmr schreef op vrijdag 7 april 2023 @ 19:09:
[...]


Dit is de lijst ondersteunde processoren:
https://www.asrock.com/ne...70%20Series/index.asp#CPU

Stepping versies Q0 en G1 worden beide ondersteund.

Zou moeten werken denk ik.

Ja werkt, vanmiddag ontvangen en geïnstalleerd. Andere 10400F gaat terug.

[andru123]

@Tebbie kan je zomaar een CPU retourneren?

[Tebbie]

andru123 schreef op zaterdag 8 april 2023 @ 18:45:
@Tebbie kan je zomaar een CPU retourneren?

Ik heb een RMA gekregen dus ga het zien.

[hyperg]

Hallo allemaal, ik volg het topic al een tijd en heb er ook veel gebruik van gemaakt voor het samen stellen van mijn eigen server'tje. Ik heb het een tijdje terug besteld en heb er nu wat services op draaien en ik wou graag wat terug bijdragen.

De server is wel niet de meest zuinig of kleine server in dit topic, maar ik heb dit gebouwd om ook wat game servers te kunnen draaien (met name voor familie/vrienden) naast mijn eigen gehobby. En ik wil nog wat expansion options te hebben, want ik hoop dat deze server ook weer 7+ jaar mee gaat. Daarbij vond ik het wel een leuke challenge om zo laag mogelijk te komen, maar wel nog flink wat power te hebben. Komende van een server die eerst 50 idle had en het nu echt niet meer kon trekken, nogal duur werd om lang aan te hebben staan, vond ik 20W al best goed en was de rest meer hobby dan eis
De server bestaat uit het volgend:

#	Category	Product	Prijs	Subtotaal
1	Processors	AMD Ryzen 7 5700G Boxed	€ 185,-	€ 185,-
1	Barebones	ASRock DeskMeet X300	€ 199,-	€ 199,-
1	Geheugen intern	Corsair Vengeance LPX CMK16GX4M2B3200C16	€ 39,99	€ 39,99
1	Solid state drives	WD Blue SN570 1TB	€ 53,90	€ 53,90
			Totaal	€ 477,89

Toen ik hem in december gebouwd heb had hij in Proxmox een idle verbruik van ongeveer 16 watt. Ik heb er nu 11 LXC containers op draaien, waarvan 1'tje docker is met nog eens 4 docker containers. De meeste containers zijn wel request oriented dus niet veel constant op de achtergrond. En ik heb een VM met Home Assistant. Het verbruik zit nu net onder de 18 watt als ik de game servers uit zet en met de powersave CPU governer (met een Shelly PM2, tussen de 17,6 en 17,9, vergelijkbaar met de metingen van mijn oude WSE LVM 210, maar dan te zien in Home Assistant). Natuurlijk zonder toetsbord en muis, met console blank aan, maar wel met ethernet.

Er was nog wel een optimalisatie waar ik goed naar aan het kijken was, de DeskMeet heeft standaard een full-size 500W ATX PSU met maar een 80+ Bronze certificering (klein beetje overkill want als ik een stress test doe kom nog bijna niet bij de 100W ). En als ik de tests zie die gedaan zijn, ga ik er vanuit dat deze PSU niet heel bijster goed is bij <40 Watt. De Ryzen is toch 'maar' 65 Watt TDP, en er zijn nog geen plannen voor een losse GPU. Ik heb nog wat kleinere PSU's liggen waarmee ik wou testen, maar het MB in de X300 heeft een 8pin CPU connector en de PSU maar 4pins dus dat heb ik niet meteen gedaan.
Volgens Voeding advies en informatie topic - Deel 34 zou dat goed moeten gaan. Dus dat ga ik binnenkort een keertje proberen (of levert dat wel problemen op volgens jullie?).
Ik denk dat het voor mij namelijk ook wel zin zou hebben om er bv dan een PicoPSU met een 4pins CPU connector aan te schaffen en te gebruiken ipv van de ATX PSU.
Als er nog iemand tips heeft om AMD een beetje te temmen zonder al te veel performance in te leveren zijn die welkom want dit is nog allemaal best nieuw voor mij (ik heb de OC boost al bijgesteld, memory spanning & clock snelheid vast gezet zonder XMP, powertop --autotune, niet te veel VM en eigenlijk alles containers).

Powertop wakeup count is ongeveer 900, ryzen monitor (ipv van powertop, want die gaat maar tot C3) ziet er als volg uit:

code:

https://github.com/hattedsquirrel/ryzen_monitor
 
╭───────────────────────────────────────────────┬────────────────────────────────────────────────╮
│                                     CPU Model │         AMD Ryzen 7 5700G with Radeon Graphics │
│                           Processor Code Name │                                        Cezanne │
│                                         Cores │                                              8 │
│                                     Core CCDs │                                              1 │
│                                 Cores Per CCD │                                              8 │
│                                SMU FW Version │                                       v64.50.0 │
│                                MP1 IF Version │                                            v12 │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯
╭─────────┬────────────┬──────────┬─────────┬──────────┬─────────────┬─────────────┬─────────────╮
│  Core 0 │   Sleeping |  0.027 W | 0.200 V |  27.85 C | C0:   0.2 % | C1:   0.3 % | C6:  99.5 % │
│  Core 1 │   Sleeping |  0.131 W | 0.202 V |  27.73 C | C0:   1.1 % | C1:   1.3 % | C6:  97.6 % │
│  Core 2 │   Sleeping |  0.024 W | 0.200 V |  27.88 C | C0:   0.1 % | C1:   0.1 % | C6:  99.8 % │
│  Core 3 │   Sleeping |  0.032 W | 0.201 V |  27.74 C | C0:   0.3 % | C1:   0.3 % | C6:  99.4 % │
│  Core 4 │   Sleeping |  0.030 W | 0.201 V |  27.92 C | C0:   0.3 % | C1:   0.2 % | C6:  99.5 % │
│  Core 5 │   Sleeping |  0.035 W | 0.202 V |  27.73 C | C0:   0.5 % | C1:   1.0 % | C6:  98.5 % │
│  Core 6 │   Sleeping |  0.022 W | 0.201 V |  27.97 C | C0:   0.6 % | C1:   0.5 % | C6:  98.9 % │
│  Core 7 │   Sleeping |  0.065 W | 0.202 V |  27.80 C | C0:   0.9 % | C1:   0.9 % | C6:  98.2 % │
╰─────────┴────────────┴──────────┴─────────┴──────────┴─────────────┴─────────────┴─────────────╯
╭── Core Statistics (Calculated) ───────────────┬────────────────────────────────────────────────╮
│              Highest Effective Core Frequency │                                        267 MHz │
│                      Highest Core Temperature │                                        27.97 C │
│                          Highest Core Voltage │                                        0.202 V │
│                          Average Core Voltage │                                        0.201 V │
│                              Average Core CC6 │                                        98.92 % │
│                          Total Core Power Sum │                                        0.367 W │
├── Reported by SMU ────────────────────────────┼────────────────────────────────────────────────┤
│                             Peak Core Voltage │                                        0.300 V │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯
╭── Electrical & Thermal Constraints ───────────┬────────────────────────────────────────────────╮
│                              Peak Temperature │                                        29.75 C │
│                               GFX Temperature │                                        28.18 C │
│                         Voltage from Core VRM │               0.927 V |   1.462 V |    63.40 % │
│                                           PPT │               4.755 W |      42 W |    11.32 % │
│                                       PPT APU │               4.755 W |      42 W |    11.32 % │
│                                     TDC Value │               0.716 A |      39 A |     1.84 % │
│                           TDC Value, SoC only │               1.361 A |      40 A |     3.40 % │
│                                           EDC │               0.716 A |      55 A |     1.30 % │
│                                 EDC, SoC only │               5.609 A |      60 A |     9.35 % │
│                                           THM │               28.23 C |      95 C |    29.72 % │
│                                       THM SoC │               28.72 C |      95 C |    30.23 % │
│                                       THM GFX │               28.18 C |      95 C |    29.67 % │
│                                           FIT │                   4   |    2200   |     0.16 % │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯
╭── Memory Interface ───────────────────────────┬────────────────────────────────────────────────╮
│                                  Coupled Mode │                                             ON │
│                        Fabric Clock (Average) │                                        257 MHz │
│                                  Fabric Clock │                                       1067 MHz │
│                                  Uncore Clock │                                       1067 MHz │
│                                  Memory Clock │                                       1067 MHz │
│                                     cLDO_VDDM │                                       0.9027 V │
│                                     cLDO_VDDP │                                       0.7514 V │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯
╭── Graphics Subsystem──────────────────────────┬────────────────────────────────────────────────╮
│                       GFX Voltage | ROC Power │                          0.7388 V |    0.502 W │
│                               GFX Temperature │                                        28.18 C │
│                    GFX Clock Real | Effective │                           400 MHz |      0 MHz │
│                                      GFX Busy │                                         0.00 % │
│                     GFX EDC Limit | Residency │                          70.000 A |     0.00 % │
│                           Display Count | FPS │                                 0 |     0.00   │
│               DGPU Power | Freq Target | Busy │               0.000 W |     0 MHz |     0.00 % │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯
╭── Power Consumption ──────────────────────────┬────────────────────────────────────────────────╮
│                          Total Core Power Sum │                                        0.367 W │
│                               VDDCR_SOC Power │                                        1.620 W │
│                                     ROC Power │                                        0.502 W │
│                                L3 Logic Power │                                        0.064 W │
│                                 L3 VDDM Power │                                        0.028 W │
│                                               │                                                │
│                               VDDIO_MEM Power │                                        1.000 W │
│                           IOD_VDDIO_MEM Power │                                        0.450 W │
│                                 DDR Phy Power │                                        0.522 W │
│                                   VDD18 Power │                                        0.234 W │
│                          CPU Display IO Power │                                        0.000 W │
│                              CPU USB IO Power │                                        0.019 W │
├── Additional Reports ─────────────────────────┼────────────────────────────────────────────────┤
│                              SoC Power (SVI2) │               1.244 V |   1.303 A |    1.620 W │
│                             Core Power (SVI2) │               0.300 V |   0.245 A |    0.256 W │
│                              Core Power (SMU) │                                        0.256 W │
│                            Socket Power (SMU) │                                        3.379 W │
│                           Package Power (SMU) │                                        3.379 W │
╰───────────────────────────────────────────────┴────────────────────────────────────────────────╯

[Raven]

andru123 schreef op zaterdag 8 april 2023 @ 18:45:
@Tebbie kan je zomaar een CPU retourneren?

offtopic:
WKOA, je mag iets zonder opgaaf van reden binnen 2 weken weer terugsturen

[mrmrmr]

@hyperg AMD is niet zo zuinig en het heeft niet zoveel mogelijkheden voor low power. Intel draagt actief bij aan de Linux kernel met low power states, maar van AMD is me dat niet bekend.

Niettemin kun je de tips uit de topic start proberen.

PicoPSU is het meest effectief onder 10W. Op dat punt zitten veel ATX voedingen onder 50% efficientie. Onder ca. 40W is PicoPSU beter dan het overgrote deel van ATX voedingen. Ik weet niet of ASRock een speciale voeding heeft uitgekozen. Het bronze label zegt niets over het verbruik bij minder dan 20W. 80plus meet pas bij 20%, dat is hier al 100W. 80plus is eigenlijk nogal verouderd. Ze zouden bij 2% moeten testen, vind ik. Intel heeft die metriek ook opgenomen in nieuwe ATX specificaties.

De TDP is niet van belang, dat gaat over benodigde koelcapaciteit bij zware belasting. Bij thuisservers is het meestal het idleverbruik dat de grootste impact heeft op het totale aantal kWh per jaar. Jouw server kan zo misschien 2x meer verbruiken dan een zuinigere Intel. Maar het is niet alleen hardware, het is ook software en instellingen.

In het overzichtje zie je bij SoC power het verbruik van het geheugen en het idle verbruik van de processor (package). Dat is samen al 5W. Met een efficientie van 50% zou het verbruik aan de stekker 10W zijn. Dat is exclusief andere onderdelen op het moederbord.

Je zit al in de hoogste cpu C state. De gpu lijkt in slaapstand te staan: nul Watt. Dat is allemaal al zo goed als het kan worden. Wat ik mis is de package C state. Dat hangt vaak samen met ASPM (pcie power management). Wat zegt powertop daarover? Heb je al powertop --auto-tune uitgevoerd? Wat zegt lspci -vv? Output daarvan kun je ergens online zetten.

Edit
Dit vond ik in AMD documentatie:
The processor enters the PC6 state when all of the following are true:
• All cores enter the CC6 state.
• The C-state action field targeted by each core’s C-state request has the C6 Enable bit programmed to indicated entry into PC6 is allowed. See D18F4x118 and D18F4x11C.
• PC6 is supported and enabled as specified by D18F4x1AC[PkgC6Cap] and D18F4x1AC[PkgC6Dis].

Package C state 6 (PC6) is beschikbaar voor een subset van AMD processoren. Daarvoor moeten de cores in core C state 6 (CC6) staan.

[ Voor 14% gewijzigd door mrmrmr op 09-04-2023 20:19 ]

[RobertMe]

Raven schreef op zondag 9 april 2023 @ 17:55:
[...]

offtopic:
WKOA, je mag iets zonder opgaaf van reden binnen 2 weken weer terugsturen

offtopic:
Waarbij ze wel kosten in rekening mogen brengen voor "schade". Een gebruikte CPU, dus "onder de koelpasta" en verbruikte koelpasta op de koeler kun je moeilijk als nieuw verkopen. De winkel is dus wel in hun recht om daarvoor een bedrag in te houden. Of ze dat ook doen is natuurlijk een ander verhaal. En met een computerwinkel zouden ze zo'n geretourneerde CPU natuurlijk in een geassembleerd systeem kunnen zetten.

[Tebbie]

RobertMe schreef op zondag 9 april 2023 @ 18:37:
[...]

offtopic:
Waarbij ze wel kosten in rekening mogen brengen voor "schade". Een gebruikte CPU, dus "onder de koelpasta" en verbruikte koelpasta op de koeler kun je moeilijk als nieuw verkopen. De winkel is dus wel in hun recht om daarvoor een bedrag in te houden. Of ze dat ook doen is natuurlijk een ander verhaal. En met een computerwinkel zouden ze zo'n geretourneerde CPU natuurlijk in een geassembleerd systeem kunnen zetten.

Koeler en pasta zijn in takt. Heb extra koeler gebruikt en losse pasta. Daarna schokngemaakt terug cpu doos. Op kapotte zegel van doosje (duh hoe kan ik hem anders openmaken). Zie je er niets aan.

[Mich]

Tebbie schreef op zondag 9 april 2023 @ 21:28:
[...]


Koeler en pasta zijn in takt. Heb extra koeler gebruikt en losse pasta. Daarna schokngemaakt terug cpu doos. Op kapotte zegel van doosje (duh hoe kan ik hem anders openmaken). Zie je er niets aan.

Kan dus gewoon terug. Ik heb er net nog een gekocht die open was gemaakt en waar de pasta wel van gebruikt was (van de stock koeler). Scheelde weer 15 euro op de 70

[RobertMe]

Mich schreef op maandag 10 april 2023 @ 17:07:
[...]


Kan dus gewoon terug. Ik heb er net nog een gekocht die open was gemaakt en waar de pasta wel van gebruikt was (van de stock koeler). Scheelde weer 15 euro op de 70

Terug kan zeker. Maar die €15 korting (op "tweedehands" vs nieuw) die jij gekregen hebt zal iemand betalen. Grote kans dus dat de originele koper €15 (of meer?) in mindering heeft gekregen op zijn retour. Zeker met wat je altijd leest dat de marges op "doze schuiven" zo extreem laag zijn. Kan mij niet indenken dat de korting die de winkel vrijwel "verplicht" moet geven (waarom zou een klant het volle pond betalen voor een geretourneerd artikel als die er ook een verzegelde doos voor kan krijgen?) niet verrekend in de retour.

[Mich]

RobertMe schreef op maandag 10 april 2023 @ 17:16:
[...]

Terug kan zeker. Maar die €15 korting (op "tweedehands" vs nieuw) die jij gekregen hebt zal iemand betalen. Grote kans dus dat de originele koper €15 (of meer?) in mindering heeft gekregen op zijn retour. Zeker met wat je altijd leest dat de marges op "doze schuiven" zo extreem laag zijn. Kan mij niet indenken dat de korting die de winkel vrijwel "verplicht" moet geven (waarom zou een klant het volle pond betalen voor een geretourneerd artikel als die er ook een verzegelde doos voor kan krijgen?) niet verrekend in de retour.

Ik denk dat dit toch het risico van de winkel is. Volgens de richtlijnen mag je het minimale open maken en/ of gebruiken om het goed te kunnen testen. Dat de koelpasta dus niet meer goed is kon niet anders.

[andru123]

Dit is off topic, en er is een speciale forum voor zulke vragen. Maar om misverstanden te voorkomen: https://www.consuwijzer.n...wanneer-heb-ik-bedenktijd

U mag een verzegelde verpakking niet openmaken. Doet u dit toch? Dan zit u aan de koop vast.

Het kan wel zijn dat je geluk heb en accepteert winkel retour zonder probleem. Maar in het algemeen het is een grijs gebied.

[Mich]

andru123 schreef op maandag 10 april 2023 @ 18:25:
Dit is off topic, en er is een speciale forum voor zulke vragen. Maar om misverstanden te voorkomen: https://www.consuwijzer.n...wanneer-heb-ik-bedenktijd

[...]

Het kan wel zijn dat je geluk heb en accepteert winkel retour zonder probleem. Maar in het algemeen het is een grijs gebied.

Wel heel het stukje dan plakken he Ik vind dat het proberen van een CPU niet perce daar onder valt.

Anyway, het maakt me ook weinig uit. Ik heb zelf de ervaring dat het altijd wel goed komt met iets retouren.

Tijdens de bedenktijd mag u de verpakking openmaken. En u mag het product uitproberen of passen, net als in een normale winkel. Maar u mag niet meer doen dan nodig is om het product te kunnen beoordelen. U mag bijvoorbeeld een broek passen. Maar u mag de broek niet dagen lang dragen en weer terugsturen. Deed u dit toch? En werd het product daardoor minder waard? Dan mag de verkoper de prijs verminderen. Hij moet dit wel eerst tegen u zeggen.
Mag ik de verpakking stukmaken?

Het is de bedoeling dat u de verpakking zo veel mogelijk heel laat. En als u het product terugstuurt, moet u het weer netjes inpakken. Maakt u de verpakking stuk? En was de verpakking makkelijk te openen, zonder het stuk te maken? Dan kan het redelijk zijn dat de verkoper u kosten in rekening brengt.
De verpakking is verzegeld

U mag een verzegelde verpakking niet openmaken. Doet u dit toch? Dan zit u aan de koop vast. Voorbeelden zijn:

producten die niet meer schoon zijn als u ze uitprobeert, zoals een tandenborstel of een scheerapparaat
producten die gevaarlijk kunnen zijn zoals pillen
cd's, dvd's, usb-sticks met software

[TerrorToetje]

Ik heb nog een "PicoPSU-160" liggen en wil hier nog iets leuks mee gaan doen,

Zelf zat ik te denken aan een i5-13600T, met een Kontron moederbord of tweedehands iets in elkaar te flansen. Voornamelijk voor Docker/Plex en wat game servers voor kleine groep vrienden.

wenslijst: Zuinige Server

Tips of Ideen zijn welkom!

[audiojunk]

TerrorToetje schreef op maandag 10 april 2023 @ 21:33:
Ik heb nog een "PicoPSU-160" liggen en wil hier nog iets leuks mee gaan doen,

Zelf zat ik te denken aan een i5-13600T, met een Kontron moederbord of tweedehands iets in elkaar te flansen. Voornamelijk voor Docker/Plex en wat game servers voor kleine groep vrienden.

wenslijst: Zuinige Server

Tips of Ideen zijn welkom!

Ik zou die 13600T laten liggen en gewoon een 13500 halen en spelen met de bios instellingen.
Even zoeken in dit forum op op de post van Mich met zijn B760 moederbord.

[mrmrmr]

@TerrorToetje

Kies beter een Samsung SSD, die kan in een zuinige idle mode te komen, deze WD Black doet dat niet in de Tweakers test.

Een T processor is niet nodig. Je kan ongeveer hetzelfde bereiken met PL1/PL2 BIOS instellingen om het maximale energieverbruik te beperken.

Kijk ook of de BIOS van het moederbord al up to date is voor 13th gen. Momenteel is dat nog niet zo voor de Kontron K3843-B (BIOS 2.x is nodig). Dit bord ondersteunt wel 12th gen.

[GoBieN-Be]

edit: al gezegd ..

[ Voor 93% gewijzigd door GoBieN-Be op 11-04-2023 17:02 ]

[TerrorToetje]

mrmrmr schreef op dinsdag 11 april 2023 @ 16:27:
@TerrorToetje

Kies beter een Samsung SSD, die kan in een zuinige idle mode te komen, deze WD Black doet dat niet in de Tweakers test.

Een T processor is niet nodig. Je kan ongeveer hetzelfde bereiken met PL1/PL2 BIOS instellingen om het maximale energieverbruik te beperken.

Kijk ook of de BIOS van het moederbord al up to date is voor 13th gen. Momenteel is dat nog niet zo voor de Kontron K3843-B (BIOS 2.x is nodig). Dit bord ondersteunt wel 12th gen.

Bedankt voor de input!

Zijn er nog alternatieve dan de kontron voor 13th gen?

[andru123]

Alternatieven in welke zin? Mini-micro-ATX met Intel CPU? Kontron is het zuinigst, met 2,5W idle, kijk naar gepinde posts. Het dichtst is Asus B760 met 4,7W, tenzij ik iets mis.

[Mich]

mrmrmr schreef op dinsdag 11 april 2023 @ 16:27:
@TerrorToetje

Kies beter een Samsung SSD, die kan in een zuinige idle mode te komen, deze WD Black doet dat niet in de Tweakers test.

Een T processor is niet nodig. Je kan ongeveer hetzelfde bereiken met PL1/PL2 BIOS instellingen om het maximale energieverbruik te beperken.

Kijk ook of de BIOS van het moederbord al up to date is voor 13th gen. Momenteel is dat nog niet zo voor de Kontron K3843-B (BIOS 2.x is nodig). Dit bord ondersteunt wel 12th gen.

@TerrorToetje

Ik zou ook niet voor de T-variant gaan. In idle gebruik kreeg ik de normale 13500 erg laag. Ik heb ook een Samsung SSD en daarmee zit je gegarandeerd onder de 5W idle.

Ik heb mijn B760 moederbord een andere bestemming gegeven. Ik kon het niet laten ook een Kontron bord te kopen (omdat mijn primaire doel was een zuinige router/home server). De bios update kan elk moment uitkomen. Ik heb voor een leuk prijsje een goedkope Celeron CPU gekocht die nu in het kontron bord zit. Deze cpu gaat hierna naar de B760.

Ik heb nu wel voor elkaar wat ik hebben wil.

Ik heb nu 2 netwerkkaarten erbij geplaatst:
uitvoering: HP Intel Ethernet I210-T1 GbE NIC (E0X95AA)
uitvoering: Delock PCI Express x1 Card 1 x RJ45 2.5 Gigabit LAN RTL8125

En hiermee draai ik 3.1W idle. Met 1 netwerkkaart aangesloten (de onboard). Met de andere porten haal ik ook zo iets. Ik heb nog geen test gedaan met alle 3 de porten tegelijk actief.

Zodra de bios update er is kan ik gaan testen met mijn 13500 erin. Maar ik verwacht soortgelijke metingen.

[pandit]

Ik kijk naar de HP EliteDesk 800 G2 mini PC die rond de 150 euro her en der wordt aangeboden, I5 6500 met 8 gb ram, is best wel zuinig en heel erg betaalbaar,

In dit topic is dit systeem een paar keer aangehaald, maar niet verder op in gegaan.

iemand ervaring met dit systeem als server?

Ik draai nu vanaf 2010 een server op basis van een AMD Athlon II X2 240E en een MSI 785GM-E51 mobo. dus na 13 jaar mag ik wel iets anders?

4 keer zo snel https://www.cpubenchmark....X2-240e-vs-Intel-i5-6500T en zuiniger

[TerrorToetje]

Mich schreef op dinsdag 11 april 2023 @ 20:17:
[...]


@TerrorToetje

Ik zou ook niet voor de T-variant gaan. In idle gebruik kreeg ik de normale 13500 erg laag. Ik heb ook een Samsung SSD en daarmee zit je gegarandeerd onder de 5W idle.

Ik heb mijn B760 moederbord een andere bestemming gegeven. Ik kon het niet laten ook een Kontron bord te kopen (omdat mijn primaire doel was een zuinige router/home server). De bios update kan elk moment uitkomen. Ik heb voor een leuk prijsje een goedkope Celeron CPU gekocht die nu in het kontron bord zit. Deze cpu gaat hierna naar de B760.

Ik heb nu wel voor elkaar wat ik hebben wil.

Ik heb nu 2 netwerkkaarten erbij geplaatst:
uitvoering: HP Intel Ethernet I210-T1 GbE NIC (E0X95AA)
uitvoering: Delock PCI Express x1 Card 1 x RJ45 2.5 Gigabit LAN RTL8125

En hiermee draai ik 3.1W idle. Met 1 netwerkkaart aangesloten (de onboard). Met de andere porten haal ik ook zo iets. Ik heb nog geen test gedaan met alle 3 de porten tegelijk actief.

Zodra de bios update er is kan ik gaan testen met mijn 13500 erin. Maar ik verwacht soortgelijke metingen.

De reden dat ik zelf voor de 13600 ging is omdat de 13500/13400 en daaronder stiekem nog gebruik maken van Alder Lake-dies. Tevens heb Ik de SSD vervanngen voor een Samsung! Echter lijkt dit in praktijk niet veel uit te maken. Heb je de behuizing ook moeten vervangen of heb je op een of andere manier een Kontron ITX bordje weten te krijgen?

[ Voor 4% gewijzigd door TerrorToetje op 11-04-2023 23:24 ]

[Mich]

TerrorToetje schreef op dinsdag 11 april 2023 @ 23:02:
[...]


De reden dat ik zelf voor de 13600 ging is omdat de 13500/13400 en daaronder stiekem nog gebruik maken van Alder Lake-dies. Tevens heb Ik de SSD vervanngen voor een Samsung! Echter lijkt dit in praktijk niet veel uit te maken. Heb je de behuizing ook moeten vervangen of heb je op een of andere manier een Kontron ITX bordje weten te krijgen?

I see. Wist ik eigenlijk niet. Maar missschien verklaart dit nu wel waarom mijn drivers rondom de CPU steeds over alder lake hadden. Het is een overweging. 40 euro meer voor 4 a 5% meer prestatie.

Ik heb nu geen ITX bord meer. Die van Kontron werden een beetje duur en ik had problemen met het PCIe slot. Als je hier een kaart in doet krijg je je PCU niet meer in de lage power states. Dit staat ook in de documentatie van intel. Vandaar dat ik nood gedwongen voor een uATX ben gegaan.

Mocht iemand nog interesse hebben in een kontron k3843-b moederboord. Bij jacob.de versturen ze hem kosteloos op naar Nederland als je met Paypall betaald. De prijs is variabel. Overdag is hij een aantal tientjes duurder dan snachts. Goed opletten dus

[hyperg]

@mrmrmr

Voor zover ik weet draag AMD inderdaad niet even veel bij aan de Linux Kernel als Intel doet. Maar ik zie wel vaker nieuws voorbij komen dat AMD een patch heeft aangedragen. Helemaal stil is het dus ook niet.
Toen ik de keuze aan het maken was, was Intel ook zeker een optie, ik zou vergelijkbare performance krijgen voor een vergelijkbare prijs. Ik had andere posts in dit topic gezien dat AMD niet als laagste zou komen, maar in de buurt van de 10-15W zou niet onmogelijk zijn. Ik heb voorheen eigenlijk altijd Intel gehad, maar ik had de voorkeur om deze keer een AMD te kiezen, als dat redelijk kon.

Ik snap je punt van de voeding met het 80plus label, het was meer een indicator voor mij dat de voeding waarschijnlijk niet bijster goed was. In elk geval niet zo goed als de Corsair RM550x van het topic start bijvoorbeeld.

Ik weet dat bij dat de TDP voor het thermal budget is, en dat het echte vermogen best ver daarboven kan liggen. Ik reken dus met wat marge (ik heb al de boost bijvoorbeeld best wat ingeperkt, maar just in case), maar het is een redelijke baseline leek mij. Als je een CPU hebt met een TDP dat ingesteld is op 200W, moet je PSU ook minimaal 200W kunnen leveren.

Ik weet dat niet alles ASPM enabled heeft, maar ik ben niet verder gekomen (en heel eerlijk, ik was vergeten dat ik dat nog niet helemaal 100% had). Ik heb nog geen pci-force geprobeerd in /etc/default/grub voor Proxmox, maar ik las dat dat soms problemen kan veroorzaken en dan niet meer boot, en ik kan momenteel niet bij de PC gezien ik niet thuis ben, dus dat doe ik straks nog even.

Als het goed is zit er qua 'andere' hardware weinig op het moederbord, dit is namelijk van de x300 'chipset' series, wat eigenlijk gewoon betekend, geen chipset, alles direct op de CPU. Vandaar is er ook geen overvloed aan PCI lanes en SATA poorten bijvoorbeeld.

lspci -vv : https://pastebin.com/hjgm7Bz8

Powertop: https://pastebin.com/kgRaW42i
tunable zijn allemaal good, en the wakeups staan allemaal uit. Helaas gaat powertop niet verder dan C3, zowel voor de package c-state als de CPU c-state. Ik dacht dat mijn powertop nog te outdated was (het is versie 2.11), maar nadat ik powertop 2.15 zelf gecompiled had (want 2.15 staat nog niet in de apt repo) bleef het bij max C3, misschien dat ik nog iets fout heb gedaan bij het builden, maar wel jammer, dus terug gegaan naar de 2.11 van de repository.

Ik heb overigens een crontab ingesteld zodat bij een reboot de volgende dingen gedaan worden

code:

/usr/sbin/powertop --auto-tune
echo "powersave" > /sys/module/pcie_aspm/parameters/policy
echo "powersave" | tee /sys/devices/system/cpu/cpu*/cpufreq/scaling_governor

[heuveltje]

Even checken, of ik een pie in the sky idea heb, of dat dit enigzins werkbaar word.
Ik heb een server met daarop een mobile intel 12th gen cpu met igp en HDMI/DP uitgang
Ik heb daarop nu een linux met enkele dockers erop. en wat services.

Daarnaast heb ik een 1e gen i5 nuc met windows welke gebruikt word als htpc, om wat games op te spelen en mee te browsen. Maar die word te traag

Nu wil ik eigenlijk op die server een soort vm supervisor hosten, die enkele virtuele servers/kan draaien.
Maar daarnaast ook die htpc als een vm kan draaien, waarbij het beeld daarvan over die HDMI gaat (en ook de codec op de gpu draait, en niet alles in cpu moet)

Nu weet ik dat dit kan als ik er ene losse gpu in zet, en die op passtrough doe in Unraid. Maar voor zover ik kan vinden is dit geen optie met IGPU. Is er een alternatief waarbij dit wel kan ?

Het andere plan is om die HTPC direct te installeren op de server, en dan die installatie ook te gebruiken als VM-host voor die servers. Maar gezien het gebruik op die server, en vaker moeten rebooten etc, vind ik dat niet echt een wenselijke oplossing.

Ik ben dus benieuwd of jullie mogelijkheden zien om dit te realiseren ?

[andru123]

mrmrmr schreef op zaterdag 25 maart 2023 @ 18:44:
Als het voldoende onderbouwd is met bijvoorbeeld een correct werkende netwerkkaart, bijvoorbeeld een moderne Intel netwerkchip met voleldig power management op 1 Gbps met/zonder EEE.

Ik heb geen K3843 meer beschikbaar om mee te testen, die borden zijn inmiddels in gebruik.

@Mich kan je dit misschien testen? Ik neem het aan dat je netwerk kaarten zijn modern?
En, de Asus bord al verkocht dan?

[mrmrmr]

@hyperg

Ik zie dat Sandisk Corp Device 501a ASPM niet aan heeft:
LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <8us
ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-

Capabilities: [900 v1] L1 PM Substates
L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1- ASPM_L1.2+ ASPM_L1.1- L1_PM_Substates+
PortCommonModeRestoreTime=32us PortTPowerOnTime=10us
L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1-
T_CommonMode=0us LTR1.2_Threshold=0ns
L1SubCtl2: T_PwrOn=10us

Dit is een beetje vreemd. L1 capability is er niet, en L2 wel. Maar beide staan niet aan.

De Realtek TL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 15) netwerkchip:
LnkCap: Port #0, Speed 2.5GT/s, Width x1, ASPM L0s L1, Exit Latency L0s unlimited, L1 <64us
ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-

ASPM staat uit voor deze chip.

gpu
LnkCap: Port #0, Speed 8GT/s, Width x16, ASPM L0s L1, Exit Latency L0s <64ns, L1 <1us
ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt-

L0s L1 staat aan.

AMD/ATI Audio device 1637, USB 3.1 en HD audio idem.

De package is in de hoogste C state, ook al toont powertop dat niet (powertop is gemaakt door een Intel medewerker). Als iets onbekend is worden typisch de ACPI C states getoond. Dat zijn de gestandaardiseerde C States en dat loopt tot en met C3.

[jeedie]

Afgelopen weken heb ik mijn thuisnetwerk geüpgraded / vervangen / verbeterd. Mogelijk interessant voor de zuinige server lezers om te delen wat ik heb neergezet.

Uitgangspunt is een simpel en voldoende snel huisnetwerk met enige security om risico's rondom diverse IoT devices te beteugelen.

Ik heb glasvezel van Delta met tot heden een Genexis fiber router, wat Deco mesh access points en een stokoude Synology NAS.

Belangrijkste aanleiding om dingen te veranderen zit in de toch wel toenemende zorg rondom de IoT devices. Inmiddels slingeren er zo'n 30 verbonden 'dingen' op mijn netwerk met voor mij elk een onbekend security profiel. Dus wilde ik de stap maken naar een firewall en VLAN's die ook over mijn Wifi netwerk via SSID's bereikbaar gemaakt worden (iets als IoT, Home, Guest etc.)

Na het nodige leeswerk heb ik de volgende setup gemaakt:

- Een CWWK n5105 Chinese mini-PC. Hierop draait Proxmox als host, met een OPNSense VM en een Linux VM voor docker containers, waar onder de TP-Link Omada Controller software
- Een TP-Link 2210P switch met POE en SFP aansluitingen. Hierop komt nu rechtstreeks het glas van Delta binnen, het VLAN wordt alleen doorgezet naar een dedicated NIC op de mini PC (en daarmee op OPNSense als firewall).
- Een extra TP-Link 2008 switch om genoeg poorten te hebben. (deze switches gebruiken relatief weinig stroom, vandaar de keuze voor 2 kleine switches in plaats van 1 grote).
- Twee TP-Link EAP650 Access points die via POE op de switches zijn aangesloten.
- Aan de switches hangen verder diverse kleine devices, 2 domotica hubs, een hue hub, een Sonos Boost en nog een 'oude' Deco Access Point om migratie van devices mogelijk te maken.

Inmiddels draait dit enige dagen en het lijkt stabiel (klop klop). Nu het energieverbruik gaan meten, en de gehele opstelling (mini PC, switches, AP's, domotica hubs, sonos, hue) blijkt zo'n 40W te gebruiken. Aangezien mijn oude NAS alleen al 30W gebruikte lijkt ik in energieverbruik er gunstiger uit te komen.

Performance is prima, ik haal ruim 800Mbps downstream en upstream. Dat is ook meer dan voorheen!

En bottom line, security is toegenomen.

[The_wave]

Men DIY nas/pc is defect. Deze werd de afgelopen jaren sporadisch opgestart wanneer nodig door de hoge energie prijzen. Als alternatief draait er een Dell 7040 micro met een 5TB disk maar kom ik niet mee toe.
De DIY nas draaide Windows Server 2012 op een underclockte/undervolte C2D E8400 op 800MHz, HP P421 raid controller en 8x3TB HP sas disken.

Ik had dus graag een nieuwe energiezuinige NAS gebouwd met een laag idle verbruik. Het doel is data te delen via SMB maar ook NFS.

De laatste dagen al veel informatie opgezocht zowel via dit topic alsook via hardwareluxx en de <30W idle systemen lijst. Of de nieuwe NAS gaat draaien op TrueNAS scale of Unraid ben ik nog niet uit. Wel wil ik daarom rekening houden met ECC ondersteuning in de hardware componenten. Dit laatste maakt het heel moelijk merk ik bij het kiezen van componenten. Ik weet dat ECC niet nodig is maar wil het risico niet lopen.

In de "Die sparsamsten Systeme (<30W Idle)" lijst staat een Intel Core i3-8100T, deze heeft ECC ondersteuning dus lijkt mij wel interresant. Een non-T versie zou ook prima zijn.

Een geschikt moederbord hiervoor vinden (ook met ECC) lijkt niet zo eenvoudig. Op mijn lijst staat een Fujitsu D3644-B maar dit is gewoon nergens te vinden, de Fujitsu borden in het algemeen.
Een alternatief volgens de pricewatch zou een Supermicro X11SSL-F kunnen zijn. Maar of dit energiezuinig gaat zijn vrees ik voor. Deze heeft o.a. IPMI wat opzich al 10W verbruikt...

Ik zoek dus wat tips naar het vinden van een energiezuinige cpu/moederbord combi met ECC.

[mrmrmr]

@The_wave Helaas is RAID nog altijd populairder dan een echte backup. Voor het verbruik is dat ook helaas, want hoe meer draaiende (grote) disks, hoe hoger het verbruik. non-ECC is een verwaarloosbaar risico voor SOHO (Small Office Home Office), het is duur en dan kom je voor de combinatie met zuinigheid op atom-achtige systemen terecht met een trage processor.

De beschikbaarheid van zuinige systemen van oudere generaties is helaas niet zo goed. Ik kom op dit lijstje:

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-9100 Tray	€ 123,96	€ 123,96
1	Moederborden	Fujitsu D3642-B	€ 221,51	€ 221,51
2	Externe harde schijven	Seagate Basic 5TB Zilver	€ 104,03	€ 208,06
1	Processorkoeling	Arctic Alpine 12 Passive	€ 0,-	€ 0,-
1	Geheugen intern	Crucial Basics CB8GU2666	€ 17,79	€ 17,79
1	Voedingen	Mini-box PicoPSU-90 + 84W (Fortron) Adapter Power Kit	€ 78,35	€ 78,35
1	Solid state drives	Samsung 980 1TB	€ 63,39	€ 63,39
			Totaal	€ 713,06

De D3642 heeft geen ECC. De externe 2.5" disks bevatten waarschijnlijk SATA disks. Er is geen behuizing meegenomen. In plaats van de Arctic Alpine 12 passive kun je een semi-passieve kiezen die alleen draait wanneer nodig.

De prijzen van tegenwoordig zijn nogal hoog.

Kijk ook eens onder gepinde posts in dit topic en de vorige of er iets bij zit.

Supermicro komt niet voor onder de zuinige systemen.

[Chiwn]

@jeedie Nice! Ik zit hier zelf ook al een tijdje over te fantaseren. Ik heb een paar vragen voor je.

1. Is het geen probleem dat je maar één NIC op die CWWK n5105 mini-PC als router hebt?
2. Hoe zorg je dat je telefoon/laptop op het ene VLAN nog steeds bij je IoT devices kunnen? Bij mij zou dat denk ik zijn van telefoon naar Home Assistant naar IoT device.
3. Doen je switches nog wat om je router te ontlasten qua bandbreedte? Als je vanaf je laptop op je NAS iets wil, gaat het dan via de OPNSense router?

[Mich]

andru123 schreef op donderdag 13 april 2023 @ 03:45:
[...]

@Mich kan je dit misschien testen? Ik neem het aan dat je netwerk kaarten zijn modern?
En, de Asus bord al verkocht dan?

Ja dat kan ik bevestigen. Want de 2 netwerkkaarten die ik nu gebruik heb ik ook op mijn asus bord getest. Ik ben er nog niet aan toe gekomen om te zien wat er gebeurd als ik ze in het Kontron bord in de PEG port stop.

Asus bord hou ik voor andere doeleinden (nas + backup voor mijn zuinige server)

[Mich]

mrmrmr schreef op donderdag 13 april 2023 @ 04:39:
@hyperg

Ik zie dat Sandisk Corp Device 501a ASPM niet aan heeft:
LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <8us
ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-

Capabilities: [900 v1] L1 PM Substates
L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1- ASPM_L1.2+ ASPM_L1.1- L1_PM_Substates+
PortCommonModeRestoreTime=32us PortTPowerOnTime=10us
L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1-
T_CommonMode=0us LTR1.2_Threshold=0ns
L1SubCtl2: T_PwrOn=10us

Dit is een beetje vreemd. L1 capability is er niet, en L2 wel. Maar beide staan niet aan.

De Realtek TL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 15) netwerkchip:
LnkCap: Port #0, Speed 2.5GT/s, Width x1, ASPM L0s L1, Exit Latency L0s unlimited, L1 <64us
ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-

ASPM staat uit voor deze chip.

gpu
LnkCap: Port #0, Speed 8GT/s, Width x16, ASPM L0s L1, Exit Latency L0s <64ns, L1 <1us
ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt-

L0s L1 staat aan.

AMD/ATI Audio device 1637, USB 3.1 en HD audio idem.

De package is in de hoogste C state, ook al toont powertop dat niet (powertop is gemaakt door een Intel medewerker). Als iets onbekend is worden typisch de ACPI C states getoond. Dat zijn de gestandaardiseerde C States en dat loopt tot en met C3.

Er is een script waarin je kan proberen om ASPM te forceren.

http://ftp.dei.uc.pt/pub/...e/mcgrof/aspm/enable-aspm

regel 46 + 47 moet je zelf invullen:

ENDPOINT="00:1c.5"
ROOT_COMPLEX="00:1c.4"

De endpoint en/of root_complex vindt je via het commando: sudo lspci -tv of staat ook voor de normale output van lspci. Je kan ook 2x hetzelfde adres invullen als je maar 1 device hebt.

Ik heb dit geprobeerd bij een intel NUC en daar kreeg ik het voor elkaar om bij alle devices ASPM aan te zetten en dat bespaarde toen ook wat in het verbruik..
Je moet dit script na elke reboot weer draaien.

[jeedie]

Chiwn schreef op vrijdag 14 april 2023 @ 08:37:
@jeedie Nice! Ik zit hier zelf ook al een tijdje over te fantaseren. Ik heb een paar vragen voor je.

1. Is het geen probleem dat je maar één NIC op die CWWK n5105 mini-PC als router hebt?
2. Hoe zorg je dat je telefoon/laptop op het ene VLAN nog steeds bij je IoT devices kunnen? Bij mij zou dat denk ik zijn van telefoon naar Home Assistant naar IoT device.
3. Doen je switches nog wat om je router te ontlasten qua bandbreedte? Als je vanaf je laptop op je NAS iets wil, gaat het dan via de OPNSense router?

1:
De n5105 heeft 4 NIC's, in de praktijk gebruik ik 1 als toegang tot Proxmox en 2 NIC's voor WAN en LAN via OPNSense. Hierdoor is full-duplex 1Gb nog steeds mogelijk.

2:
OPNSense is een firewall, daarin kan je aangeven welk verkeer tussen VLAN's toegestaan of geblokkeerd moet worden. Kwestie van goed definiëren wat wel en niet mag.

3: De switches handelen zelf het verkeer binnen 1 VLAN af. Moet verkeer tussen VLAN's uitwisseld worden dan gaat het door OPNSense en kan een switch niet voor een offload zorgen> Maar op zich is het niet nodig om de OPNSense als router te ontlasten, hij is bij mij snel genoeg als ik 2 Cores en 8GB RAM toewijs aan de VM.

[mrmrmr]

Mich schreef op vrijdag 14 april 2023 @ 10:03:
[...]


Er is een script waarin je kan proberen om ASPM te forceren.

(..)

Ik heb dit geprobeerd bij een intel NUC en daar kreeg ik het voor elkaar om bij alle devices ASPM aan te zetten en dat bespaarde toen ook wat in het verbruik..
Je moet dit script na elke reboot weer draaien.

Mooie vondst!

Doet de pcie_aspm=force kernel parameter hetzelfde of is er verschil?

[RobertMe]

Semi offtopic?

Ik heb een tijd terug met een OrangePi 3b een offsite backup "op gezet". Eerst met een Seagate 2,5" schijfje (de bekende schijfjes alhier), daarna, november/december 2020, nog eentje erbij gezet in mirror. Nu kwam ik er toevallig afgelopen december achter dat dit systeempje niet meer functioneerde / schijven niet zag. Ding toentertijd wel opgehaald en even snel de schijven op PC aangesloten, maar leken beiden defect. Hele tijd niet naar gekeken tot vandaag. Nu lijkt het dat eentje alsnog functioneert, maar de ander lijkt wel stuk. Bij aansluiten maakt deze wel geluid voor op te spinnen, maar daar houd het ook een beetje bij op. Lijkt niet goed op te spinnen en daarin wat te hakkelen. Qua idee vergelijkbaar met lekker oude HDDs die nog echt geluid maakten, meer van het seeken. Toerental lijkt ook niet stabiel te zijn en meer na een "tik" terug te vallen en weer op te spinnen. Waarbij ik met "tik" niet het geluid bedoel van de oude HDDs waarbij je echt de kop hoorde parkeren.

Ten eerste is deze naar mijn idee ook erg snel "heen gegaan" (max 2 jaar), en van de 3 Seagates die ik "over mijn leven" gekocht heb nummee 2 die mechanisch defect is (ook ooit een 3,5" moeten afschrijven die "nogal veel lawaai produceerde"). Maar, ten tweede, is hier wellicht iemand die weet of het niet alsnog mogelijk is om er weer leven in te krijgen? Zoals duidelijk mag zijn uit het feit dat ik dit 3, 4 maanden heb laten liggen dat het niet heel belangrijk is, en het was dus al puur een backup dus "er staat niks op" (want primaire systeem, mijn server/NAS, is nog in leven). Maar zou toch wel fijn zijn als er weer leven in te blazen is. Al is het maar om als onbetrouwbare derde backup dienst te doen.

[CurlyMo]

@RobertMe Klinkt als een aparte backup strategie wanneer je niet doorhebt wanneer je backup locatie niet meer functioneert.

[RobertMe]

CurlyMo schreef op vrijdag 14 april 2023 @ 14:27:
@RobertMe Klinkt als een aparte backup strategie wanneer je niet doorhebt wanneer je backup locatie niet meer functioneert.

Monitoring ervan was inderdaad handmatig (meestal 1x per maand even inloggen via SSH en kijken of er snapshot van die dag aanwezig zijn) Maarja nu is er geen backup, dus het was al beter dan dat

[project.bobby]

RobertMe schreef op vrijdag 14 april 2023 @ 14:03:
Semi offtopic?

Ik heb een tijd terug met een OrangePi 3b een offsite backup "op gezet". Eerst met een Seagate 2,5" schijfje (de bekende schijfjes alhier), daarna, november/december 2020, nog eentje erbij gezet in mirror. Nu kwam ik er toevallig afgelopen december achter dat dit systeempje niet meer functioneerde / schijven niet zag. Ding toentertijd wel opgehaald en even snel de schijven op PC aangesloten, maar leken beiden defect. Hele tijd niet naar gekeken tot vandaag. Nu lijkt het dat eentje alsnog functioneert, maar de ander lijkt wel stuk. Bij aansluiten maakt deze wel geluid voor op te spinnen, maar daar houd het ook een beetje bij op. Lijkt niet goed op te spinnen en daarin wat te hakkelen. Qua idee vergelijkbaar met lekker oude HDDs die nog echt geluid maakten, meer van het seeken. Toerental lijkt ook niet stabiel te zijn en meer na een "tik" terug te vallen en weer op te spinnen. Waarbij ik met "tik" niet het geluid bedoel van de oude HDDs waarbij je echt de kop hoorde parkeren.

Ten eerste is deze naar mijn idee ook erg snel "heen gegaan" (max 2 jaar), en van de 3 Seagates die ik "over mijn leven" gekocht heb nummee 2 die mechanisch defect is (ook ooit een 3,5" moeten afschrijven die "nogal veel lawaai produceerde"). Maar, ten tweede, is hier wellicht iemand die weet of het niet alsnog mogelijk is om er weer leven in te krijgen? Zoals duidelijk mag zijn uit het feit dat ik dit 3, 4 maanden heb laten liggen dat het niet heel belangrijk is, en het was dus al puur een backup dus "er staat niks op" (want primaire systeem, mijn server/NAS, is nog in leven). Maar zou toch wel fijn zijn als er weer leven in te blazen is. Al is het maar om als onbetrouwbare derde backup dienst te doen.

Je kan proberen head parking bv. uit te zetten via HDAT2 - hier staat een goed filmpje met alle stappen YouTube: Fix Hard Disk Drive APM Head Parking Chirping/Clicking Noise PERMANE...

dat tooltje heeft nog wat meer opties die je kan onderzoeken/ uitproberen.

[mrmrmr]

@RobertMe Je kan SMART waarden posten in het smart topic.

[Tebbie]

Tebbie schreef op zondag 9 april 2023 @ 21:28:
[...]


Koeler en pasta zijn in takt. Heb extra koeler gebruikt en losse pasta. Daarna schokngemaakt terug cpu doos. Op kapotte zegel van doosje (duh hoe kan ik hem anders openmaken). Zie je er niets aan.

Ik krijg netjes van Megekko mijn geld terug. Prima service.

[Blamm]

Zou een PicoPSU 150/160 afdoende zijn om dit systeem te draaien? Het aantal schijven verandert misschien nog iets, ik start met 3, maar wellicht in de toekomst.
De processor zelf heb ik nog niet, het moederbord wel. Kan nog varieren van G4560 tot een i5 uit de 7e generatie, maar dat zal qua power draw niet veel schelen mits beperkt in de bios. Op het moederbord zet ik alles uit wat niet gebruikt wordt uiteraard (geluid, 2e lanport, rgb, etcetera)

Indien een PicoPSU 160 te krap wordt in dit systeem, wat zou een goed alternatief zijn nu de alom geprezen RM550x uit de roulatie is? De overtreffende trap van de RM650x is wel een hoop geld gelijk

#	Category	Product
1	Processors	Intel Core i3 7100 Tray
1	Moederborden	Asus ROG STRIX H270I GAMING
1	Behuizingen	Cooler Master Elite 130
4	Externe harde schijven	Seagate Basic 5TB Zilver
1	Geheugen intern	Corsair Vengeance LPX CMK16GX4M2B3200C16
1	Solid state drives	Crucial MX500 2,5" 1TB
1	Solid state drives	WD Blue SN570 1TB

[ Voor 3% gewijzigd door Blamm op 14-04-2023 16:38 ]

[mrmrmr]

@Blamm Een PicoPSU-160-XT is geen probleem. Deze 2.5" disks verbruiken heel weinig. Gebruik geadviseerd als enkelvoudige disks. Arrays (RAID e.d.) kunnen problemen veroorzaken. Veel beter is een grote 3.5" schijf via USB voor backup te benutten, die hoeft alleen aan wanneer nodig.

Heel grofweg:
<6th gen: vermijden
6/7th gen Fujitsu D3417-B, ASRock DeskMini 110
8/9th gen Fujitsu D3642/3/4, ASRock DeskMini 310, beter power management voor USB
10th gen diverse fabrikanten hebben low power management in deze generatie beter toegepast (zie gepinde posts in dit en vorige topic, links staan in de topic start bovenaan)
12th gen idle verbruik gaat meestal weer omhoog, uitzondering is Kontron K3843-B, de processor verbruikt wel snel meer bij lichte belasting

Vanaf 9th/10th gen moet PL1/PL2 worden beperkt om te voorkomen dat de processor onzuinig wordt. Intel is van het zuinige padje af vanaf 11th gen, onder belasting. Idle is nog steeds redelijk, maar de processor reageert nu fel op elke belasting waardoor het gemiddeld verbruik effectief omhoog gaat. Idle was veel stabieler laag bijvoorbeeld bij Coffee Lake.

[Blamm]

mrmrmr schreef op vrijdag 14 april 2023 @ 17:00:
@Blamm Een PicoPSU-160-XT is geen probleem. Deze 2.5" disks verbruiken heel weinig. Gebruik geadviseerd als enkelvoudige disks. Arrays (RAID e.d.) kunnen problemen veroorzaken. Veel beter is een grote 3.5" schijf via USB voor backup te benutten, die hoeft alleen aan wanneer nodig.

Heel grofweg:
<6th gen: vermijden
6/7th gen Fujitsu D3642/3/4, ASRock DeskMini 110
8/9th gen Fujitsu D3642/3/4, ASRock DeskMini 310, beter power management voor USB
10th gen diverse fabrikanten hebben low power management in deze generatie beter toegepast (zie gepinde posts in dit en vorige topic, links staan in de topic start bovenaan)
12th gen idle verbruik gaat meestal weer omhoog, uitzondering is Kontron K3843-B, de processor verbruikt wel snel meer bij lichte belasting

Vanaf 9th/10th gen moet PL1/PL2 worden beperkt om te voorkomen dat de processor onzuinig wordt. Intel is van het zuinige padje af vanaf 11th gen, onder belasting. Idle is nog steeds redelijk, maar de processor reageert nu fel op elke belasting waardoor het gemiddeld verbruik effectief omhoog gaat. Idle was veel stabieler laag bijvoorbeeld bij Coffee Lake.

Hartelijk dank voor de info, dat was wat ik had gelezen inderdaad en waarom ik op basis van dit bordje wil gaan bouwen. Lang niet optimaal dat begrijp ik, maar het heeft alle aansluitingen die ik zocht (2x m.2 en 4x sata), itx, en was erg goedkoop
De schijven komen in mergefs+snapraid dus geen echte raid inderdaad. Backup gebeurt extern er van en de hdd's zijn puur voor de Plex media, al het andere zit op de SSD's

[TerrorToetje]

Ik heb de UM690 Van Minusforum getest met Windows 11 en een Samsung 980 Pro 2TB en die zit in Windows 11 idle op 8/11w.

review: De ultieme NUC-concurrent met AMD - Ryzen 9 6900HX en USB4 in een min...

Ondertussen zijn er via Minisforum ook tegen verzendkosten heatsinks te verkrijgen, er is plek voor een M.2 NVME en een Sata aansluiting voor een 2.5inch drive.

[RobertMe]

mrmrmr schreef op vrijdag 14 april 2023 @ 16:30:
@RobertMe Je kan SMART waarden posten in het smart topic.

Voorwaarden daarvoor zou natuurlijk zijn dat die iets doet

Met de originele SATA naar USB adapter:

[  167.382431] usb 2-6: new SuperSpeed USB device number 2 using xhci_hcd
[  167.399814] usb 2-6: New USB device found, idVendor=0bc2, idProduct=2343, bcdDevice= 0.00
[  167.399817] usb 2-6: New USB device strings: Mfr=2, Product=3, SerialNumber=1
[  167.399819] usb 2-6: Product: Portable
[  167.399820] usb 2-6: Manufacturer: Seagate
[  167.399821] usb 2-6: SerialNumber: NAAHA39H
[  167.413703] usbcore: registered new interface driver usb-storage
[  167.420493] scsi host6: uas
[  167.420565] usbcore: registered new interface driver uas
[  167.421052] scsi 6:0:0:0: Direct-Access     Seagate  Portable         9300 PQ: 0 ANSI: 6
[  167.422002] sd 6:0:0:0: [sda] Spinning up disk...

En /dev/sda wordt ook niet aangemaakt dus ook niet uit te lezen.

Rechtstreeks op moederbord aangesloten:
Linux noch Windows lijken te booten met de HDD aangesloten. Hot swap enabled, HDD aansluiten na boot Linux, geeft iets aan van controller / HDD die niet reageert en een commreset.

Ewent HDD dock:
* tumbleweed *, alsof dock niet is aangesloten (doet ook pas iets als het ding zelf de HDD leest voor zover ik weet).

Edit:
Standaard controllers / SATA - USB dingen even gewisseld met, voorspelbaar, hetzelfde resultaat. Blijft steken op "Spinning up disk". Maar gezien die rechtstreeks aangesloten en in Ewent dock hetzelfde geluid produceert had ik ook niet verwacht dat het aan de controller lag.

[ Voor 8% gewijzigd door RobertMe op 15-04-2023 10:13 ]

[mrmrmr]

offtopic:
@RobertMe Toont de disk wel in de BIOS? Kun je misschien in de BIOS SMART waarden zien? Of met Seatools? CrystalDiskInfo? Is de disk zichtbaar in Windows Disk Management?

Linux: zie je de disk ergens onder /dev/disk? lsblk?

Dat de disk stuk is, is duidelijk, maar het zou handig zijn om de smartwaarden te kunnen zien.

De SMART waarden van de disk die het wel doet kunnen ook van belang zijn. Dat kan beter worden gepost in Check je SMART.

[Bananenplant]

mrmrmr schreef op donderdag 13 april 2023 @ 22:08:
@The_wave Helaas is RAID nog altijd populairder dan een echte backup. Voor het verbruik is dat ook helaas, want hoe meer draaiende (grote) disks, hoe hoger het verbruik. non-ECC is een verwaarloosbaar risico voor SOHO (Small Office Home Office), het is duur en dan kom je voor de combinatie met zuinigheid op atom-achtige systemen terecht met een trage processor.

De beschikbaarheid van zuinige systemen van oudere generaties is helaas niet zo goed. Ik kom op dit lijstje:

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-9100 Tray	€ 123,96	€ 123,96
1	Moederborden	Fujitsu D3642-B	€ 221,51	€ 221,51
2	Externe harde schijven	Seagate Basic 5TB Zilver	€ 104,03	€ 208,06
1	Processorkoeling	Arctic Alpine 12 Passive	€ 0,-	€ 0,-
1	Geheugen intern	Crucial Basics CB8GU2666	€ 17,79	€ 17,79
1	Voedingen	Mini-box PicoPSU-90 + 84W (Fortron) Adapter Power Kit	€ 78,35	€ 78,35
1	Solid state drives	Samsung 980 1TB	€ 63,39	€ 63,39
			Totaal	€ 713,06

De D3642 heeft geen ECC. De externe 2.5" disks bevatten waarschijnlijk SATA disks. Er is geen behuizing meegenomen. In plaats van de Arctic Alpine 12 passive kun je een semi-passieve kiezen die alleen draait wanneer nodig.

De prijzen van tegenwoordig zijn nogal hoog.

Kijk ook eens onder gepinde posts in dit topic en de vorige of er iets bij zit.

Supermicro komt niet voor onder de zuinige systemen.

Het lijkt erop dat mijn HPE Microserver Gen10 met daarop TrueNAS Core aan het doodgaan is. Ik ben nu bezig om mijn pool te repareren en te checken of the disks nog goed zijn. Zijn er nog dingen die je zou aanpassen aan dit lijstje in het geval van een tweetal 3.5" HDD's? Qua voeding bijvoorbeeld?

Het zou lekker gemakkelijk zijn om een Gen10+ microserver te kopen, maar dat is niet goedkoop ofzo ...

[mrmrmr]

@Bananenplant

Welke disks zijn dat precies (merk & typecode)?

[Bananenplant]

mrmrmr schreef op zondag 16 april 2023 @ 12:06:
@Bananenplant

Welke disks zijn dat precies (merk & typecode)?

WD Red 4TB. Bij falen wordt een disk vervangen door iets vergelijkbaars.

[mrmrmr]

@Bananenplant WD40EFAX verbruikt in idle 3,1W. Twee disks verbruiken dus 6,2W constant. Het verbruik tijdens opstarten is 21W per stuk, 42W als ze tegelijk de verbruikspiek zouden bereiken.

Deze voeding levert maximaal 84W. Er blijft dan in het slechtste geval 42W over voor de processor en moederbord. 50W zou beter zijn.

Bij een tarief van € 3 per Watt zijn de kosten over een periode van 5 jaar € 131,40. De operationele kosten zijn dus hoog en vergelijkbaar met de aanschafwaarde. Het ziet er niet naar uit dat energie goedkoper gaat worden.

De zuinigste opslag is SSD of 2.5" disks. Daarna komt een héél lange tijd niets en dan pas komen 3.5" disks. Het verbruik per TB is van belang.

Als je bijvoorbeeld 18TB opslag nodig hebt, dan zou de Toshiba MG09 18TB een keuze kunnen zijn. Die is snel en groot, het verbruik is 4,16W (2,31W per 10TB). Ter vergelijking: het verbruik van de Seagate 2.5" 5TB is slechts 0,85W (1,7W per 10 TB).

De voeding vergroten is "pijnlijk" want een grotere voeding is weer wat minder zuinig. Op eigen risico zou je een PicoPSU-90 met 120W Leicke adapter kunnen kiezen. Of een PicoPSU-160XT met 120W adapter.

Als ik de disks als afzonderlijke eenheden (niet in mirror) worden gebruikt zou je kunnen kiezen voor 2.5" disks. Als je 3.5" in mirror gebruikt kun je beter de huidige disks toepassen voor externe backup via USB naar een SATA station (bijvoorbeeld Sharkoon QuickPort). Dat bespaart energie omdat de disk maar tijdelijk draait. Operationeel kun je dan een SSD of 2.5" HDD toepassen.

[wrapper83]

@mrmrmr ,

Ja het is wikken en wegen met alles bij elkaar. ben nu al redelijk met een built bezig, zie onderstaande lijst.
Heb ook zitten twijvelen wel of niet een SFX of een PicoPSU. maar gezien de dubiueze kwaliteit van de Pico en compleetheid in cables, ga ik toch voor een 300 watt. ik deze kast kunnen dan 2x 3,5" en ga ik van mijn Qnap TS 251+ overstappen (loopt nu op xpenology DSM 7.1, met een andere DOM module)...

We zit ik nu hard te twijvelen welke OS ik ga gebruiken gezien mijn moederboard geen ECC ondersteund valt Truenas scale helaas al af, dus het wordt weer een xpenology via proxmox of Unraid, met VM's erin...

#	Category	Product
1	Processors	Intel Core i3 10100T	€ 80,00	€ 80,00
1	Moederborden	Asrock H510m-itx-ac	€ 117,00	€ 117,00
1	Behuizingen	Ffractal design era itx zilver	€ 50,00	€ 50,00
2	Externe harde schijven	WD red 4TB	€ 0	€ 0
1	Geheugen intern	G.Skill Aegis F4-3200C16D-16GIS	€ 35,00	€ 35.00
1	CPU fan	scythe-shuriken	€ 20,00	€ 20.00
1	Solid state drives	Crucial MX500 2,5" 1TB	€ 0	€ 0

[/quote]

[ Voor 17% gewijzigd door wrapper83 op 16-04-2023 14:11 ]

[Bananenplant]

mrmrmr schreef op zondag 16 april 2023 @ 12:57:
Als ik de disks als afzonderlijke eenheden (niet in mirror) worden gebruikt zou je kunnen kiezen voor 2.5" disks.

Waarom 2.5" HDD niet in mirror? De redundantie + foutcorrectie van OpenZFS vind ik het wel waard namelijk. Ik vind verder dat je best een goed punt hebt over stroomgebruik. Ik ga erover nadenken .

[RobertMe]

Bananenplant schreef op zondag 16 april 2023 @ 14:37:
[...]


Waarom 2.5" HDD niet in mirror? De redundantie + foutcorrectie van OpenZFS vind ik het wel waard namelijk. Ik vind verder dat je best een goed punt hebt over stroomgebruik. Ik ga erover nadenken .

De 2,5" modellen zijn met SMR die qua performance minder tot zeer slecht zijn (als je teveel data in een keer wilt schrijven, vooral random, zijn ze verschrikkelijk traag tot het idee dat er echt niks meer gebeurt). Bij traditionele RAID kan dat effect vaker optreden, tot het punt dat de RAID controller door de traagheid denkt dat de HDD(s) dood is/zijn en de controller ze helemaal er uit gooit wegens "kapot".

ZFS kan er echter wel beter mee overweg en heeft een paar jaar terug ook nog aanpassingen gedaan om beter met SMR om te gaan. Dit in de vorm van sequential scrub & resilver. Waardoor de random IO bij een resilver dus vrijwel afwezig is.

[mrmrmr]

Veel 3.5" disks zijn ook SMR. WD hield dat lange tijd voor zich en er ontstond een internetopstootje over.

De vertraging bij 2.5" zie je als je een complete disk sector voor sector kopieert ergens halverwege. In de praktijk als enkelvoudige disk is geen merkbaar verschil met een andere schijf. Ook niet bij een 1TB download. SMR disks hebben typisch een grote cache.

Saillant is dat RAID als systeem nogal storingsgevoelig is. Als oplossing voor een probleem haal je een ander probleem binnen. Troubleshooten is soms moeilijk tot onmogelijk met gegevensverlies tot gevolg. Dat hoeft niet als je maar zo nu en dan een backup maakt. Die backup heb je sowieso nodig, want RAID is geen backup. Het is economischer om dan niet die extra disks aan te schaffen, maar in plaats daarvan een USB3 backupopslag.

RAID-achtigen (hardware of software) verminderen de opslagcapaciteit als er meer dan nodig schijven draaiende worden gehouden en ze zorgen daardoor voor een flink hoger verbruik, vooral bij 3.5" HDD's. RAID controllers verbruiken daarboven ook nog eens veel. Ze kunnen ook package C state problemen veroorzaken waardoor het verbruik nog meer toeneemt. Het is niet geschikt voor een zuinige (thuis)server.

Het vergt wat omdenken: een andere manier van werken.

[GoBieN-Be]

RAID is dan ook geen back-up maar een systeem dat bedoeld is om ervoor te zorgen dat je niet moet restoren van back-up. Alles restoren van back-ups, is naar gelang de gebruikte methode ook uren tot dagen werk.

Ik gebruik geen RAID meer, maar ik gebruik nu enkel nog SSD's.

[mrmrmr]

@wrapper83

Ja het is wikken en wegen met alles bij elkaar. ben nu al redelijk met een built bezig, zie onderstaande lijst.
Heb ook zitten twijvelen wel of niet een SFX of een PicoPSU. maar gezien de dubiueze kwaliteit van de Pico en compleetheid in cables, ga ik toch voor een 300 watt. ik deze kast kunnen dan 2x 3,5" en ga ik van mijn Qnap TS 251+ overstappen (loopt nu op xpenology DSM 7.1, met een andere DOM module)...

We zit ik nu hard te twijvelen welke OS ik ga gebruiken gezien mijn moederboard geen ECC ondersteund valt Truenas scale helaas al af, dus het wordt weer een xpenology via proxmox of Unraid, met VM's erin...

De kwaliteit van MiniBox PicoPSU is zonder meer goed. Overigens, de focus die we zelf leggen op dit deel is overdreven. Het echte werk gebeurt in de adapter. Die maakt van wissenstroom gelijkstroom en verlaagt de spanning naar 12V.

Kies geen namaak PicoPSU omdat dit vrijwel altijd tot veel minder goede prestaties leidt. Van ontwerp tot fabrikaat zijn die niet zomaar te vertrouwen.

Bij hoge stroom is het aan te raden een DIN of Molex Mini Fit Jr connector te gebruiken. Ik gebruik zelf Molex Mini Fit Jr die een goed contact maakt. Dat is dezelfde stekker als de processor.

Een moederbord maakt zelf voor diverse onderdelen al diverse spanningen aan. De tendens is dat het beter kan worden verplaatst naar het moederbord omdat die weet hoeveel vermogen er nodig is en het beter kan beheren dan een niet communicerende ATX voeding. Intel heeft ATX12VO daarvoor gespecifieerd, maar een deel van de moederbordfabrikanten wilden er niet aan. Nochtans is dat de manier die A-merk fabrikanten zoals HP, Dell, Fujitsu al jaren gebruiken om zuinige professionele computers te maken voor op de werkplek. Zij passen vaak een 11 of 12V voeding toe die zelf geen voorzieningen heeft voor 3,3V en 5V. Dat wordt op het moederbord aangemaakt.

DDR5 heeft bijvoorbeeld eigen power management waar dat voorheen gebeurde op het moederbord.

Een 300W ATX voeding, zelfs SFX, is waarschijnlijk niet zo zuinig op het interessante gebied van nul tot 50W. 80Plus zegt niets over de zuinigheid onder 20%. Dat is 60W bij een 300W voeding. Vaak loopt de efficientie hard omlaag als het gevraagde vermogen afneemt. Dat is precies waarom PicoPSU (eigenlijk dus de adapter) zo goed werkt, die houden de efficientie nog lang hoog, en soms tot op een paar Watt belasting.

[GoBieN-Be]

Chiwn schreef op vrijdag 14 april 2023 @ 08:37:
@jeedie Nice! Ik zit hier zelf ook al een tijdje over te fantaseren. Ik heb een paar vragen voor je.

Ik heb ook een aparte VLAN voor mijn IOT apparaten.
Mijn Home Assistant heeft 2 NIC's, 1 in mijn gewone VLAN en 1 in het IOT VLAN.
Je moet ze wel goed configureren in HomeAssistant.

[Bananenplant]

mrmrmr schreef op zondag 16 april 2023 @ 17:32:
Het vergt wat omdenken: een andere manier van werken.

Ik zie mirroring met OpenZFS niet als back-up, maar als instrument om verlies van data door corruptie te voorkomen, iets dat bij stijgende leeftijd van componenten vroeg of laat een ding wordt. Waarbij je de corruptie zich ongemerkt ook in je back-ups kan verspreiden.

Hoe borg je dit in die andere manier van werken?

[mrmrmr]

@Bananenplant

Ik heb nooit sluipende datacorruptie gezien in enkelvoudige SATA disks. De disk heeft checksums om data integriteit te controleren. Je kan de kwaliteit van de disk monitoren via SMART (niet continu, maar 1x per dag) en automatische teruglees of refresh tests.

Ik gebruik zelf image backup voor het OS, full data en incrementeel.

[RobertMe]

Bananenplant schreef op zondag 16 april 2023 @ 18:09:
[...]


Ik zie mirroring met OpenZFS niet als back-up, maar als instrument om verlies van data door corruptie te voorkomen, iets dat bij stijgende leeftijd van componenten vroeg of laat een ding wordt. Waarbij je de corruptie zich ongemerkt ook in je back-ups kan verspreiden.

Hoe borg je dit in die andere manier van werken?

Je kunt natuurlijk ook ZFS zonder mirror gebruiken? Dan heb je nog steeds steeds de checksumming van ZFS die bv tegen bitrot/bitflips beschermd. Alleen zal zonder mirror de fout alleen geconstateerd worden, met mirror (of RAIDZ) kan die hersteld worden. Maar zonder mirror/RAIDZ kun je bestand nog steeds overschrijven uit een backup en is het ook hersteld.

[GoBieN-Be]

Zoek maar eens op bitrot.

[avion]

hyperg schreef op zondag 9 april 2023 @ 17:52:
Hallo allemaal, ik volg het topic al een tijd en heb er ook veel gebruik van gemaakt voor het samen stellen van mijn eigen server'tje. Ik heb het een tijdje terug besteld en heb er nu wat services op draaien en ik wou graag wat terug bijdragen.

De server is wel niet de meest zuinig of kleine server in dit topic, maar ik heb dit gebouwd om ook wat game servers te kunnen draaien (met name voor familie/vrienden) naast mijn eigen gehobby. En ik wil nog wat expansion options te hebben, want ik hoop dat deze server ook weer 7+ jaar mee gaat. Daarbij vond ik het wel een leuke challenge om zo laag mogelijk te komen, maar wel nog flink wat power te hebben. Komende van een server die eerst 50 idle had en het nu echt niet meer kon trekken, nogal duur werd om lang aan te hebben staan, vond ik 20W al best goed en was de rest meer hobby dan eis
De server bestaat uit het volgend:

#	Category	Product	Prijs	Subtotaal
1	Processors	AMD Ryzen 7 5700G Boxed	€ 185,-	€ 185,-
1	Barebones	ASRock DeskMeet X300	€ 199,-	€ 199,-
1	Geheugen intern	Corsair Vengeance LPX CMK16GX4M2B3200C16	€ 39,99	€ 39,99
1	Solid state drives	WD Blue SN570 1TB	€ 53,90	€ 53,90
			Totaal	€ 477,89

Toen ik hem in december gebouwd heb had hij in Proxmox een idle verbruik van ongeveer 16 watt. Ik heb er nu 11 LXC containers op draaien, waarvan 1'tje docker is met nog eens 4 docker containers. De meeste containers zijn wel request oriented dus niet veel constant op de achtergrond. En ik heb een VM met Home Assistant. Het verbruik zit nu net onder de 18 watt als ik de game servers uit zet en met de powersave CPU governer (met een Shelly PM2, tussen de 17,6 en 17,9, vergelijkbaar met de metingen van mijn oude WSE LVM 210, maar dan te zien in Home Assistant). Natuurlijk zonder toetsbord en muis, met console blank aan, maar wel met ethernet.

Er was nog wel een optimalisatie waar ik goed naar aan het kijken was, de DeskMeet heeft standaard een full-size 500W ATX PSU met maar een 80+ Bronze certificering (klein beetje overkill want als ik een stress test doe kom nog bijna niet bij de 100W ). En als ik de tests zie die gedaan zijn, ga ik er vanuit dat deze PSU niet heel bijster goed is bij <40 Watt. De Ryzen is toch 'maar' 65 Watt TDP, en er zijn nog geen plannen voor een losse GPU. Ik heb nog wat kleinere PSU's liggen waarmee ik wou testen, maar het MB in de X300 heeft een 8pin CPU connector en de PSU maar 4pins dus dat heb ik niet meteen gedaan.
Volgens Voeding advies en informatie topic - Deel 34 zou dat goed moeten gaan. Dus dat ga ik binnenkort een keertje proberen (of levert dat wel problemen op volgens jullie?).
Ik denk dat het voor mij namelijk ook wel zin zou hebben om er bv dan een PicoPSU met een 4pins CPU connector aan te schaffen en te gebruiken ipv van de ATX PSU.
Als er nog iemand tips heeft om AMD een beetje te temmen zonder al te veel performance in te leveren zijn die welkom want dit is nog allemaal best nieuw voor mij (ik heb de OC boost al bijgesteld, memory spanning & clock snelheid vast gezet zonder XMP, powertop --autotune, niet te veel VM en eigenlijk alles containers).

Powertop wakeup count is ongeveer 900, ryzen monitor (ipv van powertop, want die gaat maar tot C3) ziet er als volg uit:

Ik overweeg om een server te bouwen die vergelijkbaar is met degene die jij hebt gebouwd. Heb jij al nagedacht over de mogelijkheid om een NAS toe te voegen aan jouw homelab? Op dit moment ben ik aan het overwegen om de desktop als enige server te gebruiken, inclusief NAS-functionaliteit. Maar ik vraag me af of het beter zou zijn om een aparte NAS te gebruiken, aangezien ik niet zeker weet wat uiteindelijk zuiniger zou zijn. Het is echter wel zo dat de desktop momenteel krap is qua ruimte, waardoor 3.5 inch HDD's geen optie zijn.

Kortom, ben benieuwd of jij al hebt nagedacht hierover

[Mastermind--]

Is er een mede tweaker die in zijn build een PCI kaart gebruikt voor zijn SATA drives? In mijn plan zou ik daar gebruik van willen maken om de hele host controller aan een Unraid VM te hangen in Proxmox. Dan zijn de drives direct beschikbaar in plaats van via VirtIO passthrough. Beter voor spindown en SMART.

Ben benieuwd of ik nog ergens rekening mee moet houden, het systeem moet zeer energiezuinig blijven. Geen idee of er op die PCI kaarten verschil zit in verbruik en energiezuinige opties / features.

[mrmrmr]

@Mastermind-- Je bedoelt PCIe (PCI Express) kaarten? Hard disk controllers zijn veel onzuiniger dan die van Intel in de chipset. Kijk hier en hier voor verbruiksgegevens. Ik raad het gebruik van controllers af omdat het op zichzelf niet zuinig is en package c-state problemen kan veroorzaken wat weer een aantal Watts kan toevoegen. Het is een mogelijke oplossing een moederbord te gebruiken die alle SATA aanstuurt via de chipset. Tegenwoordig is het vaak maximaal 4x SATA. Voorheen was het 6x SATA. 8x SATA kan met sommige Intel chipsets, maar de meeste borden hebben een extra ASMedia of JMicron chip aan bord met bijbehorend extra verbruik voor 2 extra SATA. Dergelijke borden kunnen ook behoorlijk veel verbruiken omdat ze niet ontworpen zijn voor zuinigheid.

Controllers voor SAS en uit tweedehands uit servers zijn doorgaans grootverbruikers.

Goedkope controllers verdelen de bandbreedte over meer kanalen, dat is waarschijnlijk niet wat je wilt. Het is niet altijd duidelijk aangegeven.

De beste oplossing is misschien het aantal disks terugbrengen. Als het om veel data gaat, vervangen met bijvoorbeeld Toshiba MG09 18TB disks, die zijn groot, snel en niet duur. De oude disks kunnen worden gebruikt voor backup.

[Hans1990]

mrmrmr schreef op zondag 16 april 2023 @ 18:27:
@Bananenplant

Ik heb nooit sluipende datacorruptie gezien in enkelvoudige SATA disks. De disk heeft checksums om data integriteit te controleren. Je kan de kwaliteit van de disk monitoren via SMART (niet continu, maar 1x per dag) en automatische teruglees of refresh tests.

Ik gebruik zelf image backup voor het OS, full data en incrementeel.

Niet geheel correct. Schijven slaan geen CRCs op. De schijf slaat wel extra ECC data om de payload daadwerkelijk te kunnen teruglezen. Moderne TLC/QLC FLASH of magnetische schijven zijn al lang geen perfecte informatie dragers meer. Een error rate van 1 op de honderd bits (of veel meer) op het fysieke medium is niet ongewoon. Het gebruik van ECC is dus par of the course om een sector normaal terug te lezen.

Een schijf kan extra ECC bits opnemen mocht de sector (of lees/schrijfkop) nog verder verslechteren over loop van tijd. Zowel magnetische en solid state dragers doen dit, bedoeld voor achteruitgang over dagen tot jaren. Dit zou de sector leesbaar moeten houden, en indien de schijf dat vroeg genoeg opmerkt, kans te bieden om die sector te realloceren naar spare regions. Een scrub zoals ZFS dat doet, garandeert dat elke sector periodiek wordt gecheckt en biedt mogelijk zo'n realloc te laten plaatsvinden voordat het te laat wordt (en bovendien garandeert ook continuiteit omdat zo'n realloc event, met bijbehorende timeouts, niet plaatsvind als de gebruiker de data wilt raadplegen).
Als een sector echt onleesbaar is, zal een normale schijf blijven herproberen. Error rates zijn onderhevig aan ruis, dus vaker samplen kan in theorie daartegen helpen. Een TLER schijf zal eerder staken en aan de RAID controller terug geven dat een sector onleesbaar was en hersteld moet worden. Blind NAS schijven zoals WD Red's etc. los draaien is dan niet aan te raden.

"Bitrot" is in princiepe wel een bug in de harde schijf, waarin het data adhv ECC denkt hersteld te hebben maar dat niet het geval blijkt te zijn. Echter een ECC code heeft ook nog een soort residual error rate. Dus nouja.. "bug": de error rate van HDD schijven staat in de informatiebladen immers niet op 0, maar op iets van 10E-14 bits oid (1 op de 100TBit) . Dat klinkt vrij laag, maar als een schijf een workload van 300TB/jaar mag hebben, dan mag die schijf 120 fouten maken gedurende zijn (verwachte) levensduur van 5 jaar. Volledig binnen spec.

Nu terugkomend op jouw quote: ik stond afgelopen jaar op het punt om mijn NAS te migreren naar unRAID met z'n veel flexiblere (en energie zuinigere) disk indeling. Ik was van mening dat bitrot spijkers op laag water zoeken was, en dat een ZFS array overkill is voor thuisgebruik.
Totdat ergens in afgelopen najaar een van mijn WD Red 4TB (CMR) schijven uit de ZFS array werden gegooid. Er bleken een handvol sector niet uit te lezen te zijn (timeout), en ZFS had ongeveer 1MB aan data moeten herstellen in de array. Omdat ik niet van overtuigd was dat deze schijf stuk is, had ik de schijf opnieuw in de pool op laten nemen en laten resilveren (gelukkig slechts minuten werk voor de paar GB aan delta die in tussentijd had geaccumuleerd).

De volgende scrubs gaven geen read errors meer. Falende schijf? Kabel of geheugen glitch? De schijf short/long self-tests waren OK (platter + lees/schijfkop OK?). De andere schijven waren ook OK (geheugen OK?). Sindsdien is er niets meer gebeurd (kabel OK?). Op die 1 schijf, geeft de SMART data nog steeds '7' aan op raw read error rate. Realloc events etc. is allemaal 0. Ik gis dan toch echt op bitrot. Deze schijf draait al zo'n 5 jaar en er staat aardig wat data dat niet actief bewerkt wordt (onderdeel van 3-2-1 backup regime), dus als er iets gaat rotten dan zal dat het wel zijn.

Ik ben dus blij met ZFS omdat die checksums bijhoud over de data (in geval de disk geen read error had gegeven), en dat ik een RAID opstelling draai om stille corruptie van mijn data te voorkomen. Ik weet dat allemaal erg anecdotisch is, maar het is voor mij een geluk bij een ongeluk dat dit gebeurde net voordat ik m'n array wilde migreren naar unRAID zijn flexibelere storage pools. AFAIK afhankelijk van het FS wat je gebruikt, heb je daar geen bescherming tegen silent data corruption, en is ook maar net hoe de TLER error afhandeilng is geimplementeerd of een paar kapotte sectoren goed wordt afgevangen.
In theorie heeft unRAID wel een parity disk om dat te doen, maar ik heb er verder geen ervaringen mee hoe robuust dat zaakje is geimplementeerd. Ik houd het iig voorlopig bij ZFS. Meerdere schijven tegelijk draaiende is inderdaad niet zuinig, maar wel robuust. En uiteindelijk draai ik thuis een server om kopzorgen te besparen, en zie ik het niet zo zitten om m'n data over tal van losse disks zelf te moeten managen. Daarvoor heb ik immers een NAS/server.

[/2cents]

[Bananenplant]

Hans1990 schreef op maandag 17 april 2023 @ 09:50:
[...]

Meerdere schijven tegelijk draaiende is inderdaad niet zuinig, maar wel robuust. En uiteindelijk draai ik thuis een server om kopzorgen te besparen, en zie ik het niet zo zitten om m'n data over tal van losse disks zelf te moeten managen. Daarvoor heb ik immers een NAS/server.

[/2cents]

Zo zit ik er ook een beetje in. En met een overbemeten PV op het dak en een terugleververgoeding van 11.5 cent/kWh drukt dat de kosten wel voor pakweg de helft van de tijd.

Dat neemt niet weg dat ik verder wel degelijk interesse in een zuinige server heb. Maar de voordelen van redundantie vind ik het wel waard .

[Mars Warrior]

Ik ben weer een paar stappen verder met het inrichten van mijn nieuwe server en het uitfaseren van 2 bestaande servers

Het resultaat is een stuk beter dan ik had verwacht. Behalve dat de nieuwe server in veel taken ca 8x sneller is, doet deze zijn/haar werk blijkbaar een stuk efficiënter, want de daling in continue verbruik is een stuk groter dan ik had verwacht.

De grootste boosdoener was voorheen CrashPlan, maar die doet zijn werk nu in een paar uur en verbruikt ca 4-16Wh, afhankelijk van wat gedaan moet worden. Dat is op jaarbasis dus een paar euro!

Afgaande op een fase van mijn slimme meter (dankzij DSMR Reader) was het laagste verbruik:

• 3 servers ingeschakeld (2x oud, 1x nieuw): 97W
• 1 server uit (Intel 3570K met DH77 mobo): 62W. Verschil 35W
• 2de server uit (Fujitsu Esprimo Q520): 48W. Verschil 14W, totaal 49W!

Op dagbasis is dit ca 1.2k Wh en op jaarbasis 430 kWh. Met de huidige prijs van €0,40 / kWh is dat een leuke bonus van €170. Bij gelijkblijvende prijzen is de besparing in verbruik over 10 jaar ruim meer dan de nieuwprijs van de server. Die was ca €1.000.

Het verbruik van de nieuwe server uit het stopcontact op dit moment is beetje gokken, want het display van mijn oude Energy Monitor 3000 is uitgevallen

Wat ik wel weet is, is het CPU Package Power verbruik. En dat is nog steeds rond de 1,5W

• Links zie je het effect van vergeten uit te loggen uit Ubuntu Desktop en je scherm uitzetten. Daar kan Ubuntu in iedere geval niet tegen. Het flippert tussen 2W en 8W.
• Na uitloggen is het verbruik rond de 2W.
• Er zijn een paar containers die iets geks doen rond middernacht. Als ik die ff een schop geef dan is dat verbruik weg, en daalt het naar ca 1,3W CPU Package Power.

Voorheen was het idle verbruik uit het stopcontact 4-5W zonder 3x 2.5" schijven. Dat zal dus nu met alles aangesloten en actief ergens tussen de 5 en 10W zitten.



De 30 containers zijn nu bijna allemaal in gebruik. Wie weet kan ik onder de 2W kan blijven.

Optimalisaties hebben tot nu toe ca 3-5W aan continue / gemiddeld verbruik gescheeld. Niet schokkend, maar alle kleine beetjes helpen.

Het verplaatsen bijv. van een "achtergrondtaak" als Crashplan Pro naar de 4 E-cores @2.5Ghz verminderde het totale Wh verbruik per backup van Crashplan met ca 40%.

Het verplaatsen van AdGuard naar de E-cores gaf een verschil van ca 200mW. Niet veel, maar het was een kleine moeite om het verbruik door ca 26.000 DNS aanvragen per dag iets te reduceren

Als je goed kijkt in onderstaand figuur dan zie je vanaf 18:55 een lager verbruik



En een voorbeeld van Crasplan afgelopen nacht:
Ca 2W meerverbruik tussen 5:00u en 6:15u. En ca 4W meerverbruik tussen 6:15u en 6:45u.
Dat is totaal (1,25 * 2) + (0,5 * 4) = 4,5Wh.

[mrmrmr]

@Hans1990 Ik ben uitsluitend tegen het laten draaien van extra drives vanwege het gebrek aan zuinigheid. Gebruik van checksums vind ik persoonlijk prima, dat neemt nauwelijks ruimte in beslag.

[mrmrmr]

@Mars Warrior Goed om te zien dat optimaliseren van de software en instellingen zijn vruchten afwerpt.

[Mars Warrior]

mrmrmr schreef op maandag 17 april 2023 @ 13:36:
@Mars Warrior Goed om te zien dat optimaliseren van de software en instellingen zijn vruchten afwerpt.

Yep. En dat allemaal dankzij het feit dat ik die RAPL registers ben tegengekomen met al die energie testen.
Deze info (micro Joule register) icm Telegraf en het simpele InfluxDB (qua dashboarding) heeft me perfect inzicht gegeven in het package power gebruik. Veel fijner dan zo'n flipperende energiemeter waar je sowieso geen trends en kleine verschillen op kunt zien.

InfluxDB heeft wat nukken: je kunt in de laatste versie dus niet "Name this Cell" wijzigen, en bij onderstaand histogram kan ik de y-as niet in procenten zetten. Ach ja... Als ik echt meer wil kan ik er altijd nog een Grafana container bijdoen

Maar zo'n histogram (in verschillende kleuren door de vele herstarts) laat dus wel zien wat de meest voorkomende "CPU Package Power" waardes zijn: ik zit dus het meeste rond de 2W.

Omdat Telegraf om de 10 seconden de Joules uitleest en "omzet" naar gemiddeld Wattage zie ik natuurlijk niet de echte pieken: het is een gemiddelde over die 10 seconden.

Moraal van onderstaand histogram is toch wel dat het een zuinige server is

[RobertMe]

Mars Warrior schreef op maandag 17 april 2023 @ 18:22:
InfluxDB heeft wat nukken: je kunt in de laatste versie dus niet "Name this Cell" wijzigen

Ik heb daar ook een tijdje naar zitten zoeken. Maar als je de widget edit (of bij toevoegen) staat er bovenaan in het edit scherm ook "Name this cell", en dat is gewoon een input veld dat door de styling helemaal niet opvalt als zijnde input.

Welke Telegraf input gebruik je voor het CPU verhaal?

[Mars Warrior]

RobertMe schreef op maandag 17 april 2023 @ 18:47:
[...]

Ik heb daar ook een tijdje naar zitten zoeken. Maar als je de widget edit (of bij toevoegen) staat er bovenaan in het edit scherm ook "Name this cell", en dat is gewoon een input veld dat door de styling helemaal niet opvalt als zijnde input.

Krijg nou wat! Je hebt gelijk. Totaal niet gezien. Voorheen kon je het veldje zelf editten door deze te selecteren. Ook niet duidelijk, maar dat werkte perfect…

Kiek nou
(Heb nu maar de monitorkabel eruit getrokken. Wordt simpel van dat geflipper van Ubuntu Desktop)

Welke Telegraf input gebruik je voor het CPU verhaal?

De Intel Powerstat plugin.

[Bananenplant]

D-Three schreef op woensdag 9 februari 2022 @ 12:42:
[...]

Zelf haal ik dezelfde waarden als jou met een i3-8100, ASRock Rack C246 WSI, 1 NVMeSSD, 1 x 2,5" en 1x 3,5" drive en nog 3 fans.

Heb jij deze setup nog? Ik was benieuwd met wat voor voeding je dit doet namelijk.

[D-Three]

Bananenplant schreef op dinsdag 18 april 2023 @ 09:40:
[...]


Heb jij deze setup nog? Ik was benieuwd met wat voor voeding je dit doet namelijk.

Neen, intussen heb ik een upgrade/downgrade uitgevoerd, afhankelijk van hoe je het bekijkt

De vraag van de voeding kan ik wel beantwoorden. Dat moederbord heeft een aansluiting waarop je rechtstreeks een 12V voeding kan aansluiten. Daarvoor gebruikte ik een Leicke adapter: D-Three in "Het grote zuinige server topic - deel 2"

Die voeding gebruik ik trouwens nog steeds voor mijn huidige setup.

[Bojan023]

Mijn server bestaat uit een D3643-H, Pentium Gold G5400, Pico+Leicke, 2x SSD, 3x 5TB 2.5 en LAUNCHXL-CC1352P als Zigbee dongle (lspci -vv is hieronder te vinden). Ik ben mij bewust van problematiek van de Kingston SSD, deze wordt op termijn vervangen. Server draaitt op 14W idle (gemeten met een TP-LINK HS110). Dat valt toch behoorlijk tegen voor dit bord gegeven dit topic, maar met de hoeveelheid services die ik draai lag dit een beetje in mijn lijn der verwachting. Uiteraard wordt powertop periodiek gedraaid en logging poog ik tot een minimum te beperken. Maar ik denk dat er nog rek in zit.

Zeker n.a.v. de winsten die @Mars Warrior heeft behaald met 30 actieve containers ben ik geïnspireerd om binnenkort zelf eens een slag te slaan, want ook met zo'n berg containers kán het dus wel. Kun je eens een aantal containers noemen die je draait? Draai je zaken zoals Zigbee2MQTT, Nextcloud en Homeassistant?

Mij vielen twee zaken op:
- Mijn vermoeden is dat de dongle die ik voor Zigbee gebruik ervoor zorgt dat de CPU package niet in een lage C-state komt (zie de powertop uitdraai hieronder), vermoedelijk door de USB-controller. Unpluggen laat het verbruik met 2-3W zakken namelijk. Heeft iemand een andere ontvanger voor Zigbee aan zijn server hangen die een dergelijk verbruik ziet? Strikt genomen is dit een development bordje, dus het zou zomaar kunnen dat deze onnodig veel verbruikt door allerlei andere aanwezige zaken.

- 700 wakeups/s wordt vermeldt door powertop. Ik kan geen referentiekader vinden, is dat veel? Hoe is te achterhalen waar deze door veroorzaakt worden? Powertop geeft weinig zinnigs aan..

Wie zou hier wat licht op kunnen schijnen?

powertop:

code:

                Usage       Events/s    Category       Description
              2.2 ms/s     195.9        Timer          tick_sched_timer
              5.8 ms/s     102.1        Timer          hrtimer_wakeup
              0.9 ms/s      48.4        Process        [PID 1899] /usr/bin/dockerd -H fd:// --containerd=/run/containerd/containerd.sock
            448.3 µs/s      24.5        Process        [PID 14] [rcu_sched]
            105.1 µs/s      14.7        kWork          psi_avgs_work
            131.0 µs/s      10.7        Process        [PID 70275] runc

powertop:

code:

           Pkg(HW)  |            Core(HW) |            CPU(OS) 0   CPU(OS) 2
                    |                     | C0 active   1.5%        1.0%
                    |                     | POLL        0.0%    0.0 ms  0.0%    0.0 ms
                    |                     | C1          0.3%    0.1 ms  0.1%    0.1 ms
C2 (pc2)   45.8%    |                     |
C3 (pc3)    0.5%    | C3 (cc3)    0.1%    | C3          0.1%    0.2 ms  0.1%    0.1 ms
C6 (pc6)   37.6%    | C6 (cc6)    1.9%    | C6          1.4%    0.6 ms  1.2%    0.6 ms
C7 (pc7)    0.0%    | C7 (cc7)   89.0%    | C7s         0.0%    1.5 ms  0.1%    1.9 ms
C8 (pc8)    0.0%    |                     | C8         18.5%    2.6 ms 19.3%    2.7 ms
C9 (pc9)    0.0%    |                     | C9          0.0%    2.1 ms  0.1%    2.3 ms
C10 (pc10)  0.0%    |                     |
                    |                     | C10        75.2%   11.0 ms 74.9%   13.3 ms
                    |                     | C1E         1.0%    0.2 ms  1.2%    0.4 ms

                    |            Core(HW) |            CPU(OS) 1   CPU(OS) 3
                    |                     | C0 active   1.0%        1.3%
                    |                     | POLL        0.0%    0.0 ms  0.0%    0.0 ms
                    |                     | C1          0.2%    0.1 ms  0.3%    0.1 ms
                    |                     |
                    | C3 (cc3)    0.2%    | C3          0.1%    0.2 ms  0.2%    0.2 ms
                    | C6 (cc6)    2.2%    | C6          1.8%    0.6 ms  1.5%    0.6 ms
                    | C7 (cc7)   87.2%    | C7s         0.1%    1.4 ms  0.1%    1.8 ms
                    |                     | C8         23.6%    2.5 ms 21.8%    2.7 ms
                    |                     | C9          0.1%    4.2 ms  0.5%    4.1 ms
                    |                     |
                    |                     | C10        70.1%    9.4 ms 69.6%   11.3 ms
                    |                     | C1E         1.0%    0.2 ms  2.9%    0.4 ms

                    |             GPU     |
                    |                     |
                    | Powered On  0.0%    |
                    | RC6       100.0%    |
                    | RC6p        0.0%    |
                    | RC6pp       0.0%    |
                    |                     |
                    |                     |
                    |                     |
                    |                     |
                    |                     |
                    |                     |
                    |                     |

lspci -vv:

code:

00:00.0 Host bridge: Intel Corporation Device 3e0f (rev 07)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Device 124a
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx-
    Status: Cap+ 66MHz- UDF- FastB2B+ ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort+ >SERR- <PERR- INTx-
    Latency: 0
    Capabilities: [e0] Vendor Specific Information: Len=10 <?>
    Kernel driver in use: skl_uncore
    Kernel modules: ie31200_edac

00:02.0 VGA compatible controller: Intel Corporation CoffeeLake-S GT1 [UHD Graphics 610] (prog-if 00 [VGA controller])
    DeviceName: Onboard - Video
    Subsystem: Fujitsu Technology Solutions CoffeeLake-S GT1 [UHD Graphics 610]
    Control: I/O+ Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0, Cache Line Size: 64 bytes
    Interrupt: pin A routed to IRQ 131
    Region 0: Memory at a0000000 (64-bit, non-prefetchable) [size=16M]
    Region 2: Memory at 90000000 (64-bit, prefetchable) [size=256M]
    Region 4: I/O ports at 3000 [size=64]
    Expansion ROM at 000c0000 [virtual] [disabled] [size=128K]
    Capabilities: [40] Vendor Specific Information: Len=0c <?>
    Capabilities: [70] Express (v2) Root Complex Integrated Endpoint, MSI 00
        DevCap: MaxPayload 128 bytes, PhantFunc 0
            ExtTag- RBE+ FLReset+
        DevCtl: CorrErr- NonFatalErr- FatalErr- UnsupReq-
            RlxdOrd- ExtTag- PhantFunc- AuxPwr- NoSnoop- FLReset-
            MaxPayload 128 bytes, MaxReadReq 128 bytes
        DevSta: CorrErr- NonFatalErr- FatalErr- UnsupReq- AuxPwr- TransPend-
        DevCap2: Completion Timeout: Not Supported, TimeoutDis- NROPrPrP- LTR-
             10BitTagComp- 10BitTagReq- OBFF Not Supported, ExtFmt- EETLPPrefix-
             EmergencyPowerReduction Not Supported, EmergencyPowerReductionInit-
             FRS-
             AtomicOpsCap: 32bit- 64bit- 128bitCAS-
        DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis- LTR- OBFF Disabled,
             AtomicOpsCtl: ReqEn-
    Capabilities: [ac] MSI: Enable+ Count=1/1 Maskable- 64bit-
        Address: fee00018  Data: 0000
    Capabilities: [d0] Power Management version 2
        Flags: PMEClk- DSI+ D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)
        Status: D3 NoSoftRst- PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [100 v1] Process Address Space ID (PASID)
        PASIDCap: Exec- Priv-, Max PASID Width: 14
        PASIDCtl: Enable- Exec- Priv-
    Capabilities: [200 v1] Address Translation Service (ATS)
        ATSCap: Invalidate Queue Depth: 00
        ATSCtl: Enable-, Smallest Translation Unit: 00
    Capabilities: [300 v1] Page Request Interface (PRI)
        PRICtl: Enable- Reset-
        PRISta: RF- UPRGI- Stopped+
        Page Request Capacity: 00008000, Page Request Allocation: 00000000
    Kernel driver in use: i915
    Kernel modules: i915

00:12.0 Signal processing controller: Intel Corporation Cannon Lake PCH Thermal Controller (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH Thermal Controller
    Control: I/O- Mem+ BusMaster- SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx-
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Interrupt: pin A routed to IRQ 16
    Region 0: Memory at a123d000 (64-bit, non-prefetchable) [size=4K]
    Capabilities: [50] Power Management version 3
        Flags: PMEClk- DSI+ D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [80] MSI: Enable- Count=1/1 Maskable- 64bit-
        Address: 00000000  Data: 0000
    Kernel driver in use: intel_pch_thermal
    Kernel modules: intel_pch_thermal

00:14.0 USB controller: Intel Corporation Cannon Lake PCH USB 3.1 xHCI Host Controller (rev 10) (prog-if 30 [XHCI])
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH USB 3.1 xHCI Host Controller
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B+ ParErr- DEVSEL=medium >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0
    Interrupt: pin A routed to IRQ 123
    Region 0: Memory at a1220000 (64-bit, non-prefetchable) [size=64K]
    Capabilities: [70] Power Management version 2
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=375mA PME(D0-,D1-,D2-,D3hot+,D3cold+)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [80] MSI: Enable+ Count=1/8 Maskable- 64bit+
        Address: 00000000fee00238  Data: 0000
    Capabilities: [90] Vendor Specific Information: Len=14 <?>
    Kernel driver in use: xhci_hcd
    Kernel modules: xhci_pci

00:14.2 RAM memory: Intel Corporation Cannon Lake PCH Shared SRAM (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH Shared SRAM
    Control: I/O- Mem- BusMaster- SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx-
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Region 0: Memory at a1236000 (64-bit, non-prefetchable) [disabled] [size=8K]
    Region 2: Memory at a123c000 (64-bit, non-prefetchable) [disabled] [size=4K]
    Capabilities: [80] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-

00:16.0 Communication controller: Intel Corporation Cannon Lake PCH HECI Controller (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH HECI Controller
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0
    Interrupt: pin A routed to IRQ 132
    Region 0: Memory at a123b000 (64-bit, non-prefetchable) [size=4K]
    Capabilities: [50] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot+,D3cold-)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [8c] MSI: Enable+ Count=1/1 Maskable- 64bit+
        Address: 00000000fee00338  Data: 0000
    Capabilities: [a4] Vendor Specific Information: Len=14 <?>
    Kernel driver in use: mei_me
    Kernel modules: mei_me

00:17.0 SATA controller: Intel Corporation Cannon Lake PCH SATA AHCI Controller (rev 10) (prog-if 01 [AHCI 1.0])
    DeviceName: Onboard - SATA
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH SATA AHCI Controller
    Control: I/O+ Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz+ UDF- FastB2B+ ParErr- DEVSEL=medium >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0
    Interrupt: pin A routed to IRQ 124
    Region 0: Memory at a1234000 (32-bit, non-prefetchable) [size=8K]
    Region 1: Memory at a123a000 (32-bit, non-prefetchable) [size=256]
    Region 2: I/O ports at 3090 [size=8]
    Region 3: I/O ports at 3080 [size=4]
    Region 4: I/O ports at 3060 [size=32]
    Region 5: Memory at a1239000 (32-bit, non-prefetchable) [size=2K]
    Capabilities: [80] MSI: Enable+ Count=1/1 Maskable- 64bit-
        Address: fee00258  Data: 0000
    Capabilities: [70] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot+,D3cold-)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [a8] SATA HBA v1.0 BAR4 Offset=00000004
    Kernel driver in use: ahci
    Kernel modules: ahci

00:1b.0 PCI bridge: Intel Corporation Cannon Lake PCH PCI Express Root Port #21 (rev f0) (prog-if 00 [Normal decode])
    Control: I/O+ Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0, Cache Line Size: 64 bytes
    Interrupt: pin A routed to IRQ 122
    Bus: primary=00, secondary=01, subordinate=01, sec-latency=0
    I/O behind bridge: [disabled]
    Memory behind bridge: a1100000-a11fffff [size=1M]
    Prefetchable memory behind bridge: [disabled]
    Secondary status: 66MHz- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort+ <SERR- <PERR-
    BridgeCtl: Parity- SERR+ NoISA- VGA- VGA16+ MAbort- >Reset- FastB2B-
        PriDiscTmr- SecDiscTmr- DiscTmrStat- DiscTmrSERREn-
    Capabilities: [40] Express (v2) Root Port (Slot+), MSI 00
        DevCap: MaxPayload 256 bytes, PhantFunc 0
            ExtTag- RBE+
        DevCtl: CorrErr+ NonFatalErr+ FatalErr+ UnsupReq+
            RlxdOrd- ExtTag- PhantFunc- AuxPwr- NoSnoop-
            MaxPayload 256 bytes, MaxReadReq 128 bytes
        DevSta: CorrErr- NonFatalErr- FatalErr- UnsupReq- AuxPwr+ TransPend-
        LnkCap: Port #21, Speed 8GT/s, Width x4, ASPM L0s L1, Exit Latency L0s <1us, L1 <16us
            ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
            ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt-
        LnkSta: Speed 8GT/s (ok), Width x4 (ok)
            TrErr- Train- SlotClk+ DLActive+ BWMgmt+ ABWMgmt-
        SltCap: AttnBtn- PwrCtrl- MRL- AttnInd- PwrInd- HotPlug- Surprise-
            Slot #32, PowerLimit 25.000W; Interlock- NoCompl+
        SltCtl: Enable: AttnBtn- PwrFlt- MRL- PresDet- CmdCplt- HPIrq- LinkChg-
            Control: AttnInd Unknown, PwrInd Unknown, Power- Interlock-
        SltSta: Status: AttnBtn- PowerFlt- MRL- CmdCplt- PresDet+ Interlock-
            Changed: MRL- PresDet- LinkState+
        RootCap: CRSVisible-
        RootCtl: ErrCorrectable- ErrNon-Fatal- ErrFatal- PMEIntEna+ CRSVisible-
        RootSta: PME ReqID 0000, PMEStatus- PMEPending-
        DevCap2: Completion Timeout: Range ABC, TimeoutDis+ NROPrPrP- LTR+
             10BitTagComp- 10BitTagReq- OBFF Not Supported, ExtFmt- EETLPPrefix-
             EmergencyPowerReduction Not Supported, EmergencyPowerReductionInit-
             FRS- LN System CLS Not Supported, TPHComp- ExtTPHComp- ARIFwd+
             AtomicOpsCap: Routing- 32bit- 64bit- 128bitCAS-
        DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis- LTR+ OBFF Disabled, ARIFwd-
             AtomicOpsCtl: ReqEn- EgressBlck-
        LnkCap2: Supported Link Speeds: 2.5-8GT/s, Crosslink- Retimer- 2Retimers- DRS-
        LnkCtl2: Target Link Speed: 8GT/s, EnterCompliance- SpeedDis-
             Transmit Margin: Normal Operating Range, EnterModifiedCompliance- ComplianceSOS-
             Compliance De-emphasis: -6dB
        LnkSta2: Current De-emphasis Level: -3.5dB, EqualizationComplete+ EqualizationPhase1+
             EqualizationPhase2+ EqualizationPhase3+ LinkEqualizationRequest-
             Retimer- 2Retimers- CrosslinkRes: unsupported
    Capabilities: [80] MSI: Enable+ Count=1/1 Maskable- 64bit-
        Address: fee001f8  Data: 0000
    Capabilities: [90] Subsystem: Fujitsu Technology Solutions Cannon Lake PCH PCI Express Root Port
    Capabilities: [a0] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0+,D1-,D2-,D3hot+,D3cold+)
        Status: D0 NoSoftRst- PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [100 v1] Advanced Error Reporting
        UESta:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol-
        UEMsk:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt+ RxOF- MalfTLP- ECRC- UnsupReq- ACSViol-
        UESvrt: DLP+ SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF+ MalfTLP+ ECRC- UnsupReq- ACSViol-
        CESta:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr-
        CEMsk:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr+
        AERCap: First Error Pointer: 00, ECRCGenCap- ECRCGenEn- ECRCChkCap- ECRCChkEn-
            MultHdrRecCap- MultHdrRecEn- TLPPfxPres- HdrLogCap-
        HeaderLog: 00000000 00000000 00000000 00000000
        RootCmd: CERptEn+ NFERptEn+ FERptEn+
        RootSta: CERcvd- MultCERcvd- UERcvd- MultUERcvd-
             FirstFatal- NonFatalMsg- FatalMsg- IntMsg 0
        ErrorSrc: ERR_COR: 0000 ERR_FATAL/NONFATAL: 0000
    Capabilities: [140 v1] Access Control Services
        ACSCap: SrcValid+ TransBlk+ ReqRedir+ CmpltRedir+ UpstreamFwd- EgressCtrl- DirectTrans-
        ACSCtl: SrcValid- TransBlk- ReqRedir- CmpltRedir- UpstreamFwd- EgressCtrl- DirectTrans-
    Capabilities: [150 v1] Precision Time Measurement
        PTMCap: Requester:- Responder:+ Root:+
        PTMClockGranularity: 4ns
        PTMControl: Enabled:+ RootSelected:+
        PTMEffectiveGranularity: Unknown
    Capabilities: [220 v1] Secondary PCI Express
        LnkCtl3: LnkEquIntrruptEn- PerformEqu-
        LaneErrStat: 0
    Capabilities: [250 v1] Downstream Port Containment
        DpcCap: INT Msg #0, RPExt+ PoisonedTLP+ SwTrigger+ RP PIO Log 4, DL_ActiveErr+
        DpcCtl: Trigger:1 Cmpl- INT+ ErrCor- PoisonedTLP- SwTrigger- DL_ActiveErr-
        DpcSta: Trigger- Reason:00 INT- RPBusy- TriggerExt:00 RP PIO ErrPtr:1f
        Source: 0000
    Kernel driver in use: pcieport

00:1f.0 ISA bridge: Intel Corporation Device a308 (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Device 1246
    Control: I/O+ Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx-
    Status: Cap- 66MHz- UDF- FastB2B- ParErr- DEVSEL=medium >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0

00:1f.3 Audio device: Intel Corporation Cannon Lake PCH cAVS (rev 10)
    DeviceName: Onboard - Sound
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH cAVS
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 32, Cache Line Size: 64 bytes
    Interrupt: pin A routed to IRQ 133
    Region 0: Memory at a1230000 (64-bit, non-prefetchable) [size=16K]
    Region 4: Memory at a1000000 (64-bit, non-prefetchable) [size=1M]
    Capabilities: [50] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=55mA PME(D0-,D1-,D2-,D3hot+,D3cold+)
        Status: D3 NoSoftRst+ PME-Enable+ DSel=0 DScale=0 PME-
    Capabilities: [80] Vendor Specific Information: Len=14 <?>
    Capabilities: [60] MSI: Enable+ Count=1/1 Maskable- 64bit+
        Address: 00000000fee00358  Data: 0000
    Kernel driver in use: snd_hda_intel
    Kernel modules: snd_hda_intel, snd_sof_pci_intel_cnl

00:1f.4 SMBus: Intel Corporation Cannon Lake PCH SMBus Controller (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH SMBus Controller
    Control: I/O+ Mem+ BusMaster- SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx-
    Status: Cap- 66MHz- UDF- FastB2B+ ParErr- DEVSEL=medium >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Interrupt: pin A routed to IRQ 16
    Region 0: Memory at a1238000 (64-bit, non-prefetchable) [size=256]
    Region 4: I/O ports at efa0 [size=32]
    Kernel driver in use: i801_smbus
    Kernel modules: i2c_i801

00:1f.5 Serial bus controller: Intel Corporation Cannon Lake PCH SPI Controller (rev 10)
    DeviceName: Onboard - Other
    Subsystem: Fujitsu Technology Solutions Cannon Lake PCH SPI Controller
    Control: I/O- Mem+ BusMaster- SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap- 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Region 0: Memory at fe010000 (32-bit, non-prefetchable) [size=4K]

00:1f.6 Ethernet controller: Intel Corporation Ethernet Connection (7) I219-LM (rev 10)
    DeviceName: Onboard - Ethernet
    Subsystem: Fujitsu Technology Solutions Ethernet Connection (7) I219-LM
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0
    Interrupt: pin A routed to IRQ 130
    Region 0: Memory at a1200000 (32-bit, non-prefetchable) [size=128K]
    Capabilities: [c8] Power Management version 3
        Flags: PMEClk- DSI+ D1- D2- AuxCurrent=0mA PME(D0+,D1-,D2-,D3hot+,D3cold+)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=1 PME-
    Capabilities: [d0] MSI: Enable+ Count=1/1 Maskable- 64bit+
        Address: 00000000fee00318  Data: 0000
    Kernel driver in use: e1000e
    Kernel modules: e1000e

01:00.0 Non-Volatile memory controller: Kingston Technology Company, Inc. A2000 NVMe SSD (rev 03) (prog-if 02 [NVM Express])
    Subsystem: Kingston Technology Company, Inc. A2000 NVMe SSD
    Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0, Cache Line Size: 64 bytes
    Interrupt: pin A routed to IRQ 16
    NUMA node: 0
    Region 0: Memory at a1100000 (64-bit, non-prefetchable) [size=16K]
    Capabilities: [40] Power Management version 3
        Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)
        Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
    Capabilities: [50] MSI: Enable- Count=1/8 Maskable+ 64bit+
        Address: 0000000000000000  Data: 0000
        Masking: 00000000  Pending: 00000000
    Capabilities: [70] Express (v2) Endpoint, MSI 00
        DevCap: MaxPayload 256 bytes, PhantFunc 0, Latency L0s unlimited, L1 unlimited
            ExtTag- AttnBtn- AttnInd- PwrInd- RBE+ FLReset+ SlotPowerLimit 25.000W
        DevCtl: CorrErr+ NonFatalErr+ FatalErr+ UnsupReq+
            RlxdOrd+ ExtTag- PhantFunc- AuxPwr- NoSnoop- FLReset-
            MaxPayload 256 bytes, MaxReadReq 512 bytes
        DevSta: CorrErr- NonFatalErr- FatalErr- UnsupReq- AuxPwr+ TransPend-
        LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <8us
            ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
            ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-
        LnkSta: Speed 8GT/s (ok), Width x4 (ok)
            TrErr- Train- SlotClk+ DLActive- BWMgmt- ABWMgmt-
        DevCap2: Completion Timeout: Range ABCD, TimeoutDis+ NROPrPrP- LTR+
             10BitTagComp- 10BitTagReq- OBFF Not Supported, ExtFmt- EETLPPrefix-
             EmergencyPowerReduction Not Supported, EmergencyPowerReductionInit-
             FRS- TPHComp- ExtTPHComp-
             AtomicOpsCap: 32bit- 64bit- 128bitCAS-
        DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis- LTR+ OBFF Disabled,
             AtomicOpsCtl: ReqEn-
        LnkCap2: Supported Link Speeds: 2.5-8GT/s, Crosslink- Retimer- 2Retimers- DRS-
        LnkCtl2: Target Link Speed: 8GT/s, EnterCompliance- SpeedDis-
             Transmit Margin: Normal Operating Range, EnterModifiedCompliance- ComplianceSOS-
             Compliance De-emphasis: -6dB
        LnkSta2: Current De-emphasis Level: -6dB, EqualizationComplete+ EqualizationPhase1+
             EqualizationPhase2+ EqualizationPhase3+ LinkEqualizationRequest-
             Retimer- 2Retimers- CrosslinkRes: unsupported
    Capabilities: [b0] MSI-X: Enable+ Count=16 Masked-
        Vector table: BAR=0 offset=00002000
        PBA: BAR=0 offset=00002100
    Capabilities: [100 v2] Advanced Error Reporting
        UESta:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol-
        UEMsk:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol-
        UESvrt: DLP+ SDES+ TLP- FCP+ CmpltTO- CmpltAbrt- UnxCmplt- RxOF+ MalfTLP+ ECRC- UnsupReq- ACSViol-
        CESta:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr-
        CEMsk:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr+
        AERCap: First Error Pointer: 00, ECRCGenCap+ ECRCGenEn- ECRCChkCap+ ECRCChkEn-
            MultHdrRecCap- MultHdrRecEn- TLPPfxPres- HdrLogCap-
        HeaderLog: 00000000 00000000 00000000 00000000
    Capabilities: [158 v1] Secondary PCI Express
        LnkCtl3: LnkEquIntrruptEn- PerformEqu-
        LaneErrStat: 0
    Capabilities: [178 v1] Latency Tolerance Reporting
        Max snoop latency: 3145728ns
        Max no snoop latency: 3145728ns
    Capabilities: [180 v1] L1 PM Substates
        L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+
              PortCommonModeRestoreTime=10us PortTPowerOnTime=10us
        L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1-
               T_CommonMode=0us LTR1.2_Threshold=81920ns
        L1SubCtl2: T_PwrOn=10us
    Kernel driver in use: nvme
    Kernel modules: nvme

[Laagheim]

zAo schreef op dinsdag 4 april 2023 @ 12:24:
Heeft iemand ervaring met het gebruik van een Intel N100 CPUs?

Ik wil een router/firewall box die ook wat simpele containers kan draaien. Hierbij ben ik alleen afhankelijk van de avx cpu-instructie. Mijn oog was dan ook op de nieuwe Alder Lakes gevallen, met name deze Topton N100 minipc

Ik heb gisteren de N9N variant binnengekregen (actieve koeling, geheugen niet up te graden maar wel 150 euro goedkoper.) Simpele lxc containers onder proxmox werken prima (alleen de proxmox installer geeft een foutmelding, proxmox eenmaal geïnstalleerd werkt zonder problemen). Over de avx instructie set kan ik verder niets zeggen want voorzover ik weet gebruik ik geen programmas die daar afhankelijk van zijn.

[Jazco2nd]

Geen van de FTP linkjes in de TS doen het nog bij mij.
Linkjes als deze werken wel maar het pad bestaat niet meer op de FTP server. In dat pad staat alleen nog een PDF:
ftp://ftp.ts.fujitsu.com/...ime/D364x-S/BIOS_D364x-S/

Waar kan je tegenwoordig nog BIOS updates of driver of firmware updates vinden voor je D3644-S?

[mrmrmr]

@Bojan023 Onder 40 wakeups is gelijk aan een standaard server installatie (geen GUI) met SSHd.

Ik heb package C state 8 met alleen een extra I211 kaart.

De processor is zo te zien actief met iets. Veel wakeups ontstaan door verouderde of niet goed geprogrammeerde software die voortdurend iets doen. Software zou gebruik moeten maken van waits, niet van polling. Wait = wachten op een gebeurtenis. Poll is kijken of er nog iets nieuws is (de oude methode). Er zijn diverse API's die toegang bieden tot kernel waits. Zoals Microsoft dat ook doet met Windows. Dat is veel efficiënter.

Je kan met trace tools achterhalen wat processen allemaal doen op de achtergrond. Dat is een wereld op zich, dus ik raad je om daar wat over op te zoeken.

Ik zal later nog eens kijken waarin mijn lspci -vvv output verschilt.

@Jazco2nd Ik zal de links aanpassen. Kontron heeft tegenwoordig een gebruiksonvriendelijke HTTP interface op https://ftp.kontron.com/ .

Directe link: https://ftp.kontron.com/m...aa1f1f34cc340&subfolder=/

Heb je echt een S versie? Dat is industrieel. Die vind je onder /Products/Motherboards/Industrial. De gewone versie staat onder /Products/Motherboards/ExtendedLifeCycle.

[ Voor 23% gewijzigd door mrmrmr op 19-04-2023 15:52 ]

[RobertMe]

Waarschijnlijk zijn er hier wel te porren voor dit "experiment": https://dgross.ca/blog/linux-home-server-auto-sleep/ (note: niet van mij).

In het kort Linux in sleep zetten "als deze niks doet" en automatisch ontvaken als iets verbinding maakt. Dit met wake on LAN op basis van unicast (dus iets dat met het IP van het systeem wilt verbinden). In de basis gaat dat goed, zij het dat andere systemen na verloop van tijd de server niet meer vinden, doordat de ARP entry verlopen is en dus niet meer herleid kan worden naar welk MAC adres het verkeer voor het server IP gestuurd moet worden. Daarvoor heeft die zelf een tooltje geschreven? dat vervolgens in de plaats van de server antwoord. Dus een tussenliggend systeem (RPi? Linux based router?) zegt dan "IP adres 192.168.1.100 bevind zich op MAC adres 11:22:33:44:55:66" waarna bv de PC die verbinding wilt maken wel de server kan vinden en dus het echte verkeer die kant op stuurt, waarna de unicast WoL weer netjes zijn werk doet en het systeem ontwaakt uit sleep.

[mrmrmr]

Jazco2nd schreef op woensdag 19 april 2023 @ 15:18:
Geen van de FTP linkjes in de TS doen het nog bij mij.

Browsers ondersteunen geen FTP meer, je hebt een ftp programma nodig om ze te openen.

Ik zal de ftp link verwijderen omdat die geen versleuteling heeft, dat vormt een beveiligingsrisico.

Dit is het overzicht voor de drivers:
https://ftp.kontron.com/m...name=Drivers%5FCFL%2Ehtml

In mijn browser kan ik dat alleen als bestand downloaden. Daarna als bestand openen.

Alle drivers staan hier. Dat is een verzamelplaats allerlei drivers voor verschillende moederborden.