Het grote zuinige server topic - deel 3

[CAPSLOCK2000]

Eerste meting van mijn CWWK N100 4xi266v minipc, gemeten met een eenvoudige meter uit de budgetbak van de hema, ooit, lang gelden.

Out-of-the box in de BIOS, met RAM en SSD en 1 netwerkkabel en draadloos keyboard, maar zonder OS: 8.7W
Na booten Debian: 8.0W
Na draaien powertune --auto-tune: 6.7W
De behuizing is 30 graden celcius.

Na 5 minuten een single thread benchmark draaien (openssl speed) is het verbruik gestegen naar 14W.
Na 15 minuten een 8-multithread benchmark draaien (-multi ligt het verbruik op 22W, ik heb pieken tot 25W gezien.
Het warmste punt van de behuizing is nu 37 graden celcius.

Allemaal gemeten met een veel te goedkope meter om metingen tot achter de komma te doen. Misschien dat later betere metingen volgen maar nu heb ik systemen om te installeren... Dusver ben ik tevreden, de kwaliteit is zoals verwacht (in goede en slechte zin).

[CAPSLOCK2000]

FireDrunk schreef op woensdag 4 oktober 2023 @ 17:17:
Hier staat zelfs dat het ding ook nog een extra M.2 slot voor een WiFi adapter heeft. Dat zijn nog meer lanes

Dat is óf, niet én.

[HotSpot79]

brickmasterj schreef op woensdag 4 oktober 2023 @ 15:38:
[...]

Mijn grootste probleem met die N100 borden is dat er überhaupt maar 1tje is met 2 SATA aansluitingen. Ik ben eigenlijk op zoek naar iets met minstens 3 SATA poorten i.v.m. RAID5/RAIDZ1. Alleen die Asrock non-DC variant van de N100 kan dat omdat ie al 2 SATA heeft en PCIe sloten, maar dan moet je er weer een expansie kaart bij gooien die de helft van het hele bord kost & zuinigheid inperkt.

Iemand een andere goeie oplossing waarbij je WEL in de performance/prijsklasse van die N100 blijft, maar OOK >= 3 SATA ter beschikking hebt?

Ik run een H3+ met een ASM1166 M2 NVME expansie kaartje. Idle rond de 6W (AC gemeten) met een 10-15 tal docker containers. 3x SSD (Samsung 870QVO 8TB), 1x boot SSD (Samsung 980 500GB) en 1x 3.5" WD (101EZAZ 10TB spin down) gevoed vanuit de H3+. Dus opslag genoeg en lekker low power...

[HotSpot79]

RobertMe schreef op woensdag 4 oktober 2023 @ 16:01:
[...]

offtopic:
Vergeet niet dat ook een bond / aggregate van 3 1Gbit/s poorten nog steeds geen 2,5Gbit/s kan leveren. Je hebt dan letterlijk dat: 3x 1Gbit/s. Maar een file transfer die sequentieel over een TCP verbinding gaat gaat dan nog steeds over 1 poort en dus maximaal 1Gbit/s. Bonding doet alleen maar "load balancing" over het aantal poorten, maar dat is dus op basis van de TCP (of UDP) verbinding, en niet willekeurig op basis van losse pakketjes. Hetzelfde als dat je wel meer over de snelweg krijgt door met 3 auto's naast elkaar te rijden. Maar niet met 1 auto ineens 300KM/u mag rijden als er drie rijbanen zijn.

Met SMB v3 multi channel transfers haal je wel hogere snelheden, maar ook daar moeten beide zijden van de 'lijn' dit ondersteuen. Maar natuurlijk geen 3 Gbit/s vanwege het tcpip overhead. Ik ben daarom overgestapt naar 10Gbit/sec omdat dit wel lekker opschiet met het verplaatsen van >20GB files over het fiber netwerk. Daar haal ik netjes de 9.87 GBit/sec.

[mrmrmr]

HotSpot79 schreef op woensdag 4 oktober 2023 @ 19:41:
Ik run een H3+ met een ASM1166 M2 NVME expansie kaartje. Idle rond de 6W (AC gemeten) met een 10-15 tal docker containers. 3x SSD (Samsung 870QVO 8TB), 1x boot SSD (Samsung 980 500GB) en 1x 3.5" WD (101EZAZ 10TB spin down) gevoed vanuit de H3+. Dus opslag genoeg en lekker low power...

Dat is interessant. Welke PCIe kaart is dat precies (merk en typenummer of aankooplink)? Welk H3 type? Waarmee heb je gemeten?

Zou je bij gelegenheid het volgende kunnen meten?:
(1) kaal systeem, USB keyboard/muis, monitor aangesloten in slaapstand, geen storage of andere devices.
(2) met ASM1166 kaart zonder NVMe iets aangesloten
(3) met ASM1166 kaart kaart met 1 NVMe SSD erop

En met powertop kijken of er per configuratie wijzigingen zijn in package C state.

Zie ook de blog van de tester Matt Gadient. Vooral over het aansluitpunt en of pcie door de chipset of cpu wordt voorzien en het verbruik maakt een groot verschil (package C state op een Asus bord).

[HotSpot79]

mrmrmr schreef op woensdag 4 oktober 2023 @ 19:56:
[...]


Dat is interessant. Welke PCIe kaart is dat precies (merk en typenummer of aankooplink)? Welk H3 type? Waarmee heb je gemeten?

Zou je bij gelegenheid het volgende kunnen meten?:
(1) kaal systeem, USB keyboard/muis, monitor aangesloten in slaapstand, geen storage of andere devices.
(2) met ASM1166 kaart zonder NVMe iets aangesloten
(3) met ASM1166 kaart kaart met 1 NVMe SSD erop

En met powertop kijken of er per configuratie wijzigingen zijn in package C state.

Zie ook de blog van de tester Matt Gadient. Vooral over het aansluitpunt en of pcie door de chipset of cpu wordt voorzien en het verbruik maakt een groot verschil (package C state op een Asus bord).

Belangrijk om te weten is dat het ASM1166 M2 kaartje van een recente firmware is voorzien. Blijkbaar zijn er veel (op het oog gelijk lijkende) kaartjes die nog een oude firmware hebben, dan loop je tegen allerlei ASPM en power management problemen aan. Er is wat te vinden over het update van de firmware, maar mijn firmware bleek nieuwer dan de op het internet te vinden versie, dus heb het lekker zo gelaten. Alles werk prima met SSDs, maar met 3.5" HDDs had ik wat problemen ivm spindown/spinup/rebooten van het systeem. Die problemen heb ik niet met de Samsung SSDs.

Gemeten heb ik met een ShellyPlugS met tasmota, waarbij die niet ge-ijkt is.

Idle H3+ met alleen 1 SSD (boot, Samsung 980 500GB) trekt ongeveer 3W (2.5Gb NIC, geen toetsenbord/hdmi ofa andere peripherals).

Met alleen het ASM1166 kaartje komt daar ongeveer 2-3W bij. Met het daadwerkelijk aansluiten van de SSDs zie ik weinig extra verbruik maar als ik ze dan flink aan het werk zet uiteraard wel (uitschieters naar 20-25W)

Draai dietpi (debian bookworm) op het systeem.

Ohja, ik zie dat in idle de C10 state voor ongeveer 45% van de tijd, en de andere tijd in C3.

[FireDrunk]

De SSD's aan het werk zetten zal ook een hoop CPU verbruik geven, niet alleen SSD verbruik.
Verder nette scores! Het is bijna lucratief om mijn Kubernetes cluster te vervangen met H3+ bakjes

[andru123]

CAPSLOCK2000 schreef op woensdag 4 oktober 2023 @ 18:01:
Eerste meting van mijn CWWK N100 4xi266v minipc,
Na draaien powertune --auto-tune: 6.7W

Powertop autotune geeft geen problemen met de ongebruikte 3 poorten? Interessant.
Kan je proberen de ongebruikte 3 poorten naar 10 mbit forceren, scheelt het iets?

[CAPSLOCK2000]

andru123 schreef op donderdag 5 oktober 2023 @ 02:27:
Powertop autotune geeft geen problemen met de ongebruikte 3 poorten? Interessant.

Wat voor problemen?
Als ongebruikte poorten het niet doen dan zou ik dat niet weten, ik gebruik ze immers niet

Ik heb zeker problemen met powertop maar ik weet niet het iets met het netwerk te maken heeft.,
Na het draaien van powertop beginnen er spontaan dingen te Gblokkeren waar ik nog niet helemaal de vinger op kan leggen maar het voelt als een stuk hardware dat niet meer reageert waardoor processen blijven hangen tot de kernel er over begint te klagen. Dat zou best wel eens een nic kunnen zijn. Het systeem wordt snel onbruikbaar waardoor ik nog niet veel debugging heb gedaan.

Ja. Na wat verder zoeken ontdek ik dat dit een bekend probleem is met i266v. Tnx, weet ik in ieder geval waar ik het moet zoeken.

Het lijkt overigens pas te ontstaan als ik powertop een 2e keer draai, nader onderzoek is nodig.

Kan je proberen de ongebruikte 3 poorten naar 10 mbit forceren, scheelt het iets?

Scheelt in wat? Stabiliteit? Nee.
Als je bedoelt in verbruik? Nee, niet dat ik kan zien maar ik betwijfel of mijn meter daar nauwkeurig genoeg voor is.

[ Voor 11% gewijzigd door CAPSLOCK2000 op 05-10-2023 14:05 ]

[andru123]

@CAPSLOCK2000 Scheelt in verbruik.
Bij mijn ene MB de poort naar 10 mbit en EEE zetten verlaagt het verbruik met 1,2W. Bij een andere MB niet. Maar dat met een aangesloten kabel en i225.
Als je wilt met alle 4 ports aangesloten te testen, kan wel de powertop problemen wegnemen, en ook mogelijk het verbruik verlagen (als je de 3 ports naar 10 of 100 mbit zet met EEE)

[Mirabis]

Ik zie wellicht wat vreemds op mijn Kontron bord (K3842-Q)
- Turbo Boost uit (kan namelijk niet booten met het enabled)
- PL1=60W / PL2=89W (default PL1=65)
- Fabrieksaf aan is std. Base freq 1.8 (E) en 2.5 (P) core.
- Fabrieksaf is std. Turbo max freq 3.5 (E) en 4.8 (P) core.
- governer = powersave
- intel_pstate preference = power (powersave)

Queryen van de huidige frequency laat zien dat zowel E als P cores tussen 800 en 2.5 Ghz springen, ondanks dat e-core van 800-1.80Ghz hardware limit rapporteert.

code:

[root@kontron ~]$ cpufreq-info
cpufrequtils 008: cpufreq-info (C) Dominik Brodowski 2004-2009
Report errors and bugs to [e-mail], please.
analyzing CPU 0: t/m 11 (verkort)
  driver: intel_pstate
  CPUs which run at the same hardware frequency: 0
  CPUs which need to have their frequency coordinated by software: 0
  maximum transition latency: 4294.55 ms.
  hardware limits: 800 MHz - 2.50 GHz
  available cpufreq governors: performance, powersave
  current policy: frequency should be within 800 MHz and 2.50 GHz.
                  The governor "powersave" may decide which speed to use
                  within this range.
  current CPU frequency is 800 MHz.
analyzing CPU 12: t/m 19 (verkort)
  driver: intel_pstate
  CPUs which run at the same hardware frequency: 19
  CPUs which need to have their frequency coordinated by software: 19
  maximum transition latency: 4294.55 ms.
  hardware limits: 800 MHz - 1.80 GHz
  available cpufreq governors: performance, powersave
  current policy: frequency should be within 800 MHz and 1.80 GHz.
                  The governor "powersave" may decide which speed to use
                  within this range.
  current CPU frequency is 800 MHz.

Iemand een idee hoe dit kan - of waar ik naar kan kijken?

lspci output

code:

lspci -vv | awk '/ASPM/{print $0}' RS= | grep --color -P '(^[a-z0-9:.]+|ASPM )'
00:06.0 PCI bridge: Intel Corporation 12th Gen Core Processor PCI Express x4 Controller #0 (rev 02) (prog-if 00 [Normal decode])
        LnkCap: Port #5, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <16us
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
00:1a.0 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #25 (rev 11) (prog-if 00 [Normal decode])
        LnkCap: Port #25, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
00:1c.0 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #1 (rev 11) (prog-if 00 [Normal decode])
        LnkCap: Port #1, Speed 8GT/s, Width x1, ASPM L0s L1, Exit Latency L0s <1us, L1 <4us
        LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, Disabled- CommClk-
00:1c.5 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #6 (rev 11) (prog-if 00 [Normal decode])
        LnkCap: Port #6, Speed 8GT/s, Width x1, ASPM L1, Exit Latency L1 <64us
        LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk-
01:00.0 Non-Volatile memory controller: Samsung Electronics Co Ltd NVMe SSD Controller PM9A1/PM9A3/980PRO (prog-if 02 [NVM Express])
        LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <64us
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
02:00.0 Non-Volatile memory controller: Samsung Electronics Co Ltd NVMe SSD Controller PM9A1/PM9A3/980PRO (prog-if 02 [NVM Express])
        LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <64us
        LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
04:00.0 System peripheral: Global Unichip Corp. Coral Edge TPU (prog-if ff)
        LnkCap: Port #1, Speed 5GT/s, Width x1, ASPM L0s L1, Exit Latency L0s <64ns, L1 <1us
        LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk-

kernel options

code:

[root@kontron ~]$ cat /etc/kernel/cmdline
root=ZFS=rpool/ROOT/pve-1 boot=zfs quiet intel_iommu=on iommu=pt consoleblank=15 pcie_aspm=force pcie_port_pm=force pcie_aspm.policy=powersave i915.enable_gvt=1 nohz=on

cpupower reports (verkort)

code:

[root@kontron cpupower_gui.d]$ cpupower-gui co
Applying configuration...
Setting CPU: 0 t/m 11
    Minimum Frequency: 800.0 MHz, Maximum Frequency: 2500.0 MHz
    Governor: Powersave, Online: True

Setting CPU: 12 t/m 19
    Minimum Frequency: 800.0 MHz, Maximum Frequency: 1800.0 MHz
    Governor: Powersave, Online: True

cpufreq-info | grep 'current CPU'                                                                                                                      kontron: Thu Oct  5 15:15:48 2023

  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 800 MHz.
  current CPU frequency is 800 MHz.
  current CPU frequency is 800 MHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 2.50 GHz.
  current CPU frequency is 800 MHz.

[root@kontron cpupower_gui.d]$ lscpu
Architecture:            x86_64
  CPU op-mode(s):        32-bit, 64-bit
  Address sizes:         46 bits physical, 48 bits virtual
  Byte Order:            Little Endian
CPU(s):                  20
  On-line CPU(s) list:   0-19
Vendor ID:               GenuineIntel
  BIOS Vendor ID:        Intel(R) Corporation
  Model name:            13th Gen Intel(R) Core(TM) i5-13500
    BIOS Model name:     13th Gen Intel(R) Core(TM) i5-13500   CPU @ 2.4GHz
    BIOS CPU family:     205
    CPU family:          6
    Model:               191
    Thread(s) per core:  2
    Core(s) per socket:  14
    Socket(s):           1
    Stepping:            2
    CPU(s) scaling MHz:  80%
    CPU max MHz:         2500.0000
    CPU min MHz:         800.0000
    BogoMIPS:            4992.00
    Flags:               fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe syscall nx pdpe1gb rdtscp lm constant_tsc art arch_
                         perfmon pebs bts rep_good nopl xtopology nonstop_tsc cpuid aperfmperf tsc_known_freq pni pclmulqdq dtes64 monitor ds_cpl vmx smx est tm2 ssse3 sdbg fma cx16 xtpr pdcm sse4
                         _1 sse4_2 x2apic movbe popcnt tsc_deadline_timer aes xsave avx f16c rdrand lahf_lm abm 3dnowprefetch cpuid_fault epb ssbd ibrs ibpb stibp ibrs_enhanced tpr_shadow vnmi fle
                         xpriority ept vpid ept_ad fsgsbase tsc_adjust bmi1 avx2 smep bmi2 erms invpcid rdseed adx smap clflushopt clwb intel_pt sha_ni xsaveopt xsavec xgetbv1 xsaves avx_vnni dthe
                         rm arat pln pts hwp hwp_notify hwp_act_window hwp_epp hwp_pkg_req hfi umip pku ospke waitpkg gfni vaes vpclmulqdq tme rdpid movdiri movdir64b fsrm md_clear serialize pconf
                         ig arch_lbr ibt flush_l1d arch_capabilities
Virtualization features:
  Virtualization:        VT-x
Caches (sum of all):
  L1d:                   544 KiB (14 instances)
  L1i:                   704 KiB (14 instances)
  L2:                    11.5 MiB (8 instances)
  L3:                    24 MiB (1 instance)
NUMA:
  NUMA node(s):          1
  NUMA node0 CPU(s):     0-19
Vulnerabilities:
  Gather data sampling:  Not affected
  Itlb multihit:         Not affected
  L1tf:                  Not affected
  Mds:                   Not affected
  Meltdown:              Not affected
  Mmio stale data:       Not affected
  Retbleed:              Not affected
  Spec rstack overflow:  Not affected
  Spec store bypass:     Mitigation; Speculative Store Bypass disabled via prctl
  Spectre v1:            Mitigation; usercopy/swapgs barriers and __user pointer sanitization
  Spectre v2:            Mitigation; Enhanced IBRS, IBPB conditional, RSB filling, PBRSB-eIBRS SW sequence
  Srbds:                 Not affected
  Tsx async abort:       Not affected

[ Voor 35% gewijzigd door Mirabis op 05-10-2023 15:50 . Reden: extra info ]

[mrmrmr]

@Mirabis Je hebt zo te zien een Coral Edge TPU aangesloten.Via een bepaalde USB versie?

Welke kernel versie heb je? Welke BIOS versie?

Als je ergens dmesg output kan uploaden kan er worden meegekeken. Ook de output van powertop kan inzicht geven.

[Mirabis]

mrmrmr schreef op donderdag 5 oktober 2023 @ 19:40:
@Mirabis Je hebt zo te zien een Coral Edge TPU aangesloten.Via een bepaalde USB versie?

Welke kernel versie heb je? Welke BIOS versie?

Als je ergens dmesg output kan uploaden kan er worden meegekeken. Ook de output van powertop kan inzicht geven.

1. Welke kernel versie heb je?

code:

[root@kontron ~]$ uname -a
Linux kontron 6.2.16-15-pve #1 SMP PREEMPT_DYNAMIC PMX 6.2.16-15 (2023-09-28T13:53Z) x86_64 GNU/Linux

2. Welke BIOS versie?

code:

K3842-Q2.R2.6.0

3. Welk moederbord

code:

Kontron K3842-Q2 MB Q670 (Intel,12GEN,DDR5,Micro-AT,DualLAN) (F5110-V189)

4. Powertop output
https://pastebin.com/raw/uMSwdQhD


5. dmesg output
https://pastebin.com/raw/0kEcg3pq

6. overig
Ik heb een M.2 PCIE dual Coral ingeplugd maar het kontron bord ondersteund maar een via die weg dus dual is het niet. Daarnaast is het nog niet in gebruik omdat de frigate container daarvoor nog uitstaat. Verbruik met de 12 LXCs aan schommelt tussen 9-16W.

2x NVME volgens een eerdere post op GEN 3 gezet maar ze zijn GEN 4 capable als het goed is.

code:

[    8.255242] pci 0000:01:00.0: 31.504 Gb/s available PCIe bandwidth, limited by 8.0 GT/s PCIe x4 link at 0000:00:06.0 (capable of 63.012 Gb/s with 16.0 GT/s PCIe x4 link)
[    8.255242] pci 0000:02:00.0: 31.504 Gb/s available PCIe bandwidth, limited by 8.0 GT/s PCIe x4 link at 0000:00:1a.0 (capable of 63.012 Gb/s with 16.0 GT/s PCIe x4 link)

HomeAssistant staat uit want de homeassistant_supervisor heeft een bug op mijn systeem.

[ Voor 15% gewijzigd door Mirabis op 05-10-2023 21:13 . Reden: toevoeging van disk info ]

[mrmrmr]

Mirabis schreef op donderdag 5 oktober 2023 @ 20:35:
Kontron K3842-Q2 MB Q670 (Intel,12GEN,DDR5,Micro-AT,DualLAN) (F5110-V189)

De 'Q2' is de versie met 2 netwerkpoorten.

Je hebt een 13500 processor.

4. Powertop output

Package C3 valt op, het verbruik ligt daardoor hoger. Powertop geeft niet de echte C states weer van de processorcores, het toont de standaard ACPI (BIOS) states. Dat kan aan de kernel liggen (probeer de laatst beschikbare) of aan powertop 2.15.

Proxmox gebruikt een aangepaste Ubuntu kernel. Kernel 6.5 is aanwezig in Ubuntu 23.10 (momenteel nog beta). Proxmox VE 8.1 bevat die kernel (verwacht Q4 2023).

Ik heb een M.2 PCIE dual Coral ingeplugd maar het kontron bord ondersteund maar een via die weg dus dual is het niet. Daarnaast is het nog niet in gebruik omdat de frigate container daarvoor nog uitstaat. Verbruik met de 12 LXCs aan schommelt tussen 9-16W.

Je hebt een flink gevirtualiseerd systeem met 128 GB RAM en veel virtuele netwerkpoorten. Zonder de Coral zakt het verbruik vermoedelijk. Maar voor zo'n systeem is het verbruik nog best goed.

2x NVME volgens een eerdere post op GEN 3 gezet maar ze zijn GEN 4 capable als het goed is.

code:

[    8.255242] pci 0000:01:00.0: 31.504 Gb/s available PCIe bandwidth, limited by 8.0 GT/s PCIe x4 link at 0000:00:06.0 (capable of 63.012 Gb/s with 16.0 GT/s PCIe x4 link)
[    8.255242] pci 0000:02:00.0: 31.504 Gb/s available PCIe bandwidth, limited by 8.0 GT/s PCIe x4 link at 0000:00:1a.0 (capable of 63.012 Gb/s with 16.0 GT/s PCIe x4 link)

Als dat geen verschil maakt zou het weer terug kunnen zetten.

HomeAssistant staat uit want de homeassistant_supervisor heeft een bug op mijn systeem.

5. dmesg output

Ik zie niets dat duidt op problemen met frequenties of turbo boost. Je kan op een tijdelijke SSD Ubuntu 23.10 beta met kernel 6.5 installeren en zien of dat deze problemen oplost. Als dat niet lukt: Kontron support aanschrijven via de leverancier?

Een andere frequency bug is opgelost in kernel 6.5

dmesg doorgenomen:

i8042: PNP: No PS/2 controller found.
i8042: Probing ports directly.
i8042: Can't read CTR while initializing i8042
i8042: probe of i8042 failed with error -5

Vermoedelijk rapporteert de BIOS de aanwezigheid van een PS/2 controller.

i915 0000:00:02.0: [drm] Finished loading DMC firmware i915/adls_dmc_ver2_01.bin (v2.1)

Alder Lake firmware: Alder Lake S

GuC firmware i915/tgl_guc_70.bin version 70.5.1
i915 0000:00:02.0: [drm] HuC firmware i915/tgl_huc.bin version 7.9.3

GuC staat uit. Huc is actief.

i915 0000:00:02.0: [drm] Unsupported device. GVT-g is disabled
Geen monitor, GVT-g staat uitgeschakeld (pass-through gpu)

Fail/error
cfg80211: Loading compiled-in X.509 certificates for regulatory database
(..)
platform regulatory.0: Direct firmware load for regulatory.db failed with error -2
cfg80211: failed to load regulatory.db

Hier gaat iets niet goed met regulatory firmware en laden van de database met X.509 certificaten.

pcieport 0000:00:1c.0: Refused to change power state from D3hot to D0
pcieport 0000:00:1c.0: pciehp: Slot #0 AttnBtn- PwrCtrl- MRL- AttnInd- PwrInd- HotPlug+ Surprise+ Interlock- NoCompl+ IbPresDis- LLActRep+
pcieport 0000:00:1c.0: pciehp: Cannot get irq -1 for the hotplug controller
fbcon: Taking over console
pcieport 0000:00:1c.0: pciehp: Notification initialization failed (-1)
pcieport 0000:00:1c.5: PME: Signaling with IRQ 124
pcieport 0000:00:1c.5: AER: enabled with IRQ 124
shpchp: Standard Hot Plug PCI Controller Driver version: 0.4

1c.0 is een pcie bridge. Hier wil een onderdeel niet actief (D0) worden van een slaapstand (D3hot).

i2c i2c-0: 4/4 memory slots populated (from DMI)
i2c i2c-0: Memory type 0x22 not supported yet, not instantiating SPD

Dat is een bekende foutmelding over geheugentype 0x22.

nvme 0000:02:00.0: platform quirk: setting simple suspend
nvme 0000:01:00.0: platform quirk: setting simple suspend
nvme nvme0: pci function 0000:02:00.0
nvme nvme1: pci function 0000:01:00.0

Kernel NVMe quirk zet simple suspend aan.

pci 0000:00:06.0: PME# supported from D0 D3hot D3cold
pci 0000:00:14.0: PME# supported from D3hot D3cold
pci 0000:00:16.0: PME# supported from D3hot
pci 0000:00:17.0: PME# supported from D3hot
pci 0000:00:1a.0: PME# supported from D0 D3hot D3cold
pci 0000:00:1c.5: PME# supported from D0 D3hot D3cold
pci 0000:00:1f.3: PME# supported from D3hot D3cold
pci 0000:00:1f.6: PME# supported from D0 D3hot D3cold

pci device power states. D0 ontbreekt bij een aantal.

Kernel command line: initrd=\EFI\proxmox\6.2.16-15-pve\initrd.img-6.2.16-15-pve root=ZFS=rpool/ROOT/pve-1 boot=zfs quiet intel_iommu=on iommu=pt consoleblank=15 pcie_aspm=force pcie_port_pm=force pcie_aspm.policy=powersave i915.enable_gvt=1 nohz=on

De kernel command line forceert pcie_aspm, pcie_port_pm. nohz=on -> dyntick-idle mode dat is denk ik de default. Hierdoor blijft de klok ticks aan in de slaapstand. Je zou off kunnen proberen als de rest van het systeem daarmee kan werken (zo niet: weer terug naar default).

PCI: Using host bridge windows from ACPI; if necessary, use "pci=nocrs" and report a bug

nocrs zou je niet hoeven te gebruiken: "Ignore PCI host bridge windows from ACPI. If you need to use this, please report a bug." Misschien als test eens kijken wat er gebeurt als deze parameter wordt gebruikt.

De dmesg output kun je vergelijken met vergelijkingssoftware zoals WinMerge.

[Ozzie]

Ik heb net een Beelink S12 Pro besteld op ali, voor 150 euro. N100/16gb ram/500gb ssd. Ben benieuwd als die binnenkomt. Mijn huidige thuisserver is mijn oude desktoppc die ik niet meer gebruikte met een o.a. 3570K erin, de N100 zou volgens mij vergelijkbare performance moeten hebben, alleen dan voor 10% van de verbruikte energie.

Hoop alleen dat de 16GB ram voldoende is maar heb gelezen dat er best wel wat mensen gewoon 32GB in hebben gedaan en dat dat ook werkt, dus dat zou fijn zijn.

Ik wil er CoreOS met k3s op draaien. Eventueel als ik hem fijn vind koop ik er nog 1 of 2 bij zodat ik ze in een cluster kan draaien.

[Mars Warrior]

Ozzie schreef op vrijdag 6 oktober 2023 @ 10:07:
Ik wil er CoreOS met k3s op draaien. Eventueel als ik hem fijn vind koop ik er nog 1 of 2 bij zodat ik ze in een cluster kan draaien.

Dat gaat dus geen zuinige server worden, dat besef je dan ook wel toch?

Natuurlijk wel een stuk zuiniger dan die 3570K doordat elke N100 core een stuk minder verbruikt, maar dit systeem zal NOOIT idle zijn.

[CAPSLOCK2000]

Mars Warrior schreef op vrijdag 6 oktober 2023 @ 11:41:
Dat gaat dus geen zuinige server worden, dat besef je dan ook wel toch?

Natuurlijk wel een stuk zuiniger dan die 3570K doordat elke N100 core een stuk minder verbruikt, maar dit systeem zal NOOIT idle zijn.

Stukje beschouwing (geen kritiek) van mijn keuzes:

Dat is een van de redenen waarom ik voor N100 heb gekozen. Mijn servers slapen nooit. Het idle verbruik is een aardige indicatie van wat er mogelijk is, maar dat is niet waar het me om gaat. Voor mij is het typische en het maximum verbruik eigenlijk interessanter.

Die servers zijn mijn hobby en mijn laboratorium en dat laboratorium staat vol met experimenten in uitvoering en vergeten projecten. Af en toe ontploft er iets en staat dan dagen(weken?) lang een CPU-core bezet te houden. Dat zou ik goed moeten monitoren, maar ook dat blijft een hobby project.
Daarom is het wel een fijne gedacht dat het worst-case scenario is dat zo'n doosje permanent 20W trekt en geen 150W zoals de voorganger.

En zuinig, ach, dat is relatief dat is relatief aan de taak die uitgevoerd wordt. Ik heb die servers niet om stroom te besparen, dan zou ik ze beter helemaal uit zetten. Ik benader het liever van de andere kant, gegeven het feit dat ik K8s wil doen, wat voor hardware heb ik dan nodig? (Even afgezien van dat k8s ook geen doel op zich is maar vooral een middel). Een laag verbruik is uiteindelijk ook maar een middel, geen doel op zich. Het echte doel kan veel verschil maken waarom je het verbruik laag wil houden (bv geld, milieu of warmte).

In dit topic kijken we uiteraard me een enigszins extreme blik naar het onderwerp onder ons vergrootglas. Dat is prima om de focus te houden maar uiteindelijk hebben we allemaal nog een ander doel dan een getalletje zo dicht mogelijk bij de 0 krijgen. Voor mij is dit topic dan ook één van de vele stops als ik nieuwe hardware nodig heb, al is het door de jaren heen wel steeds belangrijker geworden.

De N100 is sowieso niet het allerzuinigste platform maar heeft imho een aardige verhouding tussen performance, verbruik en prijs. De flexibiliteit van passief gekoelde minipcs trekt me ook wel. Omdat ze klein en stil zijn kun je ze makkelijk overal inzetten. Mochten ze niet bevallen als "private cloud" server dan kan ik ze ook goed inzetten als HTPC, Home Automation platform, retro game station, router & access point of domweg als PC.

[audiojunk]

Ozzie schreef op vrijdag 6 oktober 2023 @ 10:07:
Ik heb net een Beelink S12 Pro besteld op ali, voor 150 euro. N100/16gb ram/500gb ssd.

Was dat een aanbieding want voor die prijs zie ik het niet, linkje?

[Mars Warrior]

audiojunk schreef op zaterdag 7 oktober 2023 @ 12:50:
[...]
Was dat een aanbieding want voor die prijs zie ik het niet, linkje?

Ik dacht ik zoek ook ff, maar schrik me rot van het al ingevulde zoekveld in de Ali App

Gezien mijn zoekgeschiedenis wel een logische invulling, toch?



€150 is niet te vinden, €180 wel…

[audiojunk]

Aanbod is inderdaad groot op Aliexpress maar vond deze voor 174€

https://nl.aliexpress.com...urPageLogUid=zQNMBMAJNHEF

[Ozzie]

Ik denk dat ik net geluk had want nu zie ik hem ook voor 180 euro. https://nl.aliexpress.com...1bIX&gatewayAdapt=glo2nld

Deze heb ik besteld, de laatste in het rijtje.

[Raven]

Mars Warrior schreef op zaterdag 7 oktober 2023 @ 13:25:
[...]

Ik dacht ik zoek ook ff, maar schrik me rot van het al ingevulde zoekveld in de Ali App

Gezien mijn zoekgeschiedenis wel een logische invulling, toch?

[Afbeelding]

offtopic:
Ondergoed met open kruis?

[Jormungandr]

Na wat vertraging bij Megekko toch nog mijn N100 bord en toebehoren in de post gekregen:

#	Category	Product	Prijs	Subtotaal
1	Moederborden	ASRock N100DC-ITX	€ 139,90	€ 139,90
1	Behuizingen	Chieftec IX-03B	€ 0,-	€ 0,-
1	Geheugen intern	Crucial CT16G4DFD8266	€ 88,96	€ 88,96
1	Solid state drives	Patriot P300 512GB	€ 27,90	€ 27,90
1	Overige componenten	FSP FSP090-ABAN2	€ 0,-	€ 0,-
			Totaal	€ 256,76

Gemeten met een Sonoff Pow R2 op Tasmota

Momenteel idle 6W met Debian 12 vers na installatie en powertop auto-tune. CPU gaat netjes in C10.

[Ozzie]

Mars Warrior schreef op vrijdag 6 oktober 2023 @ 11:41:
[...]

Dat gaat dus geen zuinige server worden, dat besef je dan ook wel toch?

Natuurlijk wel een stuk zuiniger dan die 3570K doordat elke N100 core een stuk minder verbruikt, maar dit systeem zal NOOIT idle zijn.

Waarom is het geen zuinige server dan? Kan je dat uitleggen?

[RobertMe]

Ozzie schreef op zondag 8 oktober 2023 @ 16:04:
[...]


Waarom is het geen zuinige server dan? Kan je dat uitleggen?

Dat staat er Een Kubernetes cluster, of dat nu full blown Kubernetes / K8s is of een variant als K3s zal nooit idle zijn. Het volledige Kubernetes ecosysteem bevat zoveel "bewegende delen" die op de achtergrond continu bezig zijn dat het systeem altijd actief is. Bv het feit dat alles in een database staat, de periodieke health checks en of alle nodes nog up zijn, etc etc. Dat is allemaal een redelijke aanslag op het systeem die je bij "bare metal" totaal niet hebt, en bij bv Docker in veel mindere mate.

[Ozzie]

RobertMe schreef op zondag 8 oktober 2023 @ 16:11:
[...]

Dat staat er Een Kubernetes cluster, of dat nu full blown Kubernetes / K8s is of een variant als K3s zal nooit idle zijn. Het volledige Kubernetes ecosysteem bevat zoveel "bewegende delen" die op de achtergrond continu bezig zijn dat het systeem altijd actief is. Bv het feit dat alles in een database staat, de periodieke health checks en of alle nodes nog up zijn, etc etc. Dat is allemaal een redelijke aanslag op het systeem die je bij "bare metal" totaal niet hebt, en bij bv Docker in veel mindere mate.

Als idle zijn bepaalt of het een zuinige server is, lijkt mij dat het meer om het energie verbruik gaat. Maar ik ga het wel meten als die binnen is, ik denk namelijk dat het in de praktijk best wel mee valt. Zoveel services draait K3s ook niet uit zichzelf en CoreOS heeft ook alleen het broodnodige erin zitten.

[Mars Warrior]

Ozzie schreef op zondag 8 oktober 2023 @ 16:34:
[...]
Als idle zijn bepaalt of het een zuinige server is, lijkt mij dat het meer om het energie verbruik gaat. Maar ik ga het wel meten als die binnen is, ik denk namelijk dat het in de praktijk best wel mee valt. Zoveel services draait K3s ook niet uit zichzelf en CoreOS heeft ook alleen het broodnodige erin zitten.

K3s meld in zijn eigen documentatie nog steeds:

• Idle verbruik van 6-30% of a core
• Hoge I/O load met advies om storage te splitten omdat er mogelijk anders problemen ontstaan

Het gaat dus niet om het aantal services, maar het feit dat een aantal continue druk zijn!

Verder niet de huidige 1.32.1 gebruiken: die heeft zodanig zware bugs dat ze die zelf afraden.

Mijn oude server ging van 6W idle naar 30W idle met enkel k3s, dus zonder containers! Met containers ging dat snel naar 40-45W idle.

Mijn huidige server doet idle 3W, en met 30 containers erbij onder docker compose komt daar nog 3W bij.

[thof]

Ik kom ze ook nog niet tegen met een N100, maar enkel met een N5105/N6005 of J6412/J6413:
https://cwwk.net/products...-m-2-itx-four-i226-v-nics
https://cwwk.net/products...a3-0-dual-m-2-i226-v-nics

Op beide borden zit een chipje boven de 6 sata poorten, dus het zou mij niets verbazen als dat een of andere JMS/ASM sata expander chip is.

Eventueel zou je ook nog aan de slag kunnen met een NVMe naar SATA adapter. Die met meer poorten zoals die hieronder maken ook gebruik van een expander chip:
https://nl.aliexpress.com/item/1005004374178301.html

[mrmrmr]

thof schreef op maandag 9 oktober 2023 @ 10:00:
Ik kom ze ook nog niet tegen met een N100, maar enkel met een N5105/N6005 of J6412/J6413:
https://cwwk.net/products...-m-2-itx-four-i226-v-nics
https://cwwk.net/products...a3-0-dual-m-2-i226-v-nics

Op beide borden zit een chipje boven de 6 sata poorten, dus het zou mij niets verbazen als dat een of andere JMS/ASM sata expander chip is.

JMB585 staat op een van de plaatjes van het J6412 bord. Dat kost een aantal Watts meer in idle.

Eventueel zou je ook nog aan de slag kunnen met een NVMe naar SATA adapter. Die met meer poorten zoals die hieronder maken ook gebruik van een expander chip:
https://nl.aliexpress.com/item/1005004374178301.html

Dit komt ook met extra verbruik en vaak met lagere snelheden per poort. Intel heeft een veel betere/zuinigere SATA aansturing in de chipset dan de controllers van JMicron of ASM.

[Jormungandr]

Mars Warrior schreef op zondag 8 oktober 2023 @ 17:05:
[...]

K3s meld in zijn eigen documentatie nog steeds:

• Idle verbruik van 6-30% of a core
• Hoge I/O load met advies om storage te splitten omdat er mogelijk anders problemen ontstaan

Het gaat dus niet om het aantal services, maar het feit dat een aantal continue druk zijn!

Verder niet de huidige 1.32.1 gebruiken: die heeft zodanig zware bugs dat ze die zelf afraden.

Mijn oude server ging van 6W idle naar 30W idle met enkel k3s, dus zonder containers! Met containers ging dat snel naar 40-45W idle.

Mijn huidige server doet idle 3W, en met 30 containers erbij onder docker compose komt daar nog 3W bij.

Daarmee kom je natuurlijk weer uit op de discussie over het uiteindelijke doel van de gebruiker: "Zo zuinig mogelijk bereiken wat je wil doen". Ik heb dit vroeger ook al gezegd, maar als we allemaal dezelfde hardware kopen en Ubuntu+Docker draaien gaat het hier wel pokkesaai worden. Als Ozzie k8s/k3s wil gebruiken om bv bij te leren of gewoon omdat dat retecool is, dan moet hij dat doen en dat stopt hem niet van het toch zo zuinig mogelijk te maken.

Ja k8s/k3s is inderdaad niet zo zuinig als plain docker, maar dat is geweten en ook langs de k8s kant werken ze hier aan (het github ticket ontbreekt me atm).

[eheijnen]

Jormungandr schreef op maandag 9 oktober 2023 @ 10:13:
[...]


Daarmee kom je natuurlijk weer uit op de discussie over het uiteindelijke doel van de gebruiker: "Zo zuinig mogelijk bereiken wat je wil doen". Ik heb dit vroeger ook al gezegd, maar als we allemaal dezelfde hardware kopen en Ubuntu+Docker draaien gaat het hier wel pokkesaai worden. Als Ozzie k8s/k3s wil gebruiken om bv bij te leren of gewoon omdat dat retecool is, dan moet hij dat doen en dat stopt hem niet van het toch zo zuinig mogelijk te maken.

Ja k8s/k3s is inderdaad niet zo zuinig als plain docker, maar dat is geweten en ook langs de k8s kant werken ze hier aan (het github ticket ontbreekt me atm).

Eigenlijk juist een uitnodiging om dat Kubernetes gebeuren zuiniger te krijgen....

[FireDrunk]

eheijnen schreef op maandag 9 oktober 2023 @ 10:59:
[...]

Eigenlijk juist een uitnodiging om dat Kubernetes gebeuren zuiniger te krijgen....

Aan de ene kant wel, aan de andere kant is 30% load op een core van een saai i3tje nou niet echt veel op de schaal waar Kubernetes gebruikt wordt.
Mogelijk heeft dat zuinig maken zelfs effect op de daadwerkelijke functionaliteit.

Kubernetes doet ook echt iets... Ook als het idle is. Kan het minder energie verbruiken? Vast, kan het zuiniger? Dat is een oordeel over het werk dat verzet wordt. Dat is extreem lastig.

[eheijnen]

FireDrunk schreef op maandag 9 oktober 2023 @ 11:01:
[...]

Aan de ene kant wel, aan de andere kant is 30% load op een core van een saai i3tje nou niet echt veel op de schaal waar Kubernetes gebruikt wordt.
Mogelijk heeft dat zuinig maken zelfs effect op de daadwerkelijke functionaliteit.

Kubernetes doet ook echt iets... Ook als het idle is. Kan het minder energie verbruiken? Vast, kan het zuiniger? Dat is een oordeel over het werk dat verzet wordt. Dat is extreem lastig.

Gaat ook om de fun ervan.
Kun je dan weer een masterclass pielen van maken...

[FireDrunk]

eheijnen schreef op maandag 9 oktober 2023 @ 11:13:
[...]

Gaat ook om de fun ervan.
Kun je dan weer een masterclass pielen van maken...

Oh dat is zeker waar. Ik heb er wel eens over zitten te denken om daar wat tijd in te spenderen, maar dat is best een complexe codebase. K3s doet een volledige recompile van het hele Kubernetes landschap, wat bestaat uit meerdere binaries, weer terug in 1 enkele binary. Ze vervangen de etcd backend met een sqlite backend en doen nog wat andere fratsen.

Dat is geen kattepis

[Jormungandr]

Dat zuiniger maken van k8s komt wel hoor. Wij kregen laatst de vraag om de usecase van k8s op drones te bekijken. Hoe zuiniger dat is, hoe langer dat ding in de lucht blijft. (Blijft de vraag of dat uberhaupt zinnig is but hey ... )

[mrmrmr]

Meestal sla ik vragen over een behuizing over, maar nu ik zelf zoek naar een nieuwe kast valt het huidige aanbod me zwaar tegen. Uiteraard zoek ik een naar een kast met zuinige kenmerken:

• tower
• minstens 4x horizontale bays geschikt voor 2.5" HDD's (echte bays, die niet rammelen/vibreren)
• bij voorkeur bovenzijde open zodat warme lucht op natuurlijk wijze weg kan
• 2x USB2 front panel, hdd led
• geen dingen die energie kosten zoals verlichting, fan controller die stroom tappen van USB
• ventilatoren niet nodig
• bij voorkeur goede geluidsdemping
• betaalbaar
• zakelijk uiterlijk (strak)

Behuizingen met echte bays kan ik niet meer vinden in pricewatch, maar ik heb ze natuurlijk niet allemaal bekeken. De meeste kasten hebben aan de wand alleen wat schroefgaten en dergelijke voor SSD's, niet geschikt voor mechanische disks.

Ik had voorheen Aerocool DS200 met een goede kwaliteit en stille plastic drivehouders. Die kasten moeten worden vervangen want de weekmakers in het plastic zweten naar het oppervlak en maken de behuizing plakkerig waardoor alle stof erop blijft plakken. Het ziet er niet meer uit. De uitvoering: Aerocool DS 200 Black Edition had een soort rubberachtig aanvoelend oppervlak dat prettig aanvoelt in het begin, maar het is niet 10 jaar houdbaar.

[CodeCaster]

CodeCaster schreef op vrijdag 22 september 2023 @ 17:29:
[...]

Inderdaad toch maar gekozen voor één 3,5"-schijf in een kleine behuizing:

#	Category	Product	Prijs	Subtotaal
1	Behuizingen	LC-Power LC-1350mi	€ 0,-	€ 0,-
1	Moederborden	ASUS Prime N100I-D D4	€ 104,20	€ 104,20
1	Geheugen intern	Crucial CT16G4SFRA32A	€ 32,69	€ 32,69
1	Interne harde schijven	WD Red Plus, 14TB	€ 345,-	€ 345,-
1	Ventilators	Noiseblocker BlackSilent XM-1, 40mm	€ 5,96	€ 5,96
1	Solid state drives	Samsung PM981 (SED) 256GB	€ 0,-	€ 0,-

Dit is 'm dus geworden. Het was proppen in de case; de 20-polige ATX-stekker kwam rechtstreeks van de adapter met een printplaat eraan, dus die stak vanuit het moederbord al bijna tegen het deksel van de case. Ik heb uiteraard geen foto's gemaakt van het montageproces, maar het past allemaal nét.

En zo hangt 'ie nu met bijgeleverde beugel in de meterkast:



Fan zuigt de warme lucht af naar boven. Nu nog wat kabels vervangen, op maat knippen en wegwerken...

Met Ubuntu 22, Docker (Pi-hole, Unifi Controller, Home Assistant) en hd-idle gebruikt 'ie momenteel 8 Watt zonder, 13 met harddisk. Gedetailleerder: CodeCaster in "Het grote zuinige server topic - deel 3"

De Zyxel-router erboven (niet zichtbaar) verstookt continu 10 Watt, misschien toch maar iets met pfSense gaan doen...

[HyperBart]

mrmrmr schreef op maandag 9 oktober 2023 @ 21:08:
Meestal sla ik vragen over een behuizing over, maar nu ik zelf zoek naar een nieuwe kast valt het huidige aanbod me zwaar tegen. Uiteraard zoek ik een naar een kast met zuinige kenmerken:

• tower
• minstens 4x horizontale bays geschikt voor 2.5" HDD's (echte bays, die niet rammelen/vibreren)
• bij voorkeur bovenzijde open zodat warme lucht op natuurlijk wijze weg kan
• 2x USB2 front panel, hdd led
• geen dingen die energie kosten zoals verlichting, fan controller die stroom tappen van USB
• ventilatoren niet nodig
• bij voorkeur goede geluidsdemping
• betaalbaar
• zakelijk uiterlijk (strak)

Behuizingen met echte bays kan ik niet meer vinden in pricewatch, maar ik heb ze natuurlijk niet allemaal bekeken. De meeste kasten hebben aan de wand alleen wat schroefgaten en dergelijke voor SSD's, niet geschikt voor mechanische disks.

Ik had voorheen Aerocool DS200 met een goede kwaliteit en stille plastic drivehouders. Die kasten moeten worden vervangen want de weekmakers in het plastic zweten naar het oppervlak en maken de behuizing plakkerig waardoor alle stof erop blijft plakken. Het ziet er niet meer uit. De uitvoering: Aerocool DS 200 Black Edition had een soort rubberachtig aanvoelend oppervlak dat prettig aanvoelt in het begin, maar het is niet 10 jaar houdbaar.

Bij Fractal moet je zoiets toch vinden?

[Step5]

HyperBart schreef op maandag 9 oktober 2023 @ 22:00:
[...]


Bij Fractal moet je zoiets toch vinden?

Lijkt mij ook, ik heb een fractal R6, die voldoet aan de meeste eisen denk ik, ruimte voor HD's in "de toren", bovenop kan klep eruit voor ventilatie.
Snelheidsregeling voor ventilators zit er wel in maar hoef je niet te gebruiken en als laatste, misschien minpuntje, dat de front usb aansluitingen (2xusb2, 2x3) bovenop zitten.
Oh jah, zakelijke uitstraling - check

[mrmrmr]

@HyperBart @Step5 Bedankt! De Fractal Design R5 uit 2014 voldoet zo te zien: 2x USB2, ventilatierooster aan bovenzijde, trays, sata voeding voor fan controller.

Resoneren de trays als er HDD's op bevestigd zijn of ze of zijn ze compleet stil?
HDD's maken zelf geluid, maar dat kan versterkt worden door trays die meetrillen.

[Enervate]

Ik heb een tijdje terug mijn servertje geupgrade (van een athlon 5350) naar dit:

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-12100 Boxed	€ 122,73	€ 122,73
1	Moederborden	ASRock H610M-ITX/ac	€ 117,90	€ 117,90
1	Geheugen intern	Crucial Ballistix BL2K8G32C16U4B	€ 0,-	€ 0,-
1	Solid state drives	Samsung PM9A1 256GB	€ 37,11	€ 37,11

En nu probeer ik het verbruik omlaag te krijgen. Er draait Arch op, verbruik is 15.1W idle (zonder de HDD aangesloten). In powertop ziet alles er goed uit behalve dat de package C-state niet onder C3 komt. Heb het topic wat terug gelezen en zie dat ik niet de enige ben met dit probleem.

code:

Pkg(HW)  |            Core(HW) |            CPU(OS) 0   CPU(OS) 1
                    |                     | C0 active   0.0%        0.1%
                    |                     | POLL        0.0%    0.0 ms  0.0%    0.0 ms
                    |                     | C1E         0.0%    0.5 ms  0.0%    0.4 ms
C2 (pc2)   26.2%    |                     |
C3 (pc3)   72.9%    | C3 (cc3)    0.0%    |
C6 (pc6)    0.0%    | C6 (cc6)    0.0%    | C6          0.0%    0.0 ms  0.0%    0.0 ms
C7 (pc7)    0.0%    | C7 (cc7)   99.6%    |
C8 (pc8)    0.0%    |                     | C8          0.1%    2.3 ms  0.0%    0.0 ms
C9 (pc9)    0.0%    |                     |
C10 (pc10)  0.0%    |                     |
                    |                     | C10        99.7%  166.6 ms 99.9%  156.5 ms

Package C-states staan aan in de bios, ASPM ook, wifi en audio uitgezet, RAM op JEDEC snelheid en voltage. Ik heb de intel_pstate en acpi_cpufreq drivers allebei geprobeerd dat maakt geen verschil.

Ik heb wat output bijgevoegd waar men in eerdere posts naar keek, als iemand tijd/zin heeft er naar te kijken kan ik meer volledige info posten

code:

# dmesg | grep -i "PME#"
[    0.224951] pci 0000:00:14.0: PME# supported from D3hot D3cold
[    0.226224] pci 0000:00:16.0: PME# supported from D3hot
[    0.226786] pci 0000:00:17.0: PME# supported from D3hot
[    0.227155] pci 0000:00:1c.0: PME# supported from D0 D3hot D3cold
[    0.228550] pci 0000:00:1f.6: PME# supported from D0 D3hot D3cold
# dmesg | grep -i "acpi: pm: ("
[    0.188354] ACPI: PM: (supports S0 S3 S4 S5)

lspci output van de ethernet controller, bij al het andere lijkt ASPM aan te staan:

code:

00:1f.6 Ethernet controller: Intel Corporation Ethernet Connection (17) I219-V (rev 11)
        Subsystem: ASRock Incorporation Ethernet Connection (17) I219-V
        Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR- FastB2B- DisINTx+
        Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
        Latency: 0
        Interrupt: pin D routed to IRQ 135
        Region 0: Memory at 70900000 (32-bit, non-prefetchable) [size=128K]
        Capabilities: [c8] Power Management version 3
                Flags: PMEClk- DSI+ D1- D2- AuxCurrent=0mA PME(D0+,D1-,D2-,D3hot+,D3cold+)
                Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=1 PME-
        Capabilities: [d0] MSI: Enable+ Count=1/1 Maskable- 64bit+
                Address: 00000000fee003d8  Data: 0000
        Kernel driver in use: e1000e
        Kernel modules: e1000e

eee lijkt aan te staan (maar inactive?)

code:

# ethtool --show-eee enp0s31f6
EEE settings for enp0s31f6:
        EEE status: enabled - inactive
        Tx LPI: 17 (us)
        Supported EEE link modes:  100baseT/Full
                                   1000baseT/Full
        Advertised EEE link modes:  100baseT/Full
                                    1000baseT/Full
        Link partner advertised EEE link modes:  Not reported

Ook nog even pcie_aspm=force geprobeerd, lijkt geen effect te hebben.

[FireDrunk]

mrmrmr schreef op dinsdag 10 oktober 2023 @ 00:41:
@HyperBart @Step5 Bedankt! De Fractal Design R5 uit 2014 voldoet zo te zien: 2x USB2, ventilatierooster aan bovenzijde, trays, sata voeding voor fan controller.

Resoneren de trays als er HDD's op bevestigd zijn of ze of zijn ze compleet stil?
HDD's maken zelf geluid, maar dat kan versterkt worden door trays die meetrillen.

De wat luxere fractal kasten hebben rubbertjes in de trays voor de harddisks. Vanaf welke serie dat precies is, weet ik niet uit mijn hoofd. Mijn Define R2 XL heeft dat in ieder geval wel.

[Ozzie]

Mijn R5 die ik al een eeuwigheid heb heeft dat ook.

[mrmrmr]

@Enervate dmesg, powertop tabbladen, BIOS instellingen zijn handig om e.e.a. te controleren. Misschien kun je die ergens uploaden? Moderne Linux kernels gebruiken p_state.

Welke andere onderdelen zijn aangesloten? Denk ook aan USB en SATA apparaten. Gebruik bij voorkeur USB2. Bijvoorbeeld voor toetsenbord en muis. Die kunnen ook via de PS/2 aansluiting.

In plaats van WiFi en audio uitzetten in BIOS kun je dat ook proberen vanuit het besturingssysteem. Zodoende kan powertop het zien en proberen in low power mode te zetten. De WiFi module kun je misschien uitnemen.

Gebruikt het geheugen SPD settings?

Debian of Ubuntu zou je kunnen gebruiken als test met OS waarvan het gedrag bekend is. Misschien booten vanaf een USB key.

BIOS settings:
geen overclock, ook geen auto overclock
SPD geheugen op standaard 1.2V spanning
CPU C States Support: enabled
Enhanced Halt State (C1E): enabled
CPU C6 State Support: enabled
CPU C7 State Support: enabled
Package C State Support: enabled of C10
Legacy Game Compatibility Mode: disabled
C6DRAM: enabled (testen)
PCI Express Native Control: enabled
PCIE ASPM Support: enabled
PCH PCIE ASPM Support: enabled
DMI ASPM Support: enabled
PCH DMI ASPM Support: enabled
SATA Mode Selection: AHCI
SATA Aggressive Link Power Management: enabled
PCIE Devices Power On: disabled
I219 LAN Power On: disabled
RTC Alarm Power On: disabled
USB Keyboard/Remote Power On: disabled (of enabled wanneer nodig)
USB Mouse Power On: disabled
Legacy USB Support: enabled (testen)
XHCI Hand-off: disabled (niet nodig als het goed is, testen)
Fast Boot: disabled
Boot From Onboard LAN: disabled
CSM: disabled

[masauri]

Kleine tussendoor update, net een zeer goedkoop N5105 Intel Celeron Quad Core bordje besteld als basis voor een zuinige casemod server build. (oude dell rackserver ombouwen tot ssd storage server)
Ik heb dit mobo gekozen nadat ik na lang zoeken deze video op youtube net zag:
YouTube: The Perfect Home Server 2023 – 48TB, 4x 2.5Gbit LAN, 18W, Quiet & Co... .

https://www.cpubenchmark....00-vs-Intel-Celeron-N5105

https://tweakers.net/gallery/150113/fotoalbum/?MapID=186588

CPU: Intel Celeron N5105 Quad Cores 2.00Ghz TDP 10W
Memory: 2* DDR4 260PIN SO-DIMM Max 16GB (Maar meer (32/64 werkt onofficiëel)
Storage: 1* M.2 (2280) Slot + 6*Sata3.0 Slot
Display: 1*DP Port + 1* HDMI Port
Expand I/O: 1* PCI-E 4XSlot (2xSignal)
Ethernet: 4*Intel i225/i226 Network Chip (zou 2.5GBit moeten zijn)
Rear I/O: 1*CLRCMOS_BTN + 4*LAN + 1*AUDIO + 1*LED + 2*USB 3.0 + 2*USB 2.0 + 1*DP + 1*HDMI
Motherboard I/O: 1*24PIN ATX+ 4PIN ATX + 1*F_USB + 1*CPU_FAN + 1*F_Panel + 1*Com(9PIN) + 1*JAN_Led + 6*Sata
Power: 1*24PIN ATX+ 4PIN ATX

Wie heeft er tips naar welk soort voeding voldoende gaat zijn? (Pico psu owv de 1u hoogte vermoed ik?)

[mrmrmr]

@masauri Er zit een ASM (ASMedia) chip op voor extra SATA.

uitvoering: Mini-box PicoPSU-90 + 84W (Fortron) Adapter Power Kit adapter is voldoende voor 2.5" disks/SSD's, maar voor meer dan twee a drie 3.5" hard disks heb je meer vermogen nodig tenzij het bord in staat is om 3.5" hard disks staggered te starten. ASMedia heeft chips die dat ondersteunen, dus in theorie zou er tenminste een deel van de disks staggered kunnen starten.

Zo'n ASMedia chip heeft wel een relatief hoog verbruik en misschien heeft het niet de volledige 6 Gbps doorvoersnelheid.

[masauri]

mrmrmr schreef op dinsdag 10 oktober 2023 @ 11:50:
@masauri Er zit een ASM (ASMedia) chip op voor extra SATA.

uitvoering: Mini-box PicoPSU-90 + 84W (Fortron) Adapter Power Kit adapter is voldoende voor 2.5" disks/SSD's, maar voor meer dan twee a drie 3.5" hard disks heb je meer vermogen nodig tenzij het bord in staat is om 3.5" hard disks staggered te starten. ASMedia heeft chips die dat ondersteunen, dus in theorie zou er tenminste een deel van de disks staggered kunnen starten.

Zo'n ASMedia chip heeft wel een relatief hoog verbruik en misschien heeft het niet de volledige 6 Gbps doorvoersnelheid.

In de video gebruikt men 3,5 hdd's als je dat bedoelt?
Voorkeur gaat idd naar 2,5 en ssd's.

Ik zie bij die picoPSU dat er staat : ATX 20 Pin met 1x4pin , op mijn mobo zit een ATX24 pin en 4 pin, deze past dan toch niet of ben ik mis?

[dcm360]

masauri schreef op dinsdag 10 oktober 2023 @ 12:04:
[...]

In de video gebruikt men 3,5 hdd's als je dat bedoelt?
Voorkeur gaat idd naar 2,5 en ssd's.

Ik zie bij die picoPSU dat er staat : ATX 20 Pin met 1x4pin , op mijn mobo zit een ATX24 pin en 4 pin, deze past dan toch niet of ben ik mis?

Dat gaat gewoon werken, intern op de PSU en op het moederbord zijn de extra 4 pinnen van de grotere stekker toch wel doorverbonden aan de andere pinnen met dezelfde spanning. Zeker met een licht systeem zijn de extra pinnen niet noodzakelijk.

mrmrmr schreef op dinsdag 10 oktober 2023 @ 11:50:
Zo'n ASMedia chip heeft wel een relatief hoog verbruik en misschien heeft het niet de volledige 6 Gbps doorvoersnelheid.

Wat zie je als alternatief voor het aansluiten van meer dan 2 SSD's? Het kan vooral al snel nog onzuiniger worden dan deze chips.

[ Voor 23% gewijzigd door dcm360 op 10-10-2023 12:29 ]

[N. Meijer]

Na wat inspiratie een paar pagina's terug iets nieuws in elkaar geknutseld.
Deze keer ook een case erbij zodat het niet als een bergje op mijn bureau leeft.
Met Unraid 6.11.5 en 4 dockers.HDD in spindown doet deze 7W. , Gemeten met een home wizard plug.
Zonder de dockers, 4,5 - 5W (beetje lastig zien hiermee)
Ahja zit ook nog een usb stick in,

Voor me gevoel is 2 a 2,5W voor de dockers die nauwlijks iets doen een beetje veel.
Maar wie weet moet ik ergens nog wel wat settings tweaken.

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i5-13400 Boxed	€ 246,-	€ 246,-
1	Moederborden	ASUS Pro H610T D4-CSM	€ 119,05	€ 119,05
1	Interne harde schijven	WD Red Plus, 4TB (64MB cache)	€ 173,-	€ 173,-
1	Behuizingen	Silverstone Milo 10	€ 67,87	€ 67,87
1	Processorkoeling	Noctua NH-L9i-17xx	€ 44,90	€ 44,90
2	Geheugen intern	Crucial CT16G4SFRA32A	€ 33,50	€ 67,-
1		chicony a17-180P4A 180w	--	--
1	Solid state drives	Samsung 970 Evo Plus 1TB	€ 69,95	€ 69,95

[mrmrmr]

dcm360 schreef op dinsdag 10 oktober 2023 @ 12:21:
Wat zie je als alternatief voor het aansluiten van meer dan 2 SSD's? Het kan vooral al snel nog onzuiniger worden dan deze chips.

Voor zo'n bord: geen. Het voor de hand liggende alternatief in het algemeen is een chipset die 6x SATA ondersteunt, dus 8th/9th gen Intel. Zoals uitvoering: Fujitsu D3642-B.

[Enervate]

mrmrmr schreef op dinsdag 10 oktober 2023 @ 10:43:
@Enervate dmesg, powertop tabbladen, BIOS instellingen zijn handig om e.e.a. te controleren. Misschien kun je die ergens uploaden?

powertop
dmesg
cpupower, lspci, dmidecode

Welke andere onderdelen zijn aangesloten? Denk ook aan USB en SATA apparaten. Gebruik bij voorkeur USB2. Bijvoorbeeld voor toetsenbord en muis. Die kunnen ook via de PS/2 aansluiting.

De 15.1W is met alleen ethernet. Met toetsenbord, muis en HDMI erbij kom ik op 16.2W. En ik zag dat er intern een LED controller via USB zit aangesloten ondanks dat die is uitgeschakeld in de bios. SATA HDD heb ik voor nu niet aangesloten.

In plaats van WiFi en audio uitzetten in BIOS kun je dat ook proberen vanuit het besturingssysteem. Zodoende kan powertop het zien en proberen in low power mode te zetten. De WiFi module kun je misschien uitnemen.

Geprobeerd: audio maakt geen verschil, WiFi inschakelen verbruikt 0.1W minder, nice.

Gebruikt het geheugen SPD settings?

Ik dacht van wel maar bleek dat voltage nog op auto stond (1.350V), naar 1.2V gezet, scheelt ongeveer 0.2W.

Debian of Ubuntu zou je kunnen gebruiken als test met OS waarvan het gedrag bekend is. Misschien booten vanaf een USB key.

Ik ga van de week een Ubuntu stickje maken, dan kan ik ook zien of de SDD de boosdoener is.

BIOS settings [...]

Allemaal nagelopen, turbo boost uitschakelen lijkt iets te schelen. Met Intel speed shift uitgeschakeld krijg ik wel meer info te zien in frequency stats bij powertop, maar geen lager verbruik. BIOS is laatste versie.

De voeding is trouwens een Corsair SF600 platinum, weet dat het niet ideaal is maar het is wat ik heb, hoef iig geen rekening te houden met piekverbruik.

Verbruik is nu 14.8W zonder peripherals.

[Kuusj]

Jormungandr schreef op zaterdag 7 oktober 2023 @ 23:08:
Na wat vertraging bij Megekko toch nog mijn N100 bord en toebehoren in de post gekregen:

#	Category	Product	Prijs	Subtotaal
1	Moederborden	ASRock N100DC-ITX	€ 139,90	€ 139,90
1	Behuizingen	Chieftec IX-03B	€ 0,-	€ 0,-
1	Geheugen intern	Crucial CT16G4DFD8266	€ 88,96	€ 88,96
1	Solid state drives	Patriot P300 512GB	€ 27,90	€ 27,90
1	Overige componenten	FSP FSP090-ABAN2	€ 0,-	€ 0,-
			Totaal	€ 256,76

Gemeten met een Sonoff Pow R2 op Tasmota

Momenteel idle 6W met Debian 12 vers na installatie en powertop auto-tune. CPU gaat netjes in C10.

Ik heb nog wat Level VI adapters van HP, waaronder een 45W exemplaar. In theorie zou dat ook nog wel wat moeten schelen toch? Of blijft dat ongeacht het maximumvermogen van de adapter hetzelfde? Dus 75-80% onder 5W load ongeveer?

[mrmrmr]

Cybernetics heeft een test gedaan van de Corsair SF600 Platinum bij 2% (12W DC) en komt op 61% efficiëntie. Dus van de 15W AC die je meet is <9W echt verbruik (DC) en de rest is overhead.

01:00.0 Non-Volatile memory controller: Samsung Electronics Co Ltd NVMe SSD Controller PM9A1/PM9A3/980PRO (prog-if 02 [NVM Express])
Capabilities: [40] Power Management version 3
Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)
Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME-
[..]
LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <64us
ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-
[..]
Capabilities: [21c v1] L1 PM Substates
L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+
PortCommonModeRestoreTime=10us PortTPowerOnTime=10us
L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1-
T_CommonMode=0us LTR1.2_Threshold=30720ns

ASPM is er wel maar staat uit (-) bij 21c. Device power management staat ook uit (-) voor de NVMe. Dit hebben we eerder gezien in andere dmesg output voor hetzelfde Samsung device. Iets zorgt ervoor dat dit uit staat en datzelfde kan de oorzaak zijn voor de lage package C state (C2/C3).

[ 0.221591] acpi PNP0A08:00: _OSC: OS supports [ExtendedConfig ASPM ClockPM Segments MSI EDR HPX-Type3]
[ 0.223002] acpi PNP0A08:00: _OSC: OS now controls [PCIeHotplug SHPCHotplug PME AER PCIeCapability LTR DPC]
[ 1.141688] usb 1-9: New USB device found, idVendor=26ce, idProduct=01a2, bcdDevice= 0.00
[ 1.141693] usb 1-9: New USB device strings: Mfr=1, Product=2, SerialNumber=3
[ 1.141695] usb 1-9: Product: LED Controller
[ 1.141696] usb 1-9: Manufacturer: ASRock
[ 2.192044] input: ASRock LED Controller as /devices/pci0000:00/0000:00:14.0/usb1/1-9/1-9:1.0/0003:26CE:01A2.0001/input/input5
[ 2.260622] hid-generic 0003:26CE:01A2.0001: input,hidraw0: USB HID v1.10 Device [ASRock LED Controller] on usb-0000:00:14.0-9/input0
[ 2.260731] usbcore: registered new interface driver usbhid
[ 2.260735] usbhid: USB HID core driver

Als je die LED controller stroomloos zou kunnen maken zou dat misschien iets helpen. Twee redenen: misschien is het de oorzaak van het niet actief zijn van ASPM/package C state (indirect) en er kan rechtstreeks verbruik zijn.

[ 0.748618] xhci_hcd 0000:00:14.0: xHCI Host Controller
[ 0.748624] xhci_hcd 0000:00:14.0: new USB bus registered, assigned bus number 1
[ 0.749737] xhci_hcd 0000:00:14.0: hcc params 0x20007fc1 hci version 0x120 quirks 0x0000000200009810
[ 0.749968] xhci_hcd 0000:00:14.0: xHCI Host Controller
[ 0.749971] xhci_hcd 0000:00:14.0: new USB bus registered, assigned bus number 2
[ 0.749973] xhci_hcd 0000:00:14.0: Host supports USB 3.2 Enhanced SuperSpeed
[ 0.750008] usb usb1: New USB device found, idVendor=1d6b, idProduct=0002, bcdDevice= 6.05
[ 0.750010] usb usb1: New USB device strings: Mfr=3, Product=2, SerialNumber=1
[ 0.750011] usb usb1: Product: xHCI Host Controller
[ 0.750012] usb usb1: Manufacturer: Linux 6.5.5-arch1-1 xhci-hcd
[ 0.750013] usb usb1: SerialNumber: 0000:00:14.0
[ 0.750106] hub 1-0:1.0: USB hub found
[ 0.750130] hub 1-0:1.0: 16 ports detected
[ 0.752356] usb usb2: New USB device found, idVendor=1d6b, idProduct=0003, bcdDevice= 6.05
[ 0.752359] usb usb2: New USB device strings: Mfr=3, Product=2, SerialNumber=1
[ 0.752360] usb usb2: Product: xHCI Host Controller
[ 0.752361] usb usb2: Manufacturer: Linux 6.5.5-arch1-1 xhci-hcd
[ 0.752362] usb usb2: SerialNumber: 0000:00:14.0
[ 0.752419] hub 2-0:1.0: USB hub found
[ 0.752435] hub 2-0:1.0: 4 ports detected
[ 0.752731] usb: port power management may be unreliable
[ 0.756767] nvme 0000:01:00.0: platform quirk: setting simple suspend
[ 0.756806] nvme nvme0: pci function 0000:01:00.0
[ 0.767549] nvme nvme0: Shutdown timeout set to 10 seconds
[ 0.770189] nvme nvme0: 8/0/0 default/read/poll queues
[ 0.772412] nvme0n1: p1 p2 p3

Ik zie geen naam van een NVMe storage device. Wel een waarschuwing over usb port power management. Die werkt misschien niet. De LED controller hangt onder usb1. Power state van USB kan worden gecontroleerd in sysfs of met een tool.

[ 0.986118] i915 0000:00:02.0: vgaarb: deactivate vga console
[ 0.986151] i915 0000:00:02.0: [drm] Using Transparent Hugepages
[ 0.986777] i915 0000:00:02.0: vgaarb: changed VGA decodes: olddecodes=io+mem,decodes=io+mem:owns=io+mem
[ 0.987376] i915 0000:00:02.0: [drm] Finished loading DMC firmware i915/adls_dmc_ver2_01.bin (v2.1)
[ 0.993156] i915 0000:00:02.0: [drm] GT0: GuC firmware i915/tgl_guc_70.bin version 70.5.1
[ 0.993160] i915 0000:00:02.0: [drm] GT0: HuC firmware i915/tgl_huc.bin version 7.9.3
[ 1.000294] usb 1-9: new full-speed USB device number 2 using xhci_hcd
[ 1.006961] i915 0000:00:02.0: [drm] GT0: HuC: authenticated for all workloads
[ 1.006967] i915 0000:00:02.0: [drm] GT0: GUC: submission disabled
[ 1.006970] i915 0000:00:02.0: [drm] GT0: GUC: SLPC disabled
[ 1.007620] i915 0000:00:02.0: [drm] Protected Xe Path (PXP) protected content support initialized
[ 1.007997] [drm] Initialized i915 1.6.0 20201103 for 0000:00:02.0 on minor 0
[ 1.008747] ACPI: video: Video Device [GFX0] (multi-head: yes rom: no post: no)
[ 1.009075] input: Video Bus as /devices/LNXSYSTM:00/LNXSYBUS:00/PNP0A08:00/LNXVIDEO:00/input/input3
[ 1.009581] i915 0000:00:02.0: [drm] Cannot find any crtc or sizes
[ 1.010193] i915 0000:00:02.0: [drm] Cannot find any crtc or sizes

De gpu driver wordt geladen, wel met wat aparte 'disabled'. SLPC is gerelateerd aan power management. Misschien heeft Arch verouderde instellingen of is of om de een of andere reden gerelateerde patches van 2021 niet actief? De zelf kernel is wel heel recent: v6.5.5-arch1-1.

WiFi/Bluetooth module uitnemen zou ook nog kunnen helpen. De BIOS kan onderdelen onzichtbaar maken, maar het is de vraag of ze dan ook uitgeschakeld zijn en in low power stand staan.

[ 4952.766080] Bluetooth: Core ver 2.22
[ 4952.766103] NET: Registered PF_BLUETOOTH protocol family
[ 4952.766105] Bluetooth: HCI device and connection manager initialized
[ 4952.766109] Bluetooth: HCI socket layer initialized
[ 4952.766111] Bluetooth: L2CAP socket layer initialized
[ 4952.766114] Bluetooth: SCO socket layer initialized

Anderhalf uur na het booten werd Bluetooth geladen. WiFi niet.

Je gebruikt toch wel een goede energiemeter? Sommige oude meters houden geen rekening met de power factor en meten daardoor VA en niet het lagere werkelijke verbruik. Als dat zo is: de Brennenstuhl PM231E uit de topic start is bij diverse bouwmarkten verkrijgbaar.

Edit: diverse punten verfijnd.

[ Voor 10% gewijzigd door mrmrmr op 11-10-2023 20:39 ]

[Church of Noise]

Ik kan hier (en evenmin op hardwareluxx) zo niet direct terugvinden of iemand ooit een Intel nuc 11 pro of essential heeft proberen optimaliseren.
Daarom heb ik een van elk gekocht, ik laat weten wat de bevindingen zijn. Nadien zie ik dan wel of ik er een van houd, anders blijft het de nuc 8...

[Enervate]

@mrmrmr bedankt voor de uitgebreide feedback

Goed om te weten dat een picoPSU dus wel de moeite waard is, voor het meten gebruik ik al de genoemde Brennenstuhl
GuC is blijkbaar niet default voor alder lake-S maar wordt wel ondersteund, moet handmatig ingeschakeld worden:

code:

/etc/modprobe.d/i915.conf
options i915 enable_guc=3

code:

[    1.052395] Setting dangerous option enable_guc - tainting kernel
[    1.063796] Console: switching to colour dummy device 80x25
[    1.081018] i915 0000:00:02.0: vgaarb: deactivate vga console
[    1.081108] i915 0000:00:02.0: [drm] Using Transparent Hugepages
[    1.082019] i915 0000:00:02.0: vgaarb: changed VGA decodes: olddecodes=io+mem,decodes=io+mem:owns=io+mem
[    1.083257] i915 0000:00:02.0: [drm] Finished loading DMC firmware i915/adls_dmc_ver2_01.bin (v2.1)
[    1.092665] i915 0000:00:02.0: [drm] GT0: GuC firmware i915/tgl_guc_70.bin version 70.5.1
[    1.092669] i915 0000:00:02.0: [drm] GT0: HuC firmware i915/tgl_huc.bin version 7.9.3
[    1.095574] i915 0000:00:02.0: [drm] GT0: HuC: authenticated for all workloads
[    1.095890] i915 0000:00:02.0: [drm] GT0: GUC: submission enabled
[    1.095891] i915 0000:00:02.0: [drm] GT0: GUC: SLPC enabled
[    1.096142] i915 0000:00:02.0: [drm] GT0: GUC: RC enabled
[    1.096521] i915 0000:00:02.0: [drm] Protected Xe Path (PXP) protected content support initialized

Dit verhoogt het verbruik met 1.3W(!), powertop vindt alle tunables nog goed.

De WiFi controller zit gesoldeerd, die ga ik er niet afhalen. De LED controller overweeg ik wel om eraf te solderen. USB power kan je niet meer forceren via sysfs voor zover ik kan vinden (suspend staat wel op 0 delay, control=auto).

Apart dat hij na een hele tijd nog bluetooth laadt, de wifi controller stond toen in BIOS uitgeschakeld, ik dacht dat BT daar ook in zat. Met wifi ingeschakeld in BIOS wordt Bluetooth wel gewoon bij boot geladen.

Ik denk dat bij de wifi ook ASPM uit staat (bij het endpoint staat ASPM enabled maar bij de PM substates niet)

code:

Network controller: Intel Corporation Dual Band Wireless-AC 3168NGW [Stone Peak] (rev 10)
[..]
        Capabilities: [40] Express (v2) Endpoint, MSI 00
                DevCap: MaxPayload 128 bytes, PhantFunc 0, Latency L0s <512ns, L1 unlimited
                        ExtTag- AttnBtn- AttnInd- PwrInd- RBE+ FLReset+ SlotPowerLimit 0W
                DevCtl: CorrErr+ NonFatalErr+ FatalErr+ UnsupReq+
                        RlxdOrd+ ExtTag- PhantFunc- AuxPwr+ NoSnoop+ FLReset-
                        MaxPayload 128 bytes, MaxReadReq 128 bytes
                DevSta: CorrErr- NonFatalErr- FatalErr- UnsupReq- AuxPwr+ TransPend-
                LnkCap: Port #0, Speed 2.5GT/s, Width x1, ASPM L1, Exit Latency L1 <32us
                        ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+
                LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+
                        ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-
[..]
        Capabilities: [154 v1] L1 PM Substates
                L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+
                          PortCommonModeRestoreTime=30us PortTPowerOnTime=60us
                L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1-
                           T_CommonMode=0us LTR1.2_Threshold=102400ns
                L1SubCtl2: T_PwrOn=60us

Weet niet hoe ik dat in zou kunnen schakelen, ook bij de SSD.

[mrmrmr]

@Enervate Ik denk dat als het lukt om het element te verwijderen dat de hoge package states verhinderd, het verbruik flink kan dalen. Dat zou je normaal gesproken testen door elk device eraf te halen en zo kaal mogelijk te booten vanaf USB2.

Het probleem is natuurlijk hoe je kan weten wat de oorzaak is als je niet elk onderdeel even kan verwijderen.

Het kan aan de BIOS liggen of aan een specifiek device. De BIOS kan het verkeerd doorgeven of het kan een device zijn dat roet in het eten gooit.

De 1.3W voor GuC extra wijst volgens mij ook op een verstoord power management.

[andru123]

Enervate schreef op woensdag 11 oktober 2023 @ 23:38:
De WiFi controller zit gesoldeerd, die ga ik er niet afhalen.

Huh op de plaatjes lijkt wel een standard uitneembaar WiFi card. Zeker met 2 schroeven onder of op.
H610 lijkt vrij zuinig kunnen zijn. Mischien ligt het bij Asrock .

[mrmrmr]

@Enervate

Deze video laat zien hoe je de WiFi module kunt losschroeven:
https://www.youtube.com/watch?v=V4DUIlJYBRc

Op dit mITX bord is het een M.2 module.

De onderkant wordt niet getoond, maar aan de bovenkant zie ik wel een omhoogstekende schroef.

[ Voor 8% gewijzigd door mrmrmr op 12-10-2023 07:42 ]

[Enervate]

andru123 schreef op donderdag 12 oktober 2023 @ 04:11:
[...]
Huh op de plaatjes lijkt wel een standard uitneembaar WiFi card. Zeker met 2 schroeven onder of op.
H610 lijkt vrij zuinig kunnen zijn. Mischien ligt het bij Asrock .

mrmrmr schreef op donderdag 12 oktober 2023 @ 07:41:
@Enervate

Deze video laat zien hoe je de WiFi module kunt losschroeven:
https://www.youtube.com/watch?v=V4DUIlJYBRc

Op dit mITX bord is het een M.2 module.

De onderkant wordt niet getoond, maar aan de bovenkant zie ik wel een omhoogstekende schroef.

Ah die stijl had ik nog nooit gezien, kende alleen die die je in laptops hebt, horizontaal met m.2 achtige aansluiting.

Heb even Ubuntu van USB geboot, geeft nog niet meteen lagere C-states ook zonder de SSD (en WiFi weer in BIOS uitgezet). Heb wat pastebins gemaakt maar zelf nog niet uitgebreid naar gekeken: dmesg, lspci, powertop
Vanavond verder, en die module eruit halen.

[Kuusj]

Ik kwam deze tegen: https://store.minisforum.....0&variant=41915825979575
Met een AMD Ryzen 7 4800H. Nu met een kortingscode (DLE0Z1D9CTPS) barebones voor 179,-..
Natuurlijk niet te vergelijken met de N100 qua CPU performance.

Er is wel een review van Notebookcheck over de nieuwere variant (560XT, met een 5600H) (https://www.notebookcheck...dable-price.719275.0.html) en daar zou het idle verbruik rond de 6.5W liggen. Dat is eigenlijk minstens even goed als de N100 kastjes..

Nu is er natuurlijk geen review over de 4800H variant dus ik durf niet te zeggen hoe het idle verbruik daarvan is, en of die 6.5W nog verbeterd kan worden..

[ Voor 10% gewijzigd door Kuusj op 12-10-2023 13:58 ]

[Jormungandr]

Voor de kubernetes lovers onder ons:
Op mijn N100 setup scheelt het idle 2 watt tussen docker en een verse k3s cluster.
Daar waar ik met docker stabiel op 6W zit, gaat de meter met k3s naar 8W met af en toe sprongen naar 7W maar ook naar +/- 16W.

[Mars Warrior]

Jormungandr schreef op donderdag 12 oktober 2023 @ 16:11:
Voor de kubernetes lovers onder ons:
Op mijn N100 setup scheelt het idle 2 watt tussen docker en een verse k3s cluster.
Daar waar ik met docker stabiel op 6W zit, gaat de meter met k3s naar 8W met af en toe sprongen naar 7W maar ook naar +/- 16W.

Kun je ook nog de CPU en System load erbij zetten?

Aangezien de N100 E-Cores heeft kan het zomaar zijn dat deze toch flink belast worden. Mijn teruggeklokte E-Cores van mijn 12700K doen ook "maar" 3-4W bij 100% belasting namelijk.

[Metalman]

Kuusj schreef op donderdag 12 oktober 2023 @ 13:58:
Ik kwam deze tegen: https://store.minisforum.....0&variant=41915825979575
Met een AMD Ryzen 7 4800H. Nu met een kortingscode (DLE0Z1D9CTPS) barebones voor 179,-..
Natuurlijk niet te vergelijken met de N100 qua CPU performance.

Er is wel een review van Notebookcheck over de nieuwere variant (560XT, met een 5600H) (https://www.notebookcheck...dable-price.719275.0.html) en daar zou het idle verbruik rond de 6.5W liggen. Dat is eigenlijk minstens even goed als de N100 kastjes..

Nu is er natuurlijk geen review over de 4800H variant dus ik durf niet te zeggen hoe het idle verbruik daarvan is, en of die 6.5W nog verbeterd kan worden..

Toevallig heb ik mijn barebone UM480XT gisteren binnen gekregen. Hij staat nu as we speak op mijn bureau te draaien. 2x 16 GB RAM en een Samsung 980 1 TB NVME erin, met alleen een Gigabit netwerkkabel aangesloten. Proxmox geinstalleerd, er draait nu 1 VM op. Idle verbruik is 5.4 Watt volgens mijn Brennenstuhl PM231E. En ik heb nog niets getuned eigenlijk...

Ik ben prettig verrast qua stroomverbruik. Vooraf verbaasde ik me dat ik nauwelijks reviews kon vinden van de 480XT maar voor deze prijs wilde ik het gokje wel wagen. Geen spijt van

[Kuusj]

Metalman schreef op vrijdag 13 oktober 2023 @ 12:13:
[...]

Toevallig heb ik mijn barebone UM480XT gisteren binnen gekregen. Hij staat nu as we speak op mijn bureau te draaien. 2x 16 GB RAM en een Samsung 980 1 TB NVME erin, met alleen een Gigabit netwerkkabel aangesloten. Proxmox geinstalleerd, er draait nu 1 VM op. Idle verbruik is 5.4 Watt volgens mijn Brennenstuhl PM231E. En ik heb nog niets getuned eigenlijk...

Ik ben prettig verrast qua stroomverbruik. Vooraf verbaasde ik me dat ik nauwelijks reviews kon vinden van de 480XT maar voor deze prijs wilde ik het gokje wel wagen. Geen spijt van

Tja, dan is het eigenlijk een no-brainer t.o.v. een N100 kastje. Dankjewel voor de feedback.

[Church of Noise]

Systeem:
- Intel NUC 11 Pro i3
- CPU: Intel i3-1115-g4
- Disk: Samsung 970 evo plus 500gb
- RAM: 8GB

BIOS:
- SafeBoot uitgeschakeld

Software:

- OS: DietPi met onderliggend Debian Bookworm
- Settings:
--- Kernel parameters: standaard
--- TLP settings:

code:

TLP_DEFAULT_MODE=BAT

TLP_PERSISTENT_DEFAULT=1

CPU_SCALING_GOVERNOR_ON_BAT=powersave

CPU_ENERGY_PERF_POLICY_ON_BAT=power


SCHED_POWERSAVE_ON_BAT=1

NMI_WATCHDOG=0

PCIE_ASPM_ON_BAT=powersupersave

RUNTIME_PM_ON_BAT=auto

Meetinstrument: Shelly Plug S

Vermogen:
- Met USB toetsenbord en muis en met HDMI kabel voor scherm ingeschakeld, netwerk ingeschakeld en verbonden: 3.8W
- Zonder toetsenboard, scherm en muis maar mét netwerkkabel: 3.1W

Haalt sinds een recente update ook C10.

-----------------

Systeem:
- Intel NUC 11 essential nuc11atkc2
- CPU: Intel Celeron N4505
- Disk: Samsung 970 evo plus 500gb
- RAM: 8GB

BIOS:
- SafeBoot uitgeschakeld

Software:

- OS: DietPi met onderliggend Debian Bookworm
- Settings:
--- Kernel parameters: standaard
--- TLP settings:

code:

TLP_DEFAULT_MODE=BAT

TLP_PERSISTENT_DEFAULT=1

CPU_SCALING_GOVERNOR_ON_BAT=powersave

CPU_ENERGY_PERF_POLICY_ON_BAT=power


SCHED_POWERSAVE_ON_BAT=1

NMI_WATCHDOG=0

PCIE_ASPM_ON_BAT=powersupersave

RUNTIME_PM_ON_BAT=auto

Meetinstrument: Shelly Plug S

Vermogen:
- Zonder toetsenboard, scherm en muis maar mét netwerkkabel: 1.5W dus A++++ @mrmrmr

Haalt package state C10.

[ Voor 3% gewijzigd door Church of Noise op 03-12-2023 21:11 ]

[RobertMe]

Metalman schreef op vrijdag 13 oktober 2023 @ 12:13:
[...]

Toevallig heb ik mijn barebone UM480XT gisteren binnen gekregen. Hij staat nu as we speak op mijn bureau te draaien. 2x 16 GB RAM en een Samsung 980 1 TB NVME erin, met alleen een Gigabit netwerkkabel aangesloten. Proxmox geinstalleerd, er draait nu 1 VM op. Idle verbruik is 5.4 Watt volgens mijn Brennenstuhl PM231E. En ik heb nog niets getuned eigenlijk...

Ik ben prettig verrast qua stroomverbruik. Vooraf verbaasde ik me dat ik nauwelijks reviews kon vinden van de 480XT maar voor deze prijs wilde ik het gokje wel wagen. Geen spijt van

Interessant ding. Maar als ik het goed zie geen SATA? (noch aansluitingen noch plaats in behuizing)?

Anders zou die wel interessant zijn voor een server / backup toepassing. Maar voor "backup" is een losse HDD (/SSD) wel handig IMO.

Edit:
Slecht zitten lezen dus, thanks @helloitsme hieronder.

[ Voor 3% gewijzigd door RobertMe op 13-10-2023 17:21 ]

[helloitsme]

RobertMe schreef op vrijdag 13 oktober 2023 @ 17:03:
[...]

Interessant ding. Maar als ik het goed zie geen SATA? (noch aansluitingen noch plaats in behuizing)?

Anders zou die wel interessant zijn voor een server / backup toepassing. Maar voor "backup" is een losse HDD (/SSD) wel handig IMO.

Storage Expansion

2.5 inch SATA HDD Slot x 1 (SATA 3.0, 6.0Gb/s)

[andru123]

Church of Noise schreef op vrijdag 13 oktober 2023 @ 16:08:
Systeem:
- Intel NUC 11 Pro i3
- Intel NUC 11 essential nuc11atkc2

1,5W mooi resultaat!
Dus Celeron toch 1,5W minder verbruikt dan i3. Tenzij op nuc pro heel veel andere HW zit. Pics of links? Welke adapter?

[Church of Noise]

Mja, de Celeron is Jasper Lake (beetje een doorontwikkeling van Atom), de 1115G4 is een Tiger lake, mobiele CPU als ik met niet vergis. Ik vermoed dat het dus niet enkel zal verschillen op gebied van CPU.

Morgen open ik ze even en maak wat foto's.

De adapters zijn beide de originele, ik deel morgen nog wat meer details.

Enige wat ik nu nog ga doen is een passieve Akasa Newton case erom doen, maar daarvoor moet ik eerst de Nuc 8 met de Aksa Plato case (2.7W) en de Nuc 11 Pro (3.1W) verkocht hebben. Ik verwacht niet dat het vermijden van de casefan nu nog 0.5W gaat vermijden, maar het gaat om het principe.

Het gaat nu wel even stoppen overigens, heb uiteindelijk 5 systemen op een paar maand tijd geprobeerd om tot dit resultaat te komen.

[user109731]

Ik heb Home Assistant draaien in een Proxmox VM op een NUC 13 i3 (zie eerdere posts). Dit gebruikt normaal stabiel 5W of 6W volgens een energy socket, maar nu met HA OS v11 is dat flink gedaald naar ~3W.

Meer mensen die een verschil in verbruik zien met HA OS 11?

[Church of Noise]

Er is iets dat ik niet goed snap: m'n NUC8 heeft exact dezelfde tlp config etc als de 2 NUC11's die ik hierboven besprak.
Echter, bij de NUC11 essential bvb zie ik de CPU frequency continu op 800Mhz (het minimum) terwijl bij de NUC 8 dit een typisch beeld is (bij lage belasting overigens, orde 2-3%):

code:

 ─────────────────────────────────────────────────────
 DietPi CPU Info
 Use dietpi-config to change CPU / performance options
 ─────────────────────────────────────────────────────
 Architecture |     x86_64
 Temperature  |     33 °C / 91 °F : Cool runnings
 Governor     |     powersave

                 Current Freq    Min Freq   Max Freq
 CPU0         |      3000 MHz      400 MHz    3000 MHz
 CPU1         |      1350 MHz      400 MHz    3000 MHz
 CPU2         |      1452 MHz      400 MHz    3000 MHz
 CPU3         |      1449 MHz      400 MHz    3000 MHz

Ondanks powersave blijken de frequenties dus een pak boven minimum te liggen.

Enige dat ik me kan indenken is dat ik in het BIOS een optie rond 'low power' heb aangevinkt, waar ik bij de andere helemaal geen optie heb aangevinkt. Dus mss neemt het systeem het daar over.
Heeft iemand hier ervaring mee?

Ik ga ondertussen eens scherm etc aansluiten op de NUC8 en eens kijken als dat nu het verschil maakt...

[aerendur]

Ik ben al een paar weken rustig aan het browsen en onderzoeken voor een betere (t)huisserver setup.
De huidige situatie:
Rockpi - HA/Deconz/Nextcloud/uniti/bitwarden - Ubuntu Server met dockers
(oude) Synology NAS - backups/downloads

Hieraan wil ik home streaming toevoegen om in de toekomst van alle betaaldiensten af te stappen. Zowel muziek (plexamp of Roon) en video (plex / jellyfin). De NAS staat uit tussen 12-7 en soms zelfs voor langere periodes. Daarnaast wil ik enkele test setups gaan draaien voor AI waar ik onderzoek naar doe. Maar dat kan ook een losse testbench worden.

Wat is een goede setup om voor te gaan, zeker gezien verbruik? Eén grote server, denk richting de setup van bijvoorbeeld Mars Warrior. Of een kleine always on, sterk genoeg voor muziek en ha/uniti en een sterkere voor video stuff en AI?

Ook zag ik een announcement van de Zimacube, dat klinkt als een prima setup, afhankelijk van de mogelijkheden in energiebeperking. Wat denken jullie hiervan?

[MvandeK]

user109731 schreef op zaterdag 14 oktober 2023 @ 08:25:
Ik heb Home Assistant draaien in een Proxmox VM op een NUC 13 i3 (zie eerdere posts). Dit gebruikt normaal stabiel 5W of 6W volgens een energy socket, maar nu met HA OS v11 is dat flink gedaald naar ~3W.

Meer mensen die een verschil in verbruik zien met HA OS 11?

Ik draai grotendeels dezelfde omgeving als jij, alleen dan op een NUC 12 i3. Bij mij is hetzelfde resultaat zichtbaar na de update naar HA OS 11: veel lagere belasting van de VM.

Bij mij is de gemiddelde belasting gedaald van 10% naar 2%.

[Mars Warrior]

MvandeK schreef op zaterdag 14 oktober 2023 @ 10:26:
[...]
Ik draai grotendeels dezelfde omgeving als jij, alleen dan op een NUC 12 i3. Bij mij is hetzelfde resultaat zichtbaar na de update naar HA OS 11: veel lagere belasting van de VM.

Bij mij is de gemiddelde belasting gedaald van 10% naar 2%.

Komt dat niet door de nieuwere versie van Python? Die is een stuk sneller / efficiënter namelijk.

Ik gok dit nu ff, want ik weet niet vanaf welke versie dit is van HA OS.

De HA container verbruikt bij mij sinds een tijdje ook een stuk minder CPU cycles.

[ Voor 7% gewijzigd door Mars Warrior op 14-10-2023 11:56 ]

[Rikkert.]

Wordt tijd om mijn HP Elitedesk te upgraden (i7 6700, 16gb ram, 2tb m2).

Ik gebruik server met Unraid inc *arr dockers, jellyfin en Nextcloud. Ik zoek vooral iets wat klein in formaat is maar alsnog ruimte voor 2xHDD en redelijk zuinig. Draai nu 15-20w idle :-)

Zelf ben ik nu op het volgende uitgekomen. Het grootste nadeel vind ik de 2.5" HDD, gezien het aanbod beperkt is en de schijven niet al te groot zijn...
Zijn er nog andere kleine kastjes die wel 2x 3.5" hebben maar dan niet meteen gigantisch worden?

Zonee, hoe is onderstaande?
Bedankt voor inpit alvast

#	Category	Product	Prijs	Subtotaal
1	Processors	Intel Core i3-10100 Boxed	€ 117,14	€ 117,14
2	Interne harde schijven	Seagate Barracuda Compute 2,5" (5400rpm), 5TB	€ 99,99	€ 199,98
1	Barebones	ASRock DeskMini H470 Series	€ 187,35	€ 187,35
1	Geheugen intern	Crucial CT16G4SFRA32A	€ 33,50	€ 33,50
Bekijk collectie Importeer producten			Totaal	€ 537,97

[Yarisken]

Vroegere nuc's kreeg je die 15mm schijven er niet in. Weet niet of die seagate een optie is voor je.

[audiojunk]

Ook een Minisforum barebone UM480 besteld, is inderdaad een betere deal dan de N100 op Aliepress.

[musicpixel]

aerendur schreef op zaterdag 14 oktober 2023 @ 10:21:
Ik ben al een paar weken rustig aan het browsen en onderzoeken voor een betere (t)huisserver setup.
De huidige situatie:
Rockpi - HA/Deconz/Nextcloud/uniti/bitwarden - Ubuntu Server met dockers
(oude) Synology NAS - backups/downloads

Hieraan wil ik home streaming toevoegen om in de toekomst van alle betaaldiensten af te stappen. Zowel muziek (plexamp of Roon) en video (plex / jellyfin). De NAS staat uit tussen 12-7 en soms zelfs voor langere periodes. Daarnaast wil ik enkele test setups gaan draaien voor AI waar ik onderzoek naar doe. Maar dat kan ook een losse testbench worden.

Wat is een goede setup om voor te gaan, zeker gezien verbruik? Eén grote server, denk richting de setup van bijvoorbeeld Mars Warrior. Of een kleine always on, sterk genoeg voor muziek en ha/uniti en een sterkere voor video stuff en AI?

Ook zag ik een announcement van de Zimacube, dat klinkt als een prima setup, afhankelijk van de mogelijkheden in energiebeperking. Wat denken jullie hiervan?

Ik ben ook aan het onderzoeken om mijn 10 jaar oude server te vervangen (Pentium G2020, 11x HDD, 2xSSD).

Deze heeft altijd prima gewerkt met Plex zolang de client maar de het video-formaat ondersteunt en er geen video-transcoding gedaan hoeft te worden, in mijn geval de Chromecasts. Lichtere transcoding van 1 stream redt mijn huidige server op de cpu nog wel.

Plex kan ook hardware transcoding doen (gpu) als je een PlexPass hebt en je hardware het ondersteunt (die G2020 van mij dus niet). Het onderzoek wat ik tot nu toe gedaan heb lijkt uit te wijzen dat een cpu met Intel Quick Sync Video de meest handige oplossing hiervoor is.

Als je overgaat naar lokaal streamen ipv streamingdiensten hou er dan rekening mee dat je opslag nodig hebt en dit makkelijk uit kunt breiden.

Zelf vind ik het prettig dat muziek en video gewoon 24/7 te gebruiken is en dat ik niet eerst een server aan hoef te zetten. Als harde schijven in spindown kunnen scheelt dat flink in het verbruik.

Muziek kost relatief weinig opslag en processorkracht.

Mijn plan is om alle media (video) op hdd op te slaan (met spindown), net als andere grote bestanden die ik weinig gebruik. Bestanden die ik veelvuldig gebruik, of niet zoveel ruimte innemen komen op SSD. Ik heb nu nog meerdere kleine HDDs die ik ga consolideren tot enkele grote.

Huidige server ga ik waarschijnlijk hergebruiken om backups op op te slaan en wil ik alleen (automatisch) aan zetten als de backup moet plaatsvinden. Nog niet helemaal zeker hoe ik dat ga doen.

Ik draai op dit moment HA op een NUC (met Proxmox), maar dit moet uiteindelijk verhuizen naar de nieuwe server, met waarschijnlijk een NUC als failover. Wil ook nog een stel andere VMs en dockers gaan draaien, maar weet nog niet precies hoe ik dat ga inrichten.

Maar zoals ik al zei, ik ben nog dingen aan het uitvogelen

Wat die ZimaCube betreft: ziet er best aardig uit zo op het eerste gezicht, maar hij is er nog niet. Zelfs de kickstarter moet nog beginnen, dus hoe lang het gaat duren voor ie leverbaar is? En wat dan het verbruik gaat zijn? Persoonlijk heb ik ook liever volledige controle over de hardware en OS/software die ik gebruik.

[NIK0]

musicpixel schreef op zaterdag 14 oktober 2023 @ 15:55:
[...]


Huidige server ga ik waarschijnlijk hergebruiken om backups op op te slaan en wil ik alleen (automatisch) aan zetten als de backup moet plaatsvinden. Nog niet helemaal zeker hoe ik dat ga doen.

Je kunt bij een aantal BIOS-en stoeien met de tijden dat je PC aan moet gaan, dat is wellicht al genoeg voor je use-case. (voorbeeld: https://www.wikihow.com/A...puter-at-a-Specified-Time)

Heb zelf ooit met Python iets in elkaar gezet die een WoL stuurde naar mijn backup NASje op backup dag en ik kreeg dan ook een berichtje op Telegram of de Server ook echt up was gekomen.

[eheijnen]

Ik heb laatst een post gelezen van iemand die een Inter-Tech PicoPSU ging aanschaffen. Weet niet meer of het nou om de 200 of 160 watt variant ging. In ieder geval zei diegene dat hij nog een post zou doen met de ervaringen.

Ben eigenlijk benieuwd naar de ervaring hiermee en hoe deze afsteekt tegen de Minibox spullen...c.q. of daar veel verschil in zit?

[mrmrmr]

@eheijnen Inter-Tech koopt in bij derde partijen, meestal Chinese. Ik heb een overzicht van de markt (fabrikanten en merken) gemaakt 3 jaar geleden.

Inter-Tech koopt van Lianda/LDCX. Opmerkelijk is dat Inter-Tech 120W noemt in plaats van de 90W van Lianda. 120W is misschien een kort piekvermogen bij een bepaalde verdeling van de belasting, maar een fabrikant moet daarmee niet adverteren, dat is misleidend. Het is aan te raden bij de fabrikant na te gaan wat de maximale continue belasting per spanning is.

Het inzicht is dat er echt een verschil is in kwaliteit tussen bijvoorbeeld Mini-Box en de doorsnee kloon, met name in het gebruik van chips van Texas Instruments, maar ook andere componenten zoals condensatoren. Klonen richten zich voornamelijk op een zo goedkoop mogelijke productie (BOM: Bill of Materials) en gebruiken vaak goedkoop Chinees materiaal.

Het ontwerp van Mini-Box PicoPSU's is omstreeks 15 jaar oud alweer. Er zijn sindsdien geen ontwerpwijzigingen geweest voor zover ik weet. Maar er zijn wel nieuwe chips van Texas Instruments, het is denk ik mogelijk om een nog zuiniger ontwerp te maken. Maar de patenthouder noch de kloonfabrikanten vertonen aanstalten daar iets mee te doen.

Voor grotere systemen is er wel ontwikkeling geweest bij HDPlex, o.a. een GaN voeding. Efficientiegrafieken van andere fabrikanten tonen dat GaN vooral efficient is bij zware belasting, niet zozeer voor ons doel van een zuinig idle. HDPlex is niet gemaakt voor zuinigheid maar voor formaat. Het toepassingsgebied zijn kleine gaming systemen.

[eheijnen]

mrmrmr schreef op zondag 15 oktober 2023 @ 13:11:
@eheijnen Inter-Tech koopt in bij derde partijen, meestal Chinese. Ik heb een overzicht van de markt (fabrikanten en merken) gemaakt 3 jaar geleden.....

Ik geloof ten zeerste (met alle respect) dat de Minibox PSU de beste is. Dat laten de metingen van jullie allemaal zien.
Kontron levert fantastische mobo's maar zoals je ziet komen er doosjes van Topton langs met resultaten die zich ook kunnen laten zien.

Ik zou graag de vraag nog even open laten voor degene die dat laatst hier aanhaalde (heb gezocht maar kon de post van hem niet meer vinden..)

Desondanks ben ik, voor de aardigheid, geïnteresseerd in het verschil en/of hoe die Inter-Tech presteert. Hier nog even de link:
uitvoering: Inter-Tech MINI-ITX PSU 200W NAS

[mrmrmr]

eheijnen schreef op zondag 15 oktober 2023 @ 14:06:
Desondanks ben ik, voor de aardigheid, geïnteresseerd in het verschil en/of hoe die Inter-Tech presteert. Hier nog even de link:
uitvoering: Inter-Tech MINI-ITX PSU 200W NAS

Dat is deze.

Die heb ik eerder hier besproken.

De efficiëntie wordt niet gegeven, maar als je kijkt naar hoe het vermogen is bereikt, kun je daar wel iets over schatten. Een vergelijking van de PicoPSU-80 met PicoPSU-160XT is het duidelijk dat de laatste minder efficiënt is. Bij deze Lianda zie je dat ze meer van hetzelfde hebben toegepast om het vermogen te vergroten: meer van dezelfde chips, meer condensatoren (die gele blokjes). De overhead zal dus groter zijn dan een kleinere voeding. Lianda noemt nergens zuinigheid als criterium, wel hebben ze het over performance.

[ Voor 44% gewijzigd door mrmrmr op 15-10-2023 15:00 ]

[Yarisken]

Ik ben aan het kijken om een zuinige M2 in mijn server te steken.

categorie: Solid state drives

Kan iemand mij wat duiding geven welke heel zuinig zijn ?

De western digitals komen wel regelmatig terug als zuinig.

uitvoering: WD Black SN770 2TB

[Mars Warrior]

Yarisken schreef op zondag 15 oktober 2023 @ 18:02:
Ik ben aan het kijken om een zuinige M2 in mijn server te steken.

categorie: Solid state drives

Kan iemand mij wat duiding geven welke heel zuinig zijn ?

De western digitals komen wel regelmatig terug als zuinig.

uitvoering: WD Black SN770 2TB

De Sn770 is behalve erg zuinig in idle ook erg efficient als deze wat moet doen: https://www.tomshardware....-black-sn770-ssd-review/2

[ Voor 17% gewijzigd door Mars Warrior op 15-10-2023 18:46 ]

[Yarisken]

Mars Warrior schreef op zondag 15 oktober 2023 @ 18:44:
[...]

De Sn770 is behalve erg zuinig in idle ook erg efficient als deze wat moet doen: https://www.tomshardware....-black-sn770-ssd-review/2


[Afbeelding]

Bedankt voor de info ! Ik was er ook al naar aan het kijken.

[CAPSLOCK2000]

Yarisken schreef op zondag 15 oktober 2023 @ 18:02:
Ik ben aan het kijken om een zuinige M2 in mijn server te steken.

categorie: Solid state drives

Kan iemand mij wat duiding geven welke heel zuinig zijn ?

De western digitals komen wel regelmatig terug als zuinig.

uitvoering: WD Black SN770 2TB

Voor mezelf had ik net de uitvoering: Lexar NM790 (zonder heatsink) 2TB uitgezocht als de beste combinatie van zuinig & perfomance. Die WD-Black SN770 stond ook in mijn top 3 dus dat is ook een goede keuze.

[blehz]

Voor zij die het willen riskeren (en anders stuur je hem terug); HM80 32GB/512GB met 2xLAN + 2xSATA voor € 279.
Het type nummer zegt wel UM480 XT maar de rest van de pagina gaat over de HM80. Ook bij de reviews zie je de HM80 op de foto. Lijkt me een nette prijs.

[moepie]

De amazon feed komt momenteel met meerdere N100 mini-pc's met dubbele netwerk poort, 16GB geheugen en een SSD van 512TB (bv Minis Forum UN100C).

Mijn thuis server is op dit moment een ASUS PRIME Z370-P gaming motherboard met daarin een gedownthrottlede i5 8400 met 32GB, een kingston nvme SSD, een HDD en 4xintel i350 netwerkkaart, waar maar 2 putjes van worden gebruikt (in en uit), USB zigbee stick, USB p1 reader. Er draait proxmox op met pfsense, generic linux nas/backup, wat containers voor home assistant, p1 reader, zonnepaneel uitlezer, discord bot en een reverseproxy met websites. Het verbruik is 32 watt per uur

Ons goedkoop 3 jaars vast elektriciteits contract loopt oktober 2024 af, er is dus geen haast. 1 watt per uur kost omgerekend 2,20 per jaar.

Mijn vragen:
- zijn er al verbruiks metingen van die kleine N100 mini-pcs?
- zijn er al ervaringen met het gebruik 24/7 gebruik van deze N100 mini-p's?
- is het verbruik van zo'n N100 mini-pc zodanig laag dat zelf klussen van een zuinige server om de financien niet meer hoeft?

[RobertMe]

moepie schreef op maandag 16 oktober 2023 @ 13:09:
De amazon feed komt momenteel met meerdere N100 mini-pc's met dubbele netwerk poort, 16GB geheugen en een SSD van 512TB (bv Minis Forum UN100C).

Mijn thuis server is op dit moment een ASUS PRIME Z370-P gaming motherboard met daarin een gedownthrottlede i5 8400 met 32GB, een kingston nvme SSD, een HDD en 4xintel i350 netwerkkaart, waar maar 2 putjes van worden gebruikt (in en uit), USB zigbee stick, USB p1 reader. Er draait proxmox op met pfsense, generic linux nas/backup, wat containers voor home assistant, p1 reader, zonnepaneel uitlezer, discord bot en een reverseproxy met websites. Het verbruik is 32 watt per uur

Ons goedkoop 3 jaars vast elektriciteits contract loopt oktober 2024 af, er is dus geen haast. 1 watt per uur kost omgerekend 2,20 per jaar.

Mijn vragen:
- zijn er al verbruiks metingen van die kleine N100 mini-pcs?
- zijn er al ervaringen met het gebruik 24/7 gebruik van deze N100 mini-p's?
- is het verbruik van zo'n N100 mini-pc zodanig laag dat zelf klussen van een zuinige server om de financien niet meer hoeft?

Heb je in dit topic al gezocht op "N100"? Denk dat je daarin al een antwoord op de vragen kunt vinden.

Verbruik lijkt rond de 8W te bungelen (op basis van in ieder geval Asus & Asrock borden, maar volgens mij zaten er ook no name Chinese doosjes tussen). En dat vind ik fors meer dan de ~2W die een kaal N5105 systeem verbruikt. Uiteraard geeft een N100 dan wel meer performance als daar behoefte aan is. Maar ik vind mijn N5105 systeempje(s) zeker niet slecht. Tweede N5105 die ik heb is een TopTon als router. Dus die doet sowieso geen zwaardere taken en dus lastig te schatten op performance vlak. De ander draait ik schat een 20 tal Docker containers waaronder bv Home Assistant.
Of je dat verbruik laag genoeg vind om niet aan te hoeven tweaken zul je dan zelf moeten bepalen.

En gezien het een vrij nieuwe SoC is denk ik dat er nog geen echte (langdurige) ervaringen bekend zijn. Hoogstens over een maand of twee? Terwijl je het systeem waarschijnlijk zeker 2 jaar wilt gebruiken, als niet inzet op 5 jaar. Dus dan zegt 2 maanden niks over betrouwbaarheid etc.

[mrmrmr]

@moepie Onder de knop gepinde posts kun je metingen vinden van moederborden.

Er zijn al best wat N100 systemen getest:
Sakke1994 in "Het grote zuinige server topic - deel 3"
Devil103 in "Het grote zuinige server topic - deel 3"
Sakke1994 in "Het grote zuinige server topic - deel 3"
CAPSLOCK2000 in "Het grote zuinige server topic - deel 3"
Jormungandr in "Het grote zuinige server topic - deel 3"

De i350 quad netwerkkaart die je hebt zorgt voor een hoog verbruik. Je kunt beter een i210/i211 netwerkkaart bijplaatsen. Voor deze generatie van moederborden hadden fabrikanten nog niet helemaal door hoe ze een zuinig desktop systeem moesten maken (behalve Fujitsu of ASRock DeskMini). Maar toch vind ik het verbruik aan de hoge kant, kijk eens of er processen draaien die niet nodig zijn. Vaak gaat het over processen voor virtual machines, monitoring en gedistribueerde systemen. Bij monitoring wordt soms overdreven vaak gelogd, terugbrengen van de frequentie kan de belasting omlaag schroeven. De inrichting is minstens even belangrijk als de hardware. Optimalisatie voor Linux kun je vinden in de topic start.

De goedkopere kastjes zijn doorgaans een stuk minder zuinig dan de zelf in elkaar gezette systemen met een moederbord van gevestigde fabrikanten.

Let op dat je investering doet voor 5+ jaar. 1 jaar is korte termijn is van ondergeschikt (20%) belang aan het totaal. Bij een professionele berekening betrek je de kosten van aanschaf, de lopende kosten (zoals energie), de termijn (fiscaal en economisch 5 jaar), en renteverlies.

[RobertMe]

Event naar het juiste topic trekken.

Wachten... schreef op maandag 16 oktober 2023 @ 16:21:
[...]


Ik snap dan alleen niet dat die i3 9100 zo populair is geweest, die heeft een TDP van 65 watt. ik zal zo wel even mijn vraag openen in het andere topic

TPD zegt alleen indirect iets over verbruik. Het gaat over Termal Design Power, wat wil zeggen het thermische vermogen, oftewel warmteonwikkeling, oftewel hoeveel koeling er vereist is. Met een i3-9100 zijn er met bepaalde Fujitsu (tegenwoordig Kontron) moederborden verbruikerscijfers van onder de 2W behaald. Dus het is zeker wel een zuinige CPU Alleen kan die dus ook veel energie verbruiken (en daarmee warmte ontwikkelen) als je hem stevig aan de tand voelt.
Maar datzelfde zul je ook zien bij andere zuinige systemen. Wellicht niet de 65W aan TPD, maar zeker wel een veelvoud van het (zuinige) idle verbruik.

En nu we toch in het juiste topic zitten. Zuinig kan ook krachtig zijn. Mars Warrior draait een 12th gen i7 op 3W idle.

[Wachten...]

RobertMe schreef op maandag 16 oktober 2023 @ 16:27:
Event naar het juiste topic trekken.


[...]

TPD zegt alleen indirect iets over verbruik. Het gaat over Termal Design Power, wat wil zeggen het thermische vermogen, oftewel warmteonwikkeling, oftewel hoeveel koeling er vereist is. Met een i3-9100 zijn er met bepaalde Fujitsu (tegenwoordig Kontron) moederborden verbruikerscijfers van onder de 2W behaald. Dus het is zeker wel een zuinige CPU Alleen kan die dus ook veel energie verbruiken (en daarmee warmte ontwikkelen) als je hem stevig aan de tand voelt.
Maar datzelfde zul je ook zien bij andere zuinige systemen. Wellicht niet de 65W aan TPD, maar zeker wel een veelvoud van het (zuinige) idle verbruik.

En nu we toch in het juiste topic zitten. Zuinig kan ook krachtig zijn. Mars Warrior draait een 12th gen i7 op 3W idle.

Goed om te weten.

En als we dan aanschafkosten ook meenemen. Er zijn heel wat systemen zoals HP prodesk, en Lenovo thinkcentre etc. Met wat oudere 7de of 8ste generatie die je voor onder de 100 euro aan kunt schaffen. Als deze dan ook een laag verbruik hebben, dan is dat ook nog wel interessant toch?

Ik vind het alleen lastig bepalen wat het idle verbruik is van die dingen. Kun je dat op een manier achterhalen?

(Voor diegene die het niet hebben meegekregen, ik zoek een mini pc die proxmox kan draaien met wat containers en 2 vm's voor o.a. home assistant)

[moepie]

RobertMe schreef op maandag 16 oktober 2023 @ 13:36:
[...]

Heb je in dit topic al gezocht op "N100"? Denk dat je daarin al een antwoord op de vragen kunt vinden.
…

Ik had al gezocht, maar vond niet de info waarnaar ik zocht.

Dank voor het snelle antwoord, een paar dingen om over na te denken. Van een 2 watts systeem kan je er meerdere gebruiken (alhoewel een switch ook een watt of zo per poort trekt).

[RobertMe]

Wachten... schreef op maandag 16 oktober 2023 @ 16:42:
[...]


Goed om te weten.

En als we dan aanschafkosten ook meenemen. Er zijn heel wat systemen zoals HP prodesk, en Lenovo thinkcentre etc. Met wat oudere 7de of 8ste generatie die je voor onder de 100 euro aan kunt schaffen. Als deze dan ook een laag verbruik hebben, dan is dat ook nog wel interessant toch?

Ik vind het alleen lastig bepalen wat het idle verbruik is van die dingen. Kun je dat op een manier achterhalen?

HP Prodesks en Dells (Optiplex?) (en ThinkCenters?) komen in dit topic en de voorgaande reeksen ook zo nu en dan voorbij (voornamelijk ook de categorie "tweedehands voor een appel en een ei gekocht). Dus mogelijk dat je in dit topic of het vorige deel wat cijfers kunt vinden.

[Remc0_]

Wachten... schreef op maandag 16 oktober 2023 @ 16:42:
[...]


Goed om te weten.

En als we dan aanschafkosten ook meenemen. Er zijn heel wat systemen zoals HP prodesk, en Lenovo thinkcentre etc. Met wat oudere 7de of 8ste generatie die je voor onder de 100 euro aan kunt schaffen. Als deze dan ook een laag verbruik hebben, dan is dat ook nog wel interessant toch?

Ik vind het alleen lastig bepalen wat het idle verbruik is van die dingen. Kun je dat op een manier achterhalen?

(Voor diegene die het niet hebben meegekregen, ik zoek een mini pc die proxmox kan draaien met wat containers en 2 vm's voor o.a. home assistant)

Voor meer over energieverbruik kan je op deze website kijken:
https://www.parkytowers.me.uk/thin/

Deze gaat compleet over oude thin clients en heeft ook vergelijkingen qua energieverbruik.

[moepie]

mrmrmr schreef op maandag 16 oktober 2023 @ 13:38:
@moepie Onder de knop gepinde posts kun je metingen vinden van moederborden.

Er zijn al best wat N100 systemen getest:
Sakke1994 in "Het grote zuinige server topic - deel 3"
Devil103 in "Het grote zuinige server topic - deel 3"
Sakke1994 in "Het grote zuinige server topic - deel 3"
CAPSLOCK2000 in "Het grote zuinige server topic - deel 3"
Jormungandr in "Het grote zuinige server topic - deel 3"

De i350 quad netwerkkaart die je hebt zorgt voor een hoog verbruik. Je kunt beter een i210/i211 netwerkkaart bijplaatsen. Voor deze generatie van moederborden hadden fabrikanten nog niet helemaal door hoe ze een zuinig desktop systeem moesten maken (behalve Fujitsu of ASRock MiniDesk). Maar toch vind ik het verbruik aan de hoge kant, kijk eens of er processen draaien die niet nodig zijn. Vaak gaat het over processen voor virtual machines, monitoring en gedistribueerde systemen. Bij monitoring wordt soms overdreven vaak gelogd, terugbrengen van de frequentie kan de belasting omlaag schroeven. De inrichting is minstens even belangrijk als de hardware. Optimalisatie voor Linux kun je vinden in de topic start.

De goedkopere kastjes zijn doorgaans een stuk minder zuinig dan de zelf in elkaar gezette systemen met een moederbord van gevestigde fabrikanten.

Let op dat je investering doet voor 5+ jaar. 1 jaar is korte termijn is van ondergeschikt (20%) belang aan het totaal. Bij een professionele berekening betrek je de kosten van aanschaf, de lopende kosten (zoals energie), de termijn (fiscaal en economisch 5 jaar), en renteverlies.

Dank voor de links, ik heb ze allemaal bestudeerd. Dit forum onderwerp is voor mijn invalide hoofd een enorme opeenstapeling en vervlechting van feitjes en aanvullingen. Echt hard werk om op te werken naar voor mij begrijpbare informatie.

Conclusie: als je de juiste hebt kan je onder de 10 watt komen. Daar moeten dan ook weer twee usb adapters aan (p1 adapter en zigbee adapter) en er moet wat gebeuren voor mijn nas/backup. Kom je lager uit dan de huidige 32 watt, maar het wordt niet extreem goedkoop. Het is dus geen no-brainer click now aankoop. De beslissing een jaar uitstellen scheelt minder dan 190 kwh (=45 euro onder huidig contract), zeker als ik nog wat containers/vms weet uit te zetten.

[Wachten...]

Remc0_ schreef op maandag 16 oktober 2023 @ 16:52:
[...]


Voor meer over energieverbruik kan je op deze website kijken:
https://www.parkytowers.me.uk/thin/

Deze gaat compleet over oude thin clients en heeft ook vergelijkingen qua energieverbruik.

Dank Remco.

En inderaad @RobertMe zie ik de 9100 en 9100t enorm veel voorbij komen overal.

Ik kwam ook de 7500t tegen met een beetje dezelfde specs (wel langzamer), maar waarom kan ik nagenoeg 0 posts vinden in dit topic van deze processor? Soms is het echt lastig te achterhalen waarom sommige CPUs enorm populair zijn, en andere niet, terwijl ze er op papier nagenoeg gelijk uit zien.

[ferno]

Metalman schreef op vrijdag 13 oktober 2023 @ 12:13:
[...]

Toevallig heb ik mijn barebone UM480XT gisteren binnen gekregen. Hij staat nu as we speak op mijn bureau te draaien. 2x 16 GB RAM en een Samsung 980 1 TB NVME erin, met alleen een Gigabit netwerkkabel aangesloten. Proxmox geinstalleerd, er draait nu 1 VM op. Idle verbruik is 5.4 Watt volgens mijn Brennenstuhl PM231E. En ik heb nog niets getuned eigenlijk...

Ik ben prettig verrast qua stroomverbruik. Vooraf verbaasde ik me dat ik nauwelijks reviews kon vinden van de 480XT maar voor deze prijs wilde ik het gokje wel wagen. Geen spijt van

Leuk om te horen, ik heb er ook een besteld, 1TB WD Black SN770 NVME en een oudere Micros 1TB sata ssd en dan wordt dit mijn backup Proxmox. Heb trouwens 64GB Kingston Fury besteld. Hoop dat het goed gaat met deze componenten, maar moet lukken lijkt mij.

Mijn bestelling staat al een paar dagen in de wacht, hoelang heeft het bij jou geduurd tot je de UM480XT thuis had? Ik had trouwens een promo code waardoor ik hem voor 179 euro (incl. btw em bezorging) heb gekocht.

[GoBieN-Be]

edit: schrap dat. De 7500T heeft toch een GPU.
Was de T variant niet met lagere TDP ofzo?
Maar de gewone variant kun je ook limiteren door PL1 en PL2 in te stellen en is dacht ik goedkoper.

Een back-up server opstarten kan ook met een smart power plug en BIOS instelling om auto te starten na power loss.

[ Voor 111% gewijzigd door GoBieN-Be op 17-10-2023 00:04 ]