[stampede 21] Universe@Home

[Xanquezer]

BlueTooth76 schreef op dinsdag 1 maart 2022 @ 22:50:
[...]


Ik draai hier Ubuntu in Hyper-V en dat is minimaal 2 tot 3x sneller dan BOINC in Windows op dezelfde hardware; zo'n 2500 tot 4200 seconden per workunit en dat is op 32 vCPU's (16 cores / 32 threads) of 64 vCPU's (32 cores / 64 threads).

Die tijden haal ik in Windows 10 bij lange na niet op dezelfde hardware.

Dit is op een 32 core / 64 threads TR 3970X
[Afbeelding]

Daar ga ik eens ff mee stoeien.

gewoon bold/kale settings etc.?

[BlueTooth76]

Xanquezer schreef op dinsdag 1 maart 2022 @ 22:58:
[...]

Daar ga ik eens ff mee stoeien.

gewoon bold/kale settings etc.?

Ja, standaard Windows 10 Pro (geen productkey ingevuld) met updates uit en RyzenMaster om stroomverbruik en warmte wat binnen de perken te houden.

SVM uiteraard wel ingeschakeld in BIOS.
Hyper-V aangemaakt.
Ubuntu geïnstalleerd.
BOINC geïnstalleerd.
Project toegevoegd en klaar.

En die machines gebruik ik al 1 tot 2 jaar voor WCG en Rossetta@home, dus ze gaan al een tijdje mee.

[Voor 27% gewijzigd door BlueTooth76 op 01-03-2022 23:01]

[Xanquezer]

BlueTooth76 schreef op dinsdag 1 maart 2022 @ 22:59:
[...]


Ja, SVM uiteraard wel ingeschakeld in BIOS.
Hyper-V aangemaakt.
Ubuntu geïnstalleerd.
BOINC geïnstalleerd.
Project toegevoegd en klaar.

Svm staat aan bij mij.

We will try.

[Bramadam0]

hoop wel dat er optijd nieuwe taken bijkomen, 2 dagen geleden waren het er 1miljoen, en we zijn nu al bijna op de helft

[Xanquezer]

Bramadam0 schreef op dinsdag 1 maart 2022 @ 23:07:
hoop wel dat er optijd nieuwe taken bijkomen, 2 dagen geleden waren het er 1miljoen, en we zijn nu al bijna op de helft

Ja, ik ben aan t klooien met vmtjes enzo.. kost veel taken.

[Xanquezer]

BlueTooth76 schreef op dinsdag 1 maart 2022 @ 22:59:
[...]


Ja, standaard Windows 10 Pro (geen productkey ingevuld) met updates uit en RyzenMaster om stroomverbruik en warmte wat binnen de perken te houden.

SVM uiteraard wel ingeschakeld in BIOS.
Hyper-V aangemaakt.
Ubuntu geïnstalleerd.
BOINC geïnstalleerd.
Project toegevoegd en klaar.

En die machines gebruik ik al 1 tot 2 jaar voor WCG en Rossetta@home, dus ze gaan al een tijdje mee.

Aight!

Hyper - v is beter als Virtual box merk ik...
zo`n de helft oid...

[MadMarky]

Xanquezer schreef op dinsdag 1 maart 2022 @ 22:42:
[...]


Ben ik het niet mee eens.
Mits je "Bare metal" draait, dan ja, dan is het sneller.
Maar niet in een VM op windows. (zowel vmware workstation als Virualbox)

Als je ziet:
Links = Vmware (esxi 7.0, langzamere cpu 50%+-) midden = bare metal windows 10 en rechts = Vitualbox

[Afbeelding]

Dan zie je dat als je basis op windows zit, je niks ermee opschiet...

BOINC Manager onder Windows 10: tegen de 3 uur per task
Ubuntu 20.04 onder Windows 10 WSL: ongeveer 1 uur per task
En dat op een 5900x met 12c24t en daarme 24 tasks tegelijk. Bijna 300% snelheidsverschil en toch in de basis Windows.

[Xanquezer]

Is opgelost @MadMarky

[Bramadam0]

als iemand trouwens ervaring heeft met Azure. ik heb een B8ms 8vCPU's. maar de WU's duren dus rond de 5 uur. cpu activiteit op website van universe@home is 100%.


commando top geeft ook ongeveer 100% op alle taken aan:

maar in de portal van Azure zie ik een gemiddeld CPU verbruik van maar 16%
als iemand ideeen heeft zou een PM zeer gewaardeerd zijn

[dylan111111]

Xanquezer schreef op dinsdag 1 maart 2022 @ 23:18:
[...]


[Afbeelding]

Aight!

Hyper - v is beter als Virtual box merk ik...
zo`n de helft oid...

VirtualBox en VMware Workstation zijn een layer 2 hypervisor. Hyper-V is een layer 1 hypervisor, ik denk dat daar het verschil in zit. Ik zal hier morgen nog eens testen met Virtualbox.

Mooi dat je het onder Hyper-V werkend hebt gekregen!

[Voor 13% gewijzigd door dylan111111 op 02-03-2022 01:47]

[Panzer_V]

Bramadam0 schreef op dinsdag 1 maart 2022 @ 23:27:
als iemand trouwens ervaring heeft met Azure. ik heb een B8ms 8vCPU's. maar de WU's duren dus rond de 5 uur. cpu activiteit op website van universe@home is 100%.
[Afbeelding]

commando top geeft ook ongeveer 100% op alle taken aan:
[Afbeelding]
maar in de portal van Azure zie ik een gemiddeld CPU verbruik van maar 16%
als iemand ideeen heeft zou een PM zeer gewaardeerd zijn

Wat zegt de app van Azure? Kan het zijn dat de portal een soort gemiddelde geeft?

Als je via top gewoon 100% ziet dan is het 100%. Weest gerust.

Bij mijn Azure VM doen ze een kleine 70 minuten per WU. Ik heb een D4s v3 4vcore 16gb ram machine.

De B serie die jij hebt is niet geschikt voor doorlopende volledige CPU belasting…..

[Voor 7% gewijzigd door Panzer_V op 02-03-2022 07:56]

[A-Jay]

En de eerste stats zijn binnen A-Jay in "[Stampede 21] Universe@Home - Week 1"

Gestart met 69 flushers die samen 18,9M hebben weggezet, ook de eerste badges zijn alweer van de partij 51 stuks

[Panzer_V]

@A-Jay , zijn er dit jaar ook weer "grote" badges te downloaden om als avatar te kunnen gebruiken?

[lasermen]

Suicyder schreef op dinsdag 1 maart 2022 @ 07:36:
[...]


Dat alle koeien (machines) bij jullie vakantie hebben deze maand speciaal voor de Stampede van DPC

We hebben 1 pctje weten te vinden, namelijk deze: https://universeathome.pl...ts_user.php?userid=233425
Volgens mij kan hij wel aardig meehelpen

[synoniem]

lasermen schreef op woensdag 2 maart 2022 @ 10:43:
[...]

We hebben 1 pctje weten te vinden, namelijk deze: https://universeathome.pl...ts_user.php?userid=233425
Volgens mij kan hij wel aardig meehelpen

Een beetje magertjes voor 1 pc

Wat ik wel vreemd vind is dat het een 64 core is maar gezegd wordt 256 processors met hyperthreading snap ik dat je aan 128 komt maar 256?

[Bramadam0]

Panzer_V schreef op woensdag 2 maart 2022 @ 07:50:
[...]


Wat zegt de app van Azure? Kan het zijn dat de portal een soort gemiddelde geeft?

Als je via top gewoon 100% ziet dan is het 100%. Weest gerust.

Bij mijn Azure VM doen ze een kleine 70 minuten per WU. Ik heb een D4s v3 4vcore 16gb ram machine.

De B serie die jij hebt is niet geschikt voor doorlopende volledige CPU belasting…..

het vreemde is dus dat hij in het begin wel 60% aangaf in de portal, en daar gewoon een half uur op heeft gelopen. nouja, heb m nu ook omgezet naar een D variant, dus hopen dat hij het beter gaat doen

[Bramadam0]

Panzer_V schreef op woensdag 2 maart 2022 @ 07:50:
[...]


Wat zegt de app van Azure? Kan het zijn dat de portal een soort gemiddelde geeft?

Als je via top gewoon 100% ziet dan is het 100%. Weest gerust.

Bij mijn Azure VM doen ze een kleine 70 minuten per WU. Ik heb een D4s v3 4vcore 16gb ram machine.

De B serie die jij hebt is niet geschikt voor doorlopende volledige CPU belasting…..

Dat was de beste Tip, Runt nu 100% alles vloeiend en lekker snel, dankjewel voor de hulp

[BlueTooth76]

synoniem schreef op woensdag 2 maart 2022 @ 10:51:
[...]

Een beetje magertjes voor 1 pc

Wat ik wel vreemd vind is dat het een 64 core is maar gezegd wordt 256 processors met hyperthreading snap ik dat je aan 128 komt maar 256?

Wss dual-cpu.

Dus 2x 64 cores en dan dus 256 threads.

[BlueTooth76]

Ik ga de stampede bij Universe@home voor mezelf iig verlengen tot WorldCommunityGrid weer online is.
Dus ook bijna heel april nog.

[Suicyder]

Ik heb er een i5 4670K bij geplaatst onder W10 WSL2 met Ubuntu, maar dat presteert toch beter dan ik vooraf had gedacht.

36 minuten per WU en dan 4 tegelijk natuurlijk. Maar ging echt uit van langere runtimes.

[BlueTooth76]

Suicyder schreef op woensdag 2 maart 2022 @ 11:56:
Ik heb er een i5 4670K bij geplaatst onder WSL2 met Ubuntu, maar dat presteert toch beter dan ik vooraf had gedacht.

36 minuten per WU en dan 4 tegelijk natuurlijk. Maar ging echt uit van langere runtimes.

De single-core performance is idd best goed van een i5.

[Radiodurans]

BlueTooth76 schreef op woensdag 2 maart 2022 @ 11:58:
[...]
De single-core performance is idd best goed van een i5 4670K

Inderdaad indrukwekkend want dat is toch wel 5 minuten sneller per WU dan mijn 5600X @ 1867MHz mem=infinity fabric op Win11 Hyper-V Ubuntu.

[Bubbles]

Suicyder schreef op woensdag 2 maart 2022 @ 11:56:
Ik heb er een i5 4670K bij geplaatst onder W10 WSL2 met Ubuntu, maar dat presteert toch beter dan ik vooraf had gedacht.

36 minuten per WU en dan 4 tegelijk natuurlijk. Maar ging echt uit van langere runtimes.

Dat is... opmerkelijk. Ik draai hier met een i7 4930K op een hyper-v/ubuntu image en heb zo'n anderhalf uur nodig per WU. Nou heeft zo'n i5 geen hyperthreading, dus ook geen vertraging per virtuele core als je ze allemaal belast, maar de kloksnelheid is gelijk (3,4 GHz) en zelfde generatie CPU's dus de IPC zal ook wel ongeveer gelijk zijn.

Aangzien HT normaal gesproken effectief een boost geeft van ~30% over 2 virtuele cores, versus 1 core zonder HT, zou je denken dat ik dan dus per core op een tijd van ~55 minuten zou zitten, maar ik zit dus op bijna het dubbele daarvan Mijn processor levert effectief amper meer op dan die van jou, terwijl ik 2 cores meer EN hyperthreading heb. Wat doe ik fout?

[BlueTooth76]

Bubbles schreef op woensdag 2 maart 2022 @ 12:58:
[...]

Dat is... opmerkelijk. Ik draai hier met een i7 4930K op een hyper-v/ubuntu image en heb zo'n anderhalf uur nodig per WU. Nou heeft zo'n i5 geen hyperthreading, dus ook geen vertraging per virtuele core als je ze allemaal belast, maar de kloksnelheid is gelijk (3,4 GHz) en zelfde generatie CPU's dus de IPC zal ook wel ongeveer gelijk zijn.

Aangzien HT normaal gesproken effectief een boost geeft van ~30% over 2 virtuele cores, versus 1 core zonder HT, zou je denken dat ik dan dus per core op een tijd van ~55 minuten zou zitten, maar ik zit dus op bijna het dubbele daarvan Mijn processor levert effectief amper meer op dan die van jou, terwijl ik 2 cores meer EN hyperthreading heb. Wat doe ik fout?

Ik heb wel eens een mainboard gehad met te zwakke VRM's voor een bepaalde CPU waardoor hij constant ging throttlen als ik er video mee ging renderen of andere zware taken op draaide.

Maar dan noem ik ook maar een random oorzaak.

[Suicyder]

Ik zal het in dit geval maar even zo linken
https://universeathome.pl...ts_user.php?userid=233385

Dan kan je het met 3 compleet verschillende devices vergelijken

edit:
Want heel eerlijk zou ik meer van een 4930K verwachten dan de i5 7200U in de lijst qua runtimes, want dat is weer 2c/4t CPU

Edit2:
@Bubbles wellicht testen met Hyper-V op de ene 4930K en de andere met WSL2?

edit3:
Ja nog een edit echt waar.
Grootst gevonden verschil is Intel AVX vs AVX2 instructiesets.
4930K = Ivy Bridge E en 4670K = Haswell Bridge

[Voor 53% gewijzigd door Suicyder op 02-03-2022 13:33]

[PD2JK]

Oké twee identieke setjes (welke nu even uitgeschakeld zijn).

Ubuntu 20.04 LTS, bare metal.

Kernel 5.13:
https://universeathome.pl...ow_names=0&state=4&appid=
Kernel 5.16:
https://universeathome.pl...ow_names=0&state=4&appid=

Begrijp ik goed dat de 5.13 kernel sterk under-performed op Intel Alder Lake? +/- 5500sec vs +/- 3400sec per WU.

[Bubbles]

Suicyder schreef op woensdag 2 maart 2022 @ 13:14:
Ik zal het in dit geval maar even zo linken
https://universeathome.pl...ts_user.php?userid=233385

Dan kan je het met 3 compleet verschillende devices vergelijken

edit:
Want heel eerlijk zou ik meer van een 4930K verwachten dan de i5 7200U in de lijst qua runtimes, want dat is weer 2c/4t CPU

Edit2:
@Bubbles wellicht testen met Hyper-V op de ene 4930K en de andere met WSL2?

Ik heb er (momenteel) maar 1 ter beschikking. Maar ik zou eens kunnen testen met de helft van de cores op WSL2 en de andere helft in de Hyper-V omgeving. Dit ga ik later deze stampede wellicht nog eens proberen.

Echter,

edit3:
Ja nog een edit echt waar.
Grootst gevonden verschil is Intel AVX vs AVX2 instructiesets.
4930K = Ivy Bridge E en 4670K = Haswell Bridge

ik denk dat hier een belangrijker stuk van de oorzaak in te vinden is. Die had ik even niet zien aankomen, maar kan een hoop verklaren. Scherp gevonden!

[Suicyder]

Overigens @Bubbles, check ook even de post boven jou van @PD2JK met betrekking tot kernel 5.13 vs 5.16. Als dat echt zoveel verschil maakt ga jij aldaar ook terug kunnen halen.

Wie weet niet alleen op alder lake verschil?

[Voor 11% gewijzigd door Suicyder op 02-03-2022 14:04]

[wildhagen]

Overigens:



Vanochtend stonden er nog 1.1 miljoen WU's klaar om uit te delen, nu 388.000.

Weet niet of dit door de stampede komt, maar volgens mij zijn we een soort van DDoS-attack op Universe@Home aan het uitvoeren

[BlueTooth76]

wildhagen schreef op woensdag 2 maart 2022 @ 14:15:
Overigens:

[Afbeelding]

Vanochtend stonden er nog 1.1 miljoen WU's klaar om uit te delen, nu 388.000.

Weet niet of dit door de stampede komt, maar volgens mij zijn we een soort van DDoS-attack op Universe@Home aan het uitvoeren

Het gaat wel hard omlaag idd

[DukeBox]

KuuKe schreef op zondag 27 februari 2022 @ 16:06:

Voor de mensen onder ons die via WSL2 willen stampen hieronder een korte handleiding.

5) Start boinc middels [boinc] en laat dit scherm open staan.
6) Open een tweede Ubuntu scherm en voeg Universe@Home toe middels [boinccmd --project_attach https://universeathome.pl/universe/ hierjeweakaccountkey]
De weak account key staat in je Universe@Home profiel. En tussen de url en je weak account key staat een spatie.
7) That's it. Hij draait nu op WSL2. Je kunt e.e.a. in de tweede Ubuntu instantie monitoren via [boinccmd --get_state] en [top].

Ik zou boinc als service starten (sudo service boinc-client start), je kan dan alles verder gewoon sluiten.
Om het jezelf helemaal makkelijk te maken kan je ook je WSL host IP toevoegen aan remote_hosts.cfg (
sudo vi /var/lib/boinc/remote_hosts.cfg) dan kan je gewoon met je windows boinc manager inloggen en projecten en tasks toevoegen/beheren/zien.

[M-spec]

Eindelijk ook Boinc onder Ubuntu 21.10 met Hyper-V aan de praat gekregen. Wat een gedoe maar we zijn weer aan het grazen. De koe zal morgen denk ik wel aansluiting vinden bij de rest van de kudde.

[wildhagen]

Extra Power To The Horde!

Hij is niet van mij, maar ik heb expliciete toestemming om een AMD Epyc 7451 in te zetten. Dat is een bakbeest met 24 cores en 48 threads. Zal vermoedelijk vanaf morgenochtend mee gaan draaien.

Die komt dus bovenop mijn eigen AMD Epyc 7351 (16/32) en AMD 5950X (16/32) en Intel 10400H (4/8).

Alle AMD's draaien 24/7, de Intel 8-10 uur per dag.

En zojuist is ook een AMD 5600G (4/8) bijgeschakeld maar die draait maar een paar uur per dag helaas.

[A-Jay]

Panzer_V schreef op woensdag 2 maart 2022 @ 08:29:
@A-Jay , zijn er dit jaar ook weer "grote" badges te downloaden om als avatar te kunnen gebruiken?

100.000
https://shebanian.com/stats/resources/badges/9-1.png


250.000
https://shebanian.com/stats/resources/badges/9-2.png


500.000
https://shebanian.com/stats/resources/badges/9-5.png


1.000.000
https://shebanian.com/stats/resources/badges/9-10.png


2.500.000
https://shebanian.com/stats/resources/badges/9-25.png


5.000.000
https://shebanian.com/stats/resources/badges/9-50.png


10.000.000
https://shebanian.com/stats/resources/badges/9-100.png


25.000.000
https://shebanian.com/stats/resources/badges/9-250.png


50.000.000
https://shebanian.com/stats/resources/badges/9-500.png


100.000.000
https://shebanian.com/stats/resources/badges/9-1000.png


250.000.000
https://shebanian.com/stats/resources/badges/9-2500.png


500.000.000
https://shebanian.com/stats/resources/badges/9-5000.png

[Bubbles]

PD2JK schreef op woensdag 2 maart 2022 @ 13:39:
Oké twee identieke setjes (welke nu even uitgeschakeld zijn).

Ubuntu 20.04 LTS, bare metal.

Kernel 5.13:
https://universeathome.pl...ow_names=0&state=4&appid=
Kernel 5.16:
https://universeathome.pl...ow_names=0&state=4&appid=

Begrijp ik goed dat de 5.13 kernel sterk under-performed op Intel Alder Lake? +/- 5500sec vs +/- 3400sec per WU.

Interessant, maar hoe krijg ik 5.16 in hyper-v zo werkend dat boinc ook wil starten?

Ik had eerst al ruzie om uberhaubt een andere kernel geinstalleerd te krijgen in 20.04 LTS. Via deze handleiding (de derde manier gevolgd), ging dat wel, maar kreeg ik foutmeldingen dat de kernel niet gesigned is, en dus niet kan worden ingeladen. Als ik secure boot uitschakelde in de settings, hielp dat niet.

Vervolgens heb ik Ubuntu 21.10 geinstalleerd, maar die komt standaard ook met de 5.13 kernel. Runnen van

sudo apt install linux-azure

leverde een azure-versie van dezelfde kernel op die wel wilde starten, maar dat is dus geen 5.16. Daarna heb ik de secure boot nogmaals uitgezet, de eerder genoemde handleiding nogmaals gevolgd en kernel 5.16 ingeladen. Booten wilde toen wel lukken. Daarna de boinc-client en boinc-manager geinstalleerd, maar die wil niet starten, omdat 'ie geen access heeft tot de directory waar het geinstalleerd is. Ofzoiets. Herstarten met secure boot weer aan levert met de nieuwe kernel wederom een foutmelding bij boot dat de kernel niet ingeladen is, omdat 'ie unsigned is.

Anyone?

[PD2JK]

@Bubbles Heb deze handleiding gevolgd, optie 1; via TuxInvader. Dat ging probleemloos.

Met checkpoints kun je makkelijk reverten, mocht je je VM om zeep helpen. Staat default enabled.

[DukeBox]

@A-Jay Tnx, vind ze mooi maar ik begrijp ze niet helemaal. Die van vorige keer zag je 'groeien' maar hierbij lijken ze juist kleiner te worden ? Ik zie wel meer 'sterren' maar ik had verwacht dat ze dan niet kleiner zouden worden, ook qua witte oppervlakte lopen ze af.

[Panzer_V]

A-Jay schreef op woensdag 2 maart 2022 @ 18:44:
[...]


100.000
https://shebanian.com/stats/resources/badges/9-1.png
[Afbeelding]

250.000
https://shebanian.com/stats/resources/badges/9-2.png
[Afbeelding]

500.000
https://shebanian.com/stats/resources/badges/9-5.png
[Afbeelding]

1.000.000
https://shebanian.com/stats/resources/badges/9-10.png
[Afbeelding]

2.500.000
https://shebanian.com/stats/resources/badges/9-25.png
[Afbeelding]

5.000.000
https://shebanian.com/stats/resources/badges/9-50.png
[Afbeelding]

10.000.000
https://shebanian.com/stats/resources/badges/9-100.png
[Afbeelding]

25.000.000
https://shebanian.com/stats/resources/badges/9-250.png
[Afbeelding]

50.000.000
https://shebanian.com/stats/resources/badges/9-500.png
[Afbeelding]

100.000.000
https://shebanian.com/stats/resources/badges/9-1000.png
[Afbeelding]

250.000.000
https://shebanian.com/stats/resources/badges/9-2500.png
[Afbeelding]

500.000.000
https://shebanian.com/stats/resources/badges/9-5000.png
[Afbeelding]

U is weer geweldig!

[Panzer_V]

DukeBox schreef op woensdag 2 maart 2022 @ 20:13:
@A-Jay Tnx, vind ze mooi maar ik begrijp ze niet helemaal. Die van vorige keer zag je 'groeien' maar hierbij lijken ze juist kleiner te worden ? Ik zie wel meer 'sterren' maar ik had verwacht dat ze dan niet kleiner zouden worden, ook qua witte oppervlakte lopen ze af.

Je ziet steeds meer van het universum!

[Bubbles]

PD2JK schreef op woensdag 2 maart 2022 @ 19:28:
@Bubbles Heb deze handleiding gevolgd, optie 1; via TuxInvader. Dat ging probleemloos.

Met checkpoints kun je makkelijk reverten, mocht je je VM om zeep helpen. Staat default enabled.

Met die handleiding lukt het inderdaad wel, met daarbij wel de kanttekening dat ik alsnog de secure boot moest uitzetten in de settings van Hyper-V.

Dit was overigens weer met een nieuwe, schone 20.04 LTS Ubuntu. Morgen maareens zien wat de nieuwe doorrekentijden zijn met de nieuwere kernelversie.

[Panzer_V]

Voor degene onder ons die ook een VM op de spotmarkt gehuurd hebben….. je moet toch zeker tweemaal daags checken of je machines nog running zijn. Zo kwam ik er zojuist achter dat een van mijn machines uitgezet was.

Enfin, dat is het risico van gebruik maken van de spotmarkt.

[dylan111111]

DukeBox schreef op woensdag 2 maart 2022 @ 14:51:
[...]

Ik zou boinc als service starten (sudo service boinc-client start), je kan dan alles verder gewoon sluiten.
Om het jezelf helemaal makkelijk te maken kan je ook je WSL host IP toevoegen aan remote_hosts.cfg (
sudo vi /var/lib/boinc/remote_hosts.cfg) dan kan je gewoon met je windows boinc manager inloggen en projecten en tasks toevoegen/beheren/zien.

Dit is echt super nice. Boinc staat nu in WSL te stampen. Ben benieuwd wat het verschil is tussen Hyper-V en WSL op dezelfde machine.

[DukeBox]

dylan111111 schreef op woensdag 2 maart 2022 @ 22:40:
Dit is echt super nice. Boinc staat nu in WSL te stampen. Ben benieuwd wat het verschil is tussen Hyper-V en WSL op dezelfde machine.

Ik denk wat minder geheugen gebruik maar zal qua snelheid niet heel veel uitmaken.

[lasermen]

synoniem schreef op woensdag 2 maart 2022 @ 10:51:
[...]

Een beetje magertjes voor 1 pc

Wat ik wel vreemd vind is dat het een 64 core is maar gezegd wordt 256 processors met hyperthreading snap ik dat je aan 128 komt maar 256?

Het zijn 2 EPYC CPU's in 1 systeem
Vandaar de 256 threads.

We hebben op dit moment niet echt systemen die weinig staan te doen...

[dylan111111]

DukeBox schreef op woensdag 2 maart 2022 @ 23:04:
[...]

Ik denk wat minder geheugen gebruik maar zal qua snelheid niet heel veel uitmaken.

Het is meetbaar dat WSL2 gemiddel 24% sneller is dan Hyper-V op een dual 2697v3 systeem wanneer er 56 taken tegelijk staan te grazen.


Ik zal morgen eens kijken of dit op een AMD threadripper ook het geval is.

[Voor 6% gewijzigd door dylan111111 op 03-03-2022 01:01]

[PD2JK]

@KuuKe Ik sta niet in de stats. Ik heb wat minder geflusht, maar er is zeker wel wat werk gedaan, misschien morgen weer

[DukeBox]

@PD2JK heb je het GDPR vinkje gezet voor toestemming je stats te exporteren ?

[A-Jay]

En KuuKe heeft de stats alweer gedaan KuuKe in "[Stampede 21] Universe@Home - Week 1"

We stijgen naar een output van 24.3M en hebben inmiddels 74 flushers,ook zijn er 45 badges uitgedeeld.

Wat die badges betreft je kijkt steeds verder de ruimte in, dus de zichtbare planeten/sterren worden steeds kleiner.

[PD2JK]

DukeBox schreef op donderdag 3 maart 2022 @ 07:26:
@PD2JK heb je het GDPR vinkje gezet voor toestemming je stats te exporteren ?

Ja, het vinkje staat er nog;


Ben ook nog steeds lid van team 19 (DPC dus). Misschien een hick-upje, morgen maar weer zien.

[Suicyder]

@PD2JK
Ik zie je ook gewoon in de lijst staan op de website van universe@home -> https://universeathome.pl...t=0&sort_by=expavg_credit
Plekje 12 aldaar

[PD2JK]

@Suicyder @DukeBox
KuuKe in "[Universe@Home] hitparade van week 9"

Hier in het reguliere Universe@Home stats-topic sta ik wel tussen zie ik nu, alleen niet in het stampede stats topic. Nou ja, dat zijn ook stats.

[A-Jay]

PD2JK schreef op donderdag 3 maart 2022 @ 06:41:
@KuuKe Ik sta niet in de stats. Ik heb wat minder geflusht, maar er is zeker wel wat werk gedaan, misschien morgen weer

Je staat er nu in, met terugwerkende kracht aangepast.

Je had een ongewenste feature gevonden.... je naam was 'Erwin' omdat er in de DB een record was op id 233255 (ook jouw boinc id bij Universe@Home) van iemand die mee had gedaan aan Citizen Science Grid.

De query is aangepast zodat de project id niet in de group by zat maar in de where en nu krijg je de credits op je eigen naam

[Voor 5% gewijzigd door A-Jay op 03-03-2022 08:32]

[BlueTooth76]

Er is weer vers hooi voor de koetjes, dus het lijkt er voorlopig niet op dat ze droog komen te staan.

[wildhagen]

Da's mooi, want ik ben druk bezig om die 24/48 core Epyc 7451 bij te schakelen, zou niet willen dat-ie van honger omkomt. Zal over een uurtje online gaan denk ik.

[fractus]

lasermen schreef op woensdag 2 maart 2022 @ 23:47:
[...]

We hebben op dit moment niet echt systemen die weinig staan te doen...

Je klinkt bijna teleurgesteld, maar dat lijkt me juist positief?

Ongelofelijk trouwens wat een bakbeesten mensen thuis hebben staan, kom ik aan met m'n laptopje met een Ryzen 5 4600U

[DukeBox]

BlueTooth76 schreef op donderdag 3 maart 2022 @ 09:35:
Er is weer vers hooi voor de koetjes, dus het lijkt er voorlopig niet op dat ze droog komen te staan.

Ik had wel al een buffer aangemaakt van 10 dagen maar die kan gelukkig weer omlaag. Hoe dan ook klopte het aantal dagen niet maar ik denk dat er een limiet is per systeem. Met 160 cores had ik maar iets van 3 dagen gekregen.

[lasermen]

fractus schreef op donderdag 3 maart 2022 @ 12:22:
[...]


Je klinkt bijna teleurgesteld, maar dat lijkt me juist positief?

Ongelofelijk trouwens wat een bakbeesten mensen thuis hebben staan, kom ik aan met m'n laptopje met een Ryzen 5 4600U

Bij vorige stampede's hadden we toevallig een rekencluster wat nog getest diende te worden.
Dit jaar hebben we dat niet. Dus we hebben 1 van onze test machines vrij weten te krijgen om mee te laten doen.

[dylan111111]

DukeBox schreef op donderdag 3 maart 2022 @ 13:30:
[...]

Ik had wel al een buffer aangemaakt van 10 dagen maar die kan gelukkig weer omlaag. Hoe dan ook klopte het aantal dagen niet maar ik denk dat er een limiet is per systeem. Met 160 cores had ik maar iets van 3 dagen gekregen.

Er is een buffer limiet vanuit het project van 24 taken per thread tot een max van 64threads per boinc client. Edit: 24x64= 1536 taken die een boinc client maximaal tegelijkertijd kan krijgen vanuit het project.*

[Voor 9% gewijzigd door dylan111111 op 03-03-2022 16:58]

[DukeBox]

dylan111111 schreef op donderdag 3 maart 2022 @ 14:12:
64threads per boinc client.

Dat klopt hoe dan ook niet, zonder wat aan te passen draai ik er meer.

[Panzer_V]

Ik kon het niet laten. Gisterenavond een tweede VM op de spotmarkt gehuurd.

Een beetje spelen met de regio's levert verrassende verschillen in de prijs op

[dylan111111]

DukeBox schreef op donderdag 3 maart 2022 @ 14:56:
[...]

Dat klopt hoe dan ook niet, zonder wat aan te passen draai ik er meer.

Ik bedoel dat je maximaal 24x64= 1536 taken kan ophalen/ in de wachtrij hebben staan vanaf het project per boinc client. Niet threads die ze verwerken.

[Voor 4% gewijzigd door dylan111111 op 03-03-2022 16:49]

[Bubbles]

Right.. Afgelopen nacht eens geprobeerd op mijn machine (Ivy Bridge, i7 4930k) wat de 5.16 kernel van ubuntu deed in een Hyper-V vm. Dat leek op z'n minst niet sneller te gaan dan de 5.13 kernel, dus dat heb ik weer laten afsterven. Nu aan het draaien via WSL2, maar eerste indrukken lijken uit te wijzen dat ook dat niet sneller is. Voordeel is wel dat ik die makkelijk kan monitoren vanuit m'n windows BoincManager en het iets minder resource-intensief is.

[DukeBox]

dylan111111 schreef op donderdag 3 maart 2022 @ 16:47:
Ik bedoel dat je maximaal 24x64= 1536 taken kan ophalen/ in de wachtrij hebben staan vanaf het project per boinc client.

Dat klopt ook niet, mijn queue (waiting) bevat 6219 jobs.

[Xanquezer]

dylan111111 schreef op donderdag 3 maart 2022 @ 00:32:
[...]

Het is meetbaar dat WSL2 gemiddel 24% sneller is dan Hyper-V op een dual 2697v3 systeem wanneer er 56 taken tegelijk staan te grazen.
[Afbeelding]

Ik zal morgen eens kijken of dit op een AMD threadripper ook het geval is.

Mijn Xeon 1270 v3 _{(8* 3,6ghz)} is sneller als een Hyper-V op een AMD 5950x _{(32* 4,4ghz)} in WSL..

Ik zou een lijst maken:

- bare metal ubuntu = snelste (uurtje per stuk)
Onder windows (met/zonder gebruik) of ander platform/OS
- WSL (onder Windows) (uurtje en paar minuten)
- Vmware linux/ubuntu machine (esxi) (uurtje tot anderhalf uurtje)
- Hyper-v (onder Windows) (uurtje tot anderhalf uurtje)
- Boinc onder windows (2 uurtjes tot 3 uurtjes)
- Virtualbox & Vmworkstation (onder Windows) (3 uurtjes of (veel) langer)

*note: alles ook afhankelijk van de hardware die je gebruikt...

[Voor 3% gewijzigd door Xanquezer op 03-03-2022 18:57]

[wildhagen]

Xanquezer schreef op donderdag 3 maart 2022 @ 18:54:
[...]


Ik zou een lijst maken:

- bare metal ubuntu = snelste (uurtje per stuk)
Onder windows (met/zonder gebruik)
- WSL (onder Windows) (uurtje en paar minuten)
- Vmware linux/ubuntu machine (esxi) (uurtje tot anderhalf uurtje)
- Hyper-v (onder Windows) (uurtje tot anderhalf uurtje)
- Boinc onder windows (2 uurtjes tot 3 uurtjes)
- Virtualbox & Vmworkstation (onder Windows) (3 uurtjes of (veel) langer)

*note: alles ook afhankelijk van de hardware die je gebruikt...

Voor mij klopt die lijst niet. Op mijn AMD 5950X diet een WU er in Windows ongeveer 3 uur over. Onder VirtualBox (met Ubuntu) op diezelfde machine iets minder dan 1 uur per WU.

[Xanquezer]

wildhagen schreef op donderdag 3 maart 2022 @ 18:57:
[...]


Voor mij klopt die lijst niet. Op mijn AMD 5950X diet een WU er in Windows ongeveer 3 uur over. Onder VirtualBox (met Ubuntu) op diezelfde machine iets minder dan 1 uur per WU.

Gemiddelde Hardware.
Heb deze referentie meting gedaan op een Ryzen 2600.
Een 5950x is drastisch sneller

[Bramadam0]

wat ik heb gezien tussen een AMD 5900X, I7-10750H en een I5-6600. dat ze op windows VS virtualbox ubuntu de virtualbox ongeveer 3 keer sneller is.

[dylan111111]

DukeBox schreef op donderdag 3 maart 2022 @ 17:12:
[...]

Dat klopt ook niet, mijn queue (waiting) bevat 6219 jobs.

Wutt, dan lees ik outdated info op het forum van Universe@home. Nvm then!

[DukeBox]

dylan111111 schreef op donderdag 3 maart 2022 @ 20:02:
[...]

Wutt, dan lees ik outdated info op het forum van Universe@home. Nvm then!

Maar het hadden er wel meer moeten zijn om 10 dagen te vullen.

[Xanquezer]

wildhagen schreef op donderdag 3 maart 2022 @ 18:57:
[...]


Voor mij klopt die lijst niet. Op mijn AMD 5950X diet een WU er in Windows ongeveer 3 uur over. Onder VirtualBox (met Ubuntu) op diezelfde machine iets minder dan 1 uur per WU.

Om even je verhouding kloppend te maken.
Met een 5950X

Virtualbox gaf bij mij 12.000 sec gemiddeld (Zelfde als vmware workstation)
Hyper -v ongeveer 4000-4500 gemiddeld
Windows 10.000 gemiddeld

En nu WSL... ja, echt n kop loper.
2100 tot 2400 gemiddeld (Tijdens gamen > gta5 )

Wildhagen, ik zou je aanraden om ook WSL te draaien, om ruim binnen t uur (3600 sec) te komen.

[M-spec]

Xanquezer schreef op donderdag 3 maart 2022 @ 22:01:
[...]


Om even je verhouding kloppend te maken.
Met een 5950X

Virtualbox gaf bij mij 12.000 sec gemiddeld (Zelfde als vmware workstation)
Hyper -v ongeveer 4000-4500 gemiddeld
Windows 10.000 gemiddeld

En nu WSL... ja, echt n kop loper.
2100 tot 2400 gemiddeld (Tijdens gamen > gta5 )

Wildhagen, ik zou je aanraden om ook WSL te draaien, om ruim binnen t uur (3600 sec) te komen.

Er zit ook wel verschil in WU batches onderling volgens mij. Ik kom met Hyper-V en Ubuntu 21.10 verwerkingstijden tegen in de orde van ~2000, ~2750, ~3300 en pak m beet ~4200 seconden. Gemiddelde output over een paar dagen geeft waarschijnlijk een beter beeld van onderlinge verschillen. Ik las al dat het verschil met Windows wel erg groot is en heb ik dan ook niet getest.

[ShitHappens]

Zijn er geen nieuwe jobjes beschikbaar, of is er aan mijn kant iets fout?

2 Ubuntu machines gestart, vervolgens:

code:

sudo apt-get install boinc-client -y
sudo boinc --attach_project https://universeathome.pl/universe/ hierMijnWeakKey --no_gui_rpc

Start op, maakt de PC aan in Universe@Home, geeft daarna aan dat er 33 of 44 project files zijn gevonden en daarna niets meer, enkel "Initialization completed".

Neeever mind. Volgens de takenlijst zijn ze wel bezig met taken en volgens monitoring is de CPU dichtgetrokken Koetjes die niet veel keuvelen dus.

Klopt 't inderdaad dat er op Raspberry na geen ondersteuning is voor ARM processoren?

[Voor 22% gewijzigd door ShitHappens op 03-03-2022 22:56]

[DukeBox]

ShitHappens schreef op donderdag 3 maart 2022 @ 22:41:
Klopt 't inderdaad dat er op Raspberry na geen ondersteuning is voor ARM processoren?

Nee, alle ARMv7 en hoger kunnen het draaien.

[ShitHappens]

"Amazon EC2 C6g instances are powered by Arm-based AWS Graviton2 processors"
"The AWS Graviton2 processor uses Arm Neoverse N1 cores to deliver its computational horsepower."
"Supporting the Armv8.2-A specification, the Neoverse N1 platform "

Het betreft een EC2 C6g instantie die dus in principe een ondersteunde ARM CPU zou moeten hebben, maar praktijk wijst dus anders uit
Maar goed, dan mag vannacht blijken of C6a of C6i beter presteert (AMD vs Intel) - van de winnaar start ik dan nog een zwikkie op.

[A-Jay]

De stats zijn er weer A-Jay in "[Stampede 21] Universe@Home - Week 1"

76 flushers samen goed voor 27.9M en 25 badges

[Panzer_V]

Wow....we gaan lekker zeg!!! Ondanks de zeer korte indraaiperiode zitten we al op 28M op één dag?!

Waar gaat dat heen als de validatie ook op stoom komt?

[Panzer_V]

Voor degene onder ons die extra koetjes in de wolken willen inzetten, en vorig jaar niet al hun credits hebben ingezet, zijn de volgende wolken wellicht interessant.

• AWS - 750 uur per maand free - https://aws.amazon.com/free/
• Google Cloud - $300 free - https://cloud.google.com/free/
• Azure - $200 free - https://azure.microsoft.com/nl-nl/free/
• Digital Ocean - $100 free - https://try.digitalocean.com/cloud-computing/

Tips voor als je hiervan gebruik wilt maken:

• Stel direct een budget limiet melding in. Zo voorkom je onverwachte kosten als je free credits op zijn.
• Kies een zo krachtig mogelijke setup. Je kunt beter in twee weken je credits er doorheen geblazen hebben dan aan het einde van de Stampede nog bezig te zijn. Het duurt namelijk even voordat alle taken gevalideerd zijn. Validaties in april tellen niet meer mee voor de Stampede.
• Monitor dagelijks of je nog niet tegen het einde van je credits aan loopt.

Tot slot: vergeet niet aan het einde van je credits om je account te laten verwijderen. Daarvoor moet je vaak eerst je VM's verwijderen en dan je account. Zoek alvast van te voren op hoe je per wolken rekenaar de verwijdering in gang moet zetten.


ps. Gebruik bovenstaande geheel op eigen risico en naar eigen inzicht. Ga niet de boel flessen door nieuwe accounts aan te maken/ dummy accounts aan te maken/ etc. mocht je de credits al eens gebruikt hebben. Houdt je aan de geest van het aangebodene ==> Één trial per wolken rekenaar per persoon.

[Voor 10% gewijzigd door Panzer_V op 04-03-2022 08:44]

[ShitHappens]

Kleine kanttekening bij AWS free fier: dat gaat enkel om de t2.micro en t3.micro instanties. Die zijn er niet echt op gemaakt om de CPU continu te belasten. Wie voor vorig jaar een AWS account heeft aangemaakt zal nu overigens ook door de gratis EC2 heen zijn, die geldt maar voor 1 jaar na aanmaken account.
Maar for science zal ik er zo eentje starten, kijken of dat een beetje werkt

[Panzer_V]

Klopt. Die AWS tier zet absoluut geen zoden aan de dijk. Maar om het plaatje geheel te maken, en het een van de grote drie is, heb ik hem toch maar genoemd. Je kunt natuurlijk ook nog gebruik maken van credits bij Oracle Cloud en IBM Cloud etc.

Dat is aan een ieder om daar de keuze in te maken

[BlueTooth76]

Panzer_V schreef op vrijdag 4 maart 2022 @ 09:30:
Klopt. Die AWS tier zet absoluut geen zoden aan de dijk. Maar om het plaatje geheel te maken, en het een van de grote drie is, heb ik hem toch maar genoemd. Je kunt natuurlijk ook nog gebruik maken van credits bij Oracle Cloud en IBM Cloud etc.

Dat is aan een ieder om daar de keuze in te maken

Gezien de tarieven voor wat serieuze rekenkracht, is een eigen koe goud waard

[Xanquezer]

Hmmm... dik 1000 taken in behandeling staan... (Controle zonder resultaat nog)

Afgelopen nacht via WSL gedraaid, daarmee kom ik op n gemiddelde van 1400 sec per taak.
Dat wel met maar 1 systeem.

Iemand daar ook last van?

[MadMarky]

Xanquezer schreef op vrijdag 4 maart 2022 @ 11:01:
Hmmm... dik 1000 taken in behandeling staan... (Controle zonder resultaat nog)

Afgelopen nacht via WSL gedraaid, daarmee kom ik op n gemiddelde van 1400 sec per taak.
Dat wel met maar 1 systeem.

Iemand daar ook last van?

Die 1400sec is wel errug snel, met een redelijk vlotte Ryzen zit ik rond de 3000 per taak (wel twee taken per core).
Heb je je client verder wel succesvol aangemeld met de zwakke account key uit je profiel? Als je alle stappen uit de post van Kuuke volgt zou alles vlotjes moeten verlopen.

[Bramadam0]

ik heb de free trial bij Azure weer uitgezet omdat het me niet duidelijk is wanneer je nou free 200$ gebruikt of daadwerkelijk moet betalen.
Als mensen google nog niet hebben gebruikt zou ik die zeer aanraden. heel makkelijk in gebruik, en 100% zeker geen betalingen als je niet los toestemming geeft om door te gaan na de trial

[boazkl0p]

Omdat ik zo'n held ben met linux mag ik nu ubuntu opnieuw installeren. Even de hele schijf ipv directory chmodden

Boinc draaide nog wel door maar kon niet meer met de servers communiceren

[Voor 25% gewijzigd door boazkl0p op 04-03-2022 11:52]

[ShitHappens]

Panzer_V schreef op vrijdag 4 maart 2022 @ 09:30:
Klopt. Die AWS tier zet absoluut geen zoden aan de dijk. Maar om het plaatje geheel te maken, en het een van de grote drie is, heb ik hem toch maar genoemd. Je kunt natuurlijk ook nog gebruik maken van credits bij Oracle Cloud en IBM Cloud etc.

Dat is aan een ieder om daar de keuze in te maken

Je zou versteld staan hoe vaak die 750 uur "free EC2" gezien wordt alsof dat op alle instance types en er een dikke rekening volgt

[Panzer_V]

ShitHappens schreef op vrijdag 4 maart 2022 @ 12:05:
[...]

Je zou versteld staan hoe vaak die 750 uur "free EC2" gezien wordt alsof dat op alle instance types en er een dikke rekening volgt

Klopt. Bij de andere twee groten (google en microsoft) wordt alles eerst gefreezed na je free credits en moet je actief betaling accepteren.

Amazon gaat direct over op facturering. Jeff moet ergens aan het geld komen voor zijn ruimte hobby....

[Panzer_V]

Bramadam0 schreef op vrijdag 4 maart 2022 @ 11:46:
ik heb de free trial bij Azure weer uitgezet omdat het me niet duidelijk is wanneer je nou free 200$ gebruikt of daadwerkelijk moet betalen.
Als mensen google nog niet hebben gebruikt zou ik die zeer aanraden. heel makkelijk in gebruik, en 100% zeker geen betalingen als je niet los toestemming geeft om door te gaan na de trial

Van wat ik mij nog kan herinneren van de vorige Stampede gaat bij MS alles van je free credits af tot die op zijn en dan gaat alles in een freeze. Na expliciete acceptatie van facturering wordt deze pas opgeheven.

[Bramadam0]

ja in de eerste 2 dagen kreeg ik een balkje te zien waarop stond je hebt nog: ..... over. daarna zag ik die niet meer en stond er bij facturering in een keer 7 euro staan, dus ik weet niet of dat nou gewoon in de free trial zit of niet. maar ik ga het niet riskeren

[Xanquezer]

MadMarky schreef op vrijdag 4 maart 2022 @ 11:44:
[...]

Die 1400sec is wel errug snel, met een redelijk vlotte Ryzen zit ik rond de 3600 per taak (wel twee taken per core).
Heb je je client verder wel succesvol aangemeld met de zwakke account key uit je profiel? Als je alle stappen uit de post van Kuuke volgt zou alles vlotjes moeten verlopen.

Yup, staat goed volgens "How-to" van Kuuke en Dylan111111

[Panzer_V]

Bramadam0 schreef op vrijdag 4 maart 2022 @ 12:11:
ja in de eerste 2 dagen kreeg ik een balkje te zien waarop stond je hebt nog: ..... over. daarna zag ik die niet meer en stond er bij facturering in een keer 7 euro staan, dus ik weet niet of dat nou gewoon in de free trial zit of niet. maar ik ga het niet riskeren

Je moet wel effe checken naar welke VM je gekozen hebt. Ik weet niet meer zeker of je voor de free credits wel alles mag gebruiken of alleen een selectie.

Kan mij zo voorstellen dat de bare metal niet voor de free credits in aanmerking komt.

Ik had destijds twee VM's van het type D4_v3 o.i.d. in gebruik. Een quadcore met 16gb ram.

[Panzer_V]

Ik heb zelf ook ruim 300 taken op "controle in behandeling" staan, @Xanquezer. Omdat we nu met zijn allen super veel WU's verwerken duurt het controleren ook wat langer dan gebruikelijk.

[wildhagen]

Ik heb nu dit:

[Xanquezer]

Geduld... geduld...

T gras moet groeien

[berendbotje91]

Ik heb "maar" 245 taken op Controle in behandeling op het moment, maar alle kleine beetjes helpen dacht ik.

[MadMarky]

Xanquezer schreef op vrijdag 4 maart 2022 @ 12:12:
[...]


Yup, staat goed volgens "How-to" van Kuuke en Dylan111111

[Afbeelding]

Er zijn dus al wel taken goedgekeurd. Ik dacht dat alles in de queue bleef hangen...
Je bent gewoon te snel voor de verificatie. Beetje geduld

Van de 1700 taken heb ik er +/- 400 in uitvoering, +/- 400 in behandeling 14 fout en de rest (800+) is geldig.

[Suicyder]

14 fout? Dat serverside cancel of echt fout?

Ik heb 1 error staan op 4200 tasks en dat is een "Cancel by server" notabene.

[wildhagen]

Ik heb 3 op 10.000+, en dat zijn idd allemaal "Aborted by server"-wu's.

[dylan111111]

De meeste taken die bij mij op " Controle in behandeling" staan worden door een andere partij op een raspberry pi uitgevoerd. Dat zal wel even duren voordat die taken daar zijn berekend.

[Suicyder]

Taken ter validatie zijn enorm random waar ze aan toegewezen zijn, maar vind ik ook niet heel interessant.

Wel klik ik net 1 random WU welke ik af heb aan en zag ik een "aborted" door @dylan111111 en in progress van @BlueTooth76 op die WU

Nuttig? nee, grappig, meh beetje

Ik denk dat ik niet veel power meer bij ga plaatsen. Vind het eigenlijk wel gezegend qua verbruik zo.

[fractus]

Ik zie bij mij ook veel WU's op verificatie staat waarbij de andere gebruiker een gemiddelde inlevertijd hebben van 3, 4 en soms wel meer dan 5 dagen. Tsja dan gaat het wel even duren met die verificatie. Houd je buffers klein mensen, dan gaat alles sneller