Toon posts:

hoge load maar geen top processen?

Pagina: 1
Acties:

Onderwerpen


  • Red devil
  • Registratie: December 1999
  • Laatst online: 12:11
Beste tweakerts,

Volgende probleem. Jobs die draaien onder Linux, afgeschoten vanuit een SGE cluster. Op een node met bijv 64 cores zie ik een load van rond de 64 dus zou je verwachten dat netjes alle cores belast worden.
Echter, met top zie ik maar een paar processen die rond de 100% zitten. Ik kan wel andere processen zien die draaien, alleen hebben die maar paar procent cpu gebruik. Hoe kom ik er nu achter waar alle resources heen gaan? Ik zie ook geen hoge wait%, wat een onderliggend IO probleem zou kunnen aangeven.
Hieronder een de bovenkant van top:

code:
1
2
3
4
5
top - 12:07:36 up 62 days, 11:03,  1 user,  load average: 60.68, 60.51, 60.63
Tasks: 1468 total,   3 running, 1465 sleeping,   0 stopped,   0 zombie
Cpu(s):  0.1%us,  0.2%sy,  3.1%ni, 96.6%id,  0.0%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:  198288720k total, 31010176k used, 167278544k free,   239472k buffers
Swap: 16383992k total,    20072k used, 16363920k free, 27889052k cached


Zo te zien 3% idle en 97% idle?

  • Red devil
  • Registratie: December 1999
  • Laatst online: 12:11
Hero of Time schreef op zondag 29 maart 2015 @ 12:22:
Ga dus eens na welke processen worden afgetrapt, hoe vaak dat gebeurt en of er al een aantal klaar hadden moeten zijn die toch nog draaien.
Ik heb redelijk goed beeld om welk processen het gaat. Het betreft een set commando's in een bash script wat wordt gedraaid. Als ik met top mijn user name selecteer, zie ik het vaak hetzelfde commando staan die vanuit bash script is aangezet. Echter, hoe ik vervolgens verder moet is mij nog een beetje een raadsel. Met lsof zie ik welke files openstaan met een job, alleen hoe je er dan achter komt dat een process stalled vanwege bijv een io probleem, dat is nog even een bridge too far :)

  • Red devil
  • Registratie: December 1999
  • Laatst online: 12:11
CyBeR schreef op zondag 29 maart 2015 @ 16:09:
Heeft die doos een NFS share gemount ergens? Dan is die ws. stuk namelijk.
Ja, ik schrijf naar een NFS mount. Op de SGE master zie ik niet echt dat hij het zwaar heeft mbt NFS (gebeurt soms wel eens met heel veel jobs die heel veel kleine files wegschrijven). Maar ik zal de beheerder eens vragen daar naar de kijken.
Pagina: 1



Nintendo Switch (OLED model) Apple iPhone SE (2022) LG G1 Google Pixel 6 Call of Duty: Vanguard Samsung Galaxy S22 Garmin fēnix 7 Nintendo Switch Lite

Tweakers vormt samen met Hardware Info, AutoTrack, Gaspedaal.nl, Nationale Vacaturebank, Intermediair en Independer DPG Online Services B.V.
Alle rechten voorbehouden © 1998 - 2022 Hosting door True

Tweakers maakt gebruik van cookies

Tweakers plaatst functionele en analytische cookies voor het functioneren van de website en het verbeteren van de website-ervaring. Deze cookies zijn noodzakelijk. Om op Tweakers relevantere advertenties te tonen en om ingesloten content van derden te tonen (bijvoorbeeld video's), vragen we je toestemming. Via ingesloten content kunnen derde partijen diensten leveren en verbeteren, bezoekersstatistieken bijhouden, gepersonaliseerde content tonen, gerichte advertenties tonen en gebruikersprofielen opbouwen. Hiervoor worden apparaatgegevens, IP-adres, geolocatie en surfgedrag vastgelegd.

Meer informatie vind je in ons cookiebeleid.

Sluiten

Toestemming beheren

Hieronder kun je per doeleinde of partij toestemming geven of intrekken. Meer informatie vind je in ons cookiebeleid.

Functioneel en analytisch

Deze cookies zijn noodzakelijk voor het functioneren van de website en het verbeteren van de website-ervaring. Klik op het informatie-icoon voor meer informatie. Meer details

janee

    Relevantere advertenties

    Dit beperkt het aantal keer dat dezelfde advertentie getoond wordt (frequency capping) en maakt het mogelijk om binnen Tweakers contextuele advertenties te tonen op basis van pagina's die je hebt bezocht. Meer details

    Tweakers genereert een willekeurige unieke code als identifier. Deze data wordt niet gedeeld met adverteerders of andere derde partijen en je kunt niet buiten Tweakers gevolgd worden. Indien je bent ingelogd, wordt deze identifier gekoppeld aan je account. Indien je niet bent ingelogd, wordt deze identifier gekoppeld aan je sessie die maximaal 4 maanden actief blijft. Je kunt deze toestemming te allen tijde intrekken.

    Ingesloten content van derden

    Deze cookies kunnen door derde partijen geplaatst worden via ingesloten content. Klik op het informatie-icoon voor meer informatie over de verwerkingsdoeleinden. Meer details

    janee