[DC] Crackrack draait! (uitleg + pics)

[SpamLame]

Waarschuuwing:
Heb je geen zin om te lezen, scroll naar beneden voor de pics

Het id:
Simpel gezegt veel CPU's die dedicated een Distributed Computing project draaien.
Het liefst tegen de zo laag mogelijke kosten, of we daarin geslaagd zijn....?

Waarom:
Tja wat kan ik zeggen...voor de lol en de stats

Wie we zijn:
Broer en Spamlame, twee collega's/ vrienden en beide lid (vanaf morgen [DPC] Team Unimatrix One) van [DPC]. Ik (Spamlame) zat al met het id van een crackrack te spelen toen ik een jaar RC5-64 deed. Wat ik me kan herinneren was dit een jaar of 2/3 geleden. Op de fora van Anandtech werd er veel over gesproken en in mindere mate ook hier op GOT. Naarmate de tijd verstreek is het id wat verwatert....

Toen kwam RC5-72:
Broer had ik inmiddels ook aan de RC5-64 gekregen en attendeerde mij op RC5-72.
Dus van OGR naar RC5-72 overgestapt en met hem het id van een crackrack voor RC5-72 besproken.

Begin 2003 de website van jobnegotiator gevonden. Deze deed mij enthousiastme om "zo'n ding" te bouwen oplaaien, gelukkig kon ik Broer ook zo "gek" krijgen om mee te doen.

De geschiedenis (mijlpalen, perikelen en andere meuk) van begin 2003 tot juli zal ik hier niet posten. Liefhebbers kunnen deze link naar ons logboek volgen.

Komen we bij de hardware:
Momenteel draait het rack op 13 nodes + de server.
Ons rack bied nog plaats voor nog 1 node.

De nodes zijn gebaseerd op ECS moederborden, deze zijn niet al te prijzig en doen het best goed.
CPU's zijn XP's van AMD, deze bieden niet de beste prijs/ prestatie verhouding.
Dat was ten tijde van de berekeningen de Duron. Door de XP's te gebruiken,
zijn de totale kosten helaas met 1/4 gestegen.
De meeste voedingen zijn 235 Watt, 2 bieden wat meer nl. 300.
235 Watt is voldoende, er zijn immers geen HD's of GF4's aangesloten.

12 nodes draaien op een K7VMM+ (vid,nic o.b.), hierop huist een XP2000 aangevuld met een reepje 128 mb PC133 + FDD's
1 node doet zijn best op een L7VMM, hier is een XP1700 aanwezig met 256 mb DDR
De server moet het doen met een K7S5A + XP1800 en 128 Mb PC133. Tevens is dit de enige met een HD (4.3 Gb).

Als OS is de keuze op FreeBSD 4.7 gevallen. Broer had hier nl. de meeste ervaring mee. Oorspronkelijk was het de bedoeling dat alles middels PXE boot voorzien werd van de images. De L7VMM die we als testbord gebruikt hebben, kan dat als enige, de rest van de nodes worden geboot van een floppy met etherboot
Alle nodes gebruiken de zelfde images, tijdens de boot worden deze in de RAM geplaats. Filesystemen die nodig zijn voor boot worden in een RAM-disk gezet.
Overige filesystemen die nodig zijn, zijn middels NFS beschikbaar vanaf de server.

Oa de D.net client staat op een van de NFS's.
Hierdoor is het noodzakelijk dat deze zo ingericht is dat de buffers in geheugen worden bewaard. Gevolg is dat werk verloren gaat als een van de nodes crasht, om dit op te vangen is de buffer-groote ingestelt op 1 WU.

Het netwerk is een oude 3Com SS2 1100 switch.
Deze heeft 24 10Mbit port + 2 op 100
De nodes zitten op 10Mbit, terwijl de server op 100Mbit zit.
Netwerk statistieken zijn hier te vinden.

Todo:
Mosix clustering software installeren (OS word dan hoogtswaarschijnlijk een Linux smaak).
Controle of de nodes en server nog beschikbaar zijn > zo niet, automagisch reset van het bord.
Evnt. standby server
PerProxy op Locutus
Aanpassing installatie handleiding
Kabels netjes wegwerken
Verdere uitbreiding....

verders
ATM wordt het rack door de PerProxy van Broer gevoed.
Deze wijst weer naar mij. Links naar de stats van beide proxies hieronder:
Broer (eigen + het rack) : klik
Spamlame (eigen + Broer = totaal) : klik

Output van het rack ligt op ongv. 1400 WU's/dag. Met de rest erbij zitten we als team op 2000 WU's/dag. Minder dan de meeste teams hier, maar genoeg om de daily's te halen

Zo een flinke lap text, NU een paar foto's.
Klik voor fotogallery

<sub>nodetestopstelling (met disk zodat ie toch nog nuttig is)


mobo dozen


10 xp 2000's


complete rack achterkant


complete rack voorkant</sub>


Klik voor fotogallery

Reakties zijn welkom

[E-jey]

w00t!

Dit ziet er heel mooi uit! Hoeveel heeft dit nou precies gekost?
Hoeveel wu's doet het rack per dag?

[Adm.Spock]

Jammer dat je niet voor DPC Seti cruncht

[BigB]

omg je bent echt maf
Wel leuk idee enzo maar ik zou er geen geld voor over hebben om koetjes te laten draaien

[Okyah]

WOW Je kan wel 1000 blokjes per dag doen ofzo waarschijnlijk
Of is een WU een blokje?
Volgens mij doet een xp2000+ ongeveer 100 per dag.

[ Voor 39% gewijzigd door Okyah op 09-07-2003 22:05 ]

[Dutchman!]

nice, gesponsord door de Nuon hoop ik

[Anoniem: 21368]

paar vragen:
heb je benchmarks gedraaid (anders dan de RC resultaten), en wat heeft het nou gekost?

[m-m]

Even uit nieuwsgierigheid: wat heeft het nou gekost?
Trouwens vrij vet, heb je nog andere plannen (renderen oid) of heb je het puur en alleen voor crunchen aangeschaft?

[Broer]

E-jey schreef op 09 juli 2003 @ 22:01:
w00t!

Dit ziet er heel mooi uit! Hoeveel heeft dit nou precies gekost?
Hoeveel wu's doet het rack per dag?

Het heeft ongeveer EUR 2700,- gekost en het aantal WU's staat in de post:

...Output van het rack ligt op ongv. 1400 WU's/dag...

[Marcelloz]

En in de bezemkast ermee!

[ Voor 84% gewijzigd door Marcelloz op 09-07-2003 22:09 ]

[Okyah]

Ohzo, ik zie het al
12 2000+, een 1800+ en een 1700+ Ja, dan is 1400 blokjes wel waarschijnlijk

[mcB]

Echt een superstoer cruchbeast!!

Wat is het energieverbruik??

[ Voor 49% gewijzigd door mcB op 09-07-2003 22:08 ]

[Broer]

voor de duidelijkheid, hier staan de statistieken van de cruncher:

Broer (eigen + het rack) : klik

de xx-of-fourteen hosts zijn van het crackrack.

[SpamLame]

mcB schreef op 09 July 2003 @ 22:07:
Echt een superstoer cruchbeast!!

Wat is het energieverbruik??

Niet gemeten.
Max opgenomen wattage v/d voedingen is bijelkaar 3420 Watt.
Net genoeg voor een 16A zekering.

Maarja das het maximum.
Ervan uitgaande dat een gemiddelde xp 70 watt doert, het mobo zelf 20 nodig heeft en geheugen 10 en 1 hd voor de server 5 (mobo/hd en mem = natte vingerwerk), kom ik op 1405 watt.

Marcelloz schreef op 09 juli 2003 @ 22:06:


En in de bezemkast ermee!

Sja, was de enige plek waar die niet in de weg stond
Gelukkig wel een grote bezemkast.
Temp in de ruimte is 30^o meegeholpen door een verwarmingsketel, geiser en met mooi weer de zon.
Vooralsnog gelukkig geen problemen gehad met freezes door de temps.
Wanneer noodzakelijk kunnen we nog frissere luch van buiten gaan aanzuigen.

[ Voor 34% gewijzigd door SpamLame op 09-07-2003 22:20 ]

[Super_ik]

kewl, zelf bouw clusters zijn altijd kewl
ben je nie bang dat je 10 mbit snel dichtslipt? k heb ook een mosix cluster hier draaien, en zodra er taken naar een node worden gezonden, geeft da best wel wa verkeer (owkay, k gebruikte m om cd's te rippen)
wel kewl

[Rannasha]

En toen kwam de stroomrekening ...

Heppie het rack al eens doorgemeten met een multimeter, om te zien hoeveel stroom dat ding nou werkelijk trekt ?

[Glashelder]

Geen DPC mentaliteit maar; dit zal ook wel wat stroom vreten

ik verwacht dus dat die 2700 euro snel zal stijgen

en ik dacht dat Palomino's niet meer verkocht werden...
dat had je zelfs nog wat in de energierekening gescheeld..zoals dutchman ook zegt, ik zou maar met Nuon/Essent/<vul bedrijf in..> om de tafel gaan zitten

heb je ook nog wat aan geluidsbeperking gedaan? Een paar coolermasters van 10 euro zullen wel wat geluid produceren

[ Voor 18% gewijzigd door Glashelder op 09-07-2003 22:23 ]

[Chakotay]

Erg koel ding...

Nog goedkoper had allemaal 1700+ en 1800+ tbred-b's geweest, deze halen met standaardkoeling namelijk zo goed als allemaal de 2 GHz wel, gaat het meteen weer een stuk harder ook

De mobos moeten dan alleen wel een wat hogere FSB aankunnen, of gewoon de MP kunnen instellen

[mcB]

Dat kost je per jaar ruim 1650 Euri uitgaande van 1405 watt. Das zeker een dure grap...

Echt respect dat je dit voor DC'en over hebt...

[SpamLame]

Super_ik schreef op 09 July 2003 @ 22:19:
kewl, zelf bouw clusters zijn altijd kewl
ben je nie bang dat je 10 mbit snel dichtslipt? k heb ook een mosix cluster hier draaien, en zodra er taken naar een node worden gezonden, geeft da best wel wa verkeer (owkay, k gebruikte m om cd's te rippen)
wel kewl

Zal wel meevallen datapakketen van D.net zijn niet zo groot.
Met mosix erbij komen we dan wel achter.
BTW heb je (nog) ergens staan hoe je dat ingericht hebt??

Species5618 schreef op 09 July 2003 @ 22:19:
En toen kwam de stroomrekening ...

Heppie het rack al eens doorgemeten met een multimeter, om te zien hoeveel stroom dat ding nou werkelijk trekt ?

Nogmaals wattages hierboven zijn natte vingerwerk, maar zal niet zoveel schelen.
Rekening hebben we nog niet gehad. Als dat uit de klauw gaat lopen, kunnen we nog altijd op werk gaan lobbyen of die daar kan staan.

En over die palomino's...
Was voor mij ook een verassing, maar heb daar niet zo'n probleem mee.
OC' doen we niet (kan niet eens op die borden ) .

mcB schreef op 09 juli 2003 @ 22:25:
Dat kost je per jaar ruim 1650 Euri uitgaande van 1405 watt. Das zeker een dure grap...

Echt respect dat je dit voor DC'en over hebt...

THX, en ach ja die kosten worden gedeeld door 2 = 825 de man.
Per maand ben je dan €70 kwijt.

Hmmz, toch maar stoppen met roken.
Pakje per dag a 3,80 * 31 = 117.80 = genoeg dus.

[ Voor 17% gewijzigd door SpamLame op 09-07-2003 22:31 ]

[Broer]

dual-zip schreef op 09 July 2003 @ 22:20:
...
heb je ook nog wat aan geluidsbeperking gedaan? Een paar coolermasters van 10 euro zullen wel wat geluid produceren

De coolermasters zijn het probleem niet, de switch maakt in zijn eentje meer herry dan alle andere ventilators bij elkaar

Daarom staat de hele zaak ook in de bijkeuken

[GGS_206]

Whehe dat is wel vet gemaakt

Zeker geld over ofzo, naja succes er in ieder geval mee

[MeneerKrab]

tja, je moet maar gek genoeg zijn. Ik wist het wel, gewoon het bedrijf assimileren waar je werkt, kost je ook nix of je baan

[SpamLame]

PowerCow schreef op 09 juli 2003 @ 22:30:
tja, je moet maar gek genoeg zijn. Ik wist het wel, gewoon het bedrijf assimileren waar je werkt, kost je ook nix of je baan

Sja of je wint 2700 = de stroomrekening of je verliest meer dan je wilt.

DC maakt meer kapot dan je lief =.

[CaLeX]

hier moeten we er meer van hebben

[Super_ik]

mosix installeren stelt imo geen zak voor

k ben uitgegaan van slack 8. met de 2.4.20 kernel. als je heeeel makkelijk wilt doen kun je een standaart installatie tarrertje downen, dan hoef je helemaal weinig in te stellen
maar als je t leuk wilt doen, kun je zelf je kernel patchen en de andere binaries zelf compilen
de config file bestaat uit 2 regels geloof ik, dus dat valt ook nogal meej

[SpamLame]

Ohw, daar gaan we dan vast wel uitkomen.

[Vinnie]

*slik* zo, dat is een grote aanwinst voor DPC. Hulde!

Btw, wat voor core heeft die groene AMD Athlon? Ik heb het iig niet (duidelijk) in dit topic kunnen lezen

[CaLeX]

Vinnie schreef op 09 July 2003 @ 22:39:
*slik* zo, dat is een grote aanwinst voor DPC. Hulde!

Btw, wat voor core heeft die groene AMD Athlon? Ik heb het iig niet (duidelijk) in dit topic kunnen lezen

core=8 toch...

[Vinnie]

CaLeX3000 schreef op 09 July 2003 @ 22:41:
core=8 toch...

Zegt mij eigelijk zo niks Maar meestal hebben de verschillende versies oa andere vorm qua core en ook een ander kleurtje op dat stukje spul waarop de core zit

[KeeZ]

Heel erg mooi jongens, en vooral mooi dat zoiets ook nog voor DPC draait !hulde voor jullie team in ieder geval

[SpamLame]

Vinnie schreef op 09 July 2003 @ 22:44:
[...]

Zegt mij eigelijk zo niks Maar meestal hebben de verschillende versies oa andere vorm qua core en ook een ander kleurtje op dat stukje spul waarop de core zit

Tis iig een Tbred, stepping niet naar gekeken was in deze ook niet echt belangrijk

[Glashelder]

Overklokken is ook niet belangerijk. Je wilt niet dat zo'n ding een nachtje down gaat, dat scheel veel te veel graaswerk

dubbelpost hieronder

[ Voor 13% gewijzigd door Glashelder op 09-07-2003 23:00 ]

[SpamLame]

dual-zip schreef op 09 July 2003 @ 22:55:
Overklokken is ook niet belangerijk. Je wilt niet dat zo'n ding een nachtje down gaat, dat scheel veel te veel graaswerk

Dat is idd de ged8e.
Van de andere kant als er 1 uitvalt blijven de andere wel doordraaien.
En het gedane werk op dat moment is ook maar max 2 WU's.

Zeker als dan ook de "automagische reset controller^tm" klaar is, is het mischien wel het overwegen waard.
Maar vooralsnog draait ie nu lekker zijn standaard

[ Voor 4% gewijzigd door SpamLame op 09-07-2003 23:00 ]

[SpamLame]

.

[ Voor 100% gewijzigd door SpamLame op 09-07-2003 23:00 . Reden: dubbel oeps ]

[Zym0tiC]

echt wel respect hiervoor, gaat dus een hoop geld inzitten.

Maaruh rook jij echt 1 pakje per dag?

[JohnR]

Kan eigenlijk maar 1 ding zeggen en dat is

[mcB]

SpamLame schreef op 09 July 2003 @ 22:59:
.

Toch netjes dat je je laatste zin uit je vorige post ook nog even afsluit met een punt.

[SpamLame]

Zym0tiC schreef op 09 July 2003 @ 23:00:
echt wel respect hiervoor, gaat dus een hoop geld inzitten.

Maaruh rook jij echt 1 pakje per dag?

THX

*ot
Zo ongeveer wel ja.
Niet iets om trots op te zijn, maar nu eenmaal niet anders.
Moet weer eens de ingeving krijgen om te stoppen.
Maar zoiets is bij niet te plannen, dan mislukt het geheid
/ot

[Glashelder]

En het gedane werk op dat moment is ook maar max 2 WU's.

"maar"

Een nacht rekenen, en dan een XP2000+. Dat is imo een hoop rekenwerk. Dat er maar 2 van die DP achtige gevallen uitrollen zegt imo niks.

[Anoniem: 33795]

mooi spul, kga meteen even mijn zolder opmeten

[SpamLame]

dual-zip schreef op 09 July 2003 @ 23:03:
[...]

"maar"

Een nacht rekenen, en dan een XP2000+. Dat is imo een hoop rekenwerk. Dat er maar 2 van die DP achtige gevallen uitrollen zegt imo niks.

Zo had ik het nog niet bekeken, zal ong neerkomen op 25 wu's of block of datapackets. (hoe heten die dingen tegenwoording eigenlijk bij RC5?)
Ik was van het werk wat ie gedaan had sinds de laatste flush = max 2 wu's.

Maar goed zoals eerder vermeld, is het de bedoeling om soft-/hardware matige te gaan controleren of een machine nog actief is.
Zo niet, dan middels relais (oid's) een hardwarematige reset laten uitvoeren.

[Anoniem: 58821]

CaLeX3000 schreef op 09 July 2003 @ 22:32:


hier moeten we er meer van hebben

idd

gut en ik maar denken dat ik gek ben met mijn 10 server hier op zolder

[kieltju]

respect!

[Super_ik]

machine activeit meten kun je doen met een ping-script en wa relais aan je printerpoort

[MadMarky]

CaLeX3000 schreef op 09 July 2003 @ 22:32:


hier moeten we er meer van hebben

Ik ben ook bezig met zoiets, maar vooralsnog op veel kleinere schaal

Ik heb een micro-atx moederbord gekocht, en met wat reserveonderdelen(XP 1700+, 256MB DDR, 1.2GB hardeschijf, 300w voeding) bouw ik het hele spul in het kastje van m'n bureau . Er is ruimte voor nog 1 á 2 extra nodes, maar dat komt misschien later nog.
De nadruk komt iig te liggen op lage geluidsproductie, omdat dat bureau 1,5 meter van m'n bed afstaat. Qua koeling zal het een gesloten systeem worden, dat lucht van buiten gebruikt. Anders wordt het (vooral in de zomer) veel te warm op m'n slaapkamer. De in- en outtake zal worden verzorgd door 2 12cm Papst fans, al dan niet op 7 volt. Ik ben op dit moment nog bezig met inbouwen, zal wel foto's posten als het af is over een aantal weken

[Witlof]

* Witlof heeft er geen woorden voor

[DSmarty]

Gaaf gedaan

Mis alleen wel de casebadges (Deze gebruiken overigens geen elektriciteit )

[weird0]

mjah ik ben een beetje een n00b wat dit soort dingen betreft
maar ik snap niet precies hoe die pc;s zonder hd;s werken enzow
kan je dat ook met 2 of 3 pc's doen ? inplaats van 10 ?
want et lijkt me wel grappig om gewoon om zoiets te beginnen
en elke 2maanden een nieuwe extra bak erbij ofzo
als dat zonder hd's en kan scheelt dat natuurlijk weer

[HitmanWVU]

Ik vraag me dan af hoe je die pc's eigenlijk aan elkaar clustered. Ik heb werkelijk geen id. Aangezien ik niets geen speciale hardware zie neem ik aan dat zoiets via lan gaat Wat dan ook weer niet erg logisch is van mijn kant

[ Voor 15% gewijzigd door HitmanWVU op 10-07-2003 02:28 ]

[SpamLame]

^|W|eiRd0 schreef op 10 July 2003 @ 01:50:....knip.....

Opzetten is opzich makkelijk bij gebruik van PXE (etherboot is wat complexer er).
Het enige wat nodig is, is een server met disk en netwerk.
Op de server is dan een dhcp- ,nfs- en tftpservice geconfigureerd.
Bij opstarten van een node, vraagt deze middels dhcp om opstartgegevens.
Dit gebeurt op basis van het MAC-adres en de server reageert hierop door middels tftp een PXE bootloader over te gooien.
Wat hier precies in staat weet ik niet, maar maakte in ons geval ook niks uit (was meegeleverd bij FreeDSD).
Die bootloader zelf gaat dan alle gegevens (lees filesystems) over het netwerk ingeheugen laden. en opstarten
Eenmaal klaar dan komt nfs de hoek om, om de filesystemen die niet tijdens boot gekopieerd waren aan te bieden aan de clients.

Met deze opzet maakt het niet uit of je nu 1 node of 1000 nodes gebruikt.

Zo werkt het ongeveer.
Als je meer wilt weten kan ik je aanraden de docs van Freebsd en ons logboek eens te lezen.

HitmanWVU schreef op 10 July 2003 @ 02:27:
Ik vraag me dan af hoe je die pc's eigenlijk aan elkaar clustered. Ik heb werkelijk geen id. Aangezien ik niets geen speciale hardware zie neem ik aan dat zoiets via lan gaat Wat dan ook weer niet erg logisch is van mijn kant

www.mosix.org is een voorbeeld van clustering software.
Service Guard van HP ook
Hoe het precies werkt weet ik ook niet.
Nog niet meebegonnen nl., maar het id is dat de nu afzonderlijke nodes dan aan de buitenwereld gepresenteerd wordt als 1 logische machine, met meerdere CPU's.
Dit gebeurt via het LAN, speciale hardware voor zoiets is niet nodig.

[ Voor 3% gewijzigd door SpamLame op 10-07-2003 05:21 . Reden: toevoeging ]

[Anoniem: 63996]

cruched ook wel lekker

[MeneerKrab]

Anoniem: 33795 schreef op 09 July 2003 @ 23:07:
mooi spul, kga meteen even mijn zolder opmeten

jou wil ik wel helpen mee bouwe. Voor jou wil ik zelfs de hardware wel inkopen bij de leverancier. Mocht je ook ooit eens gek worden dan.

[pasta]

^|W|eiRd0 schreef op 10 July 2003 @ 01:50:
mjah ik ben een beetje een n00b wat dit soort dingen betreft
maar ik snap niet precies hoe die pc;s zonder hd;s werken enzow
kan je dat ook met 2 of 3 pc's doen ? inplaats van 10 ?
want et lijkt me wel grappig om gewoon om zoiets te beginnen
en elke 2maanden een nieuwe extra bak erbij ofzo
als dat zonder hd's en kan scheelt dat natuurlijk weer

Ehm... ff alles proberen te antwoorden
Die pc's werken zonder harddisk door een image van het besturingssysteem waar ze op draaien in het geheugen te zetten.

Maar natuurlijk kan je dat ook bij 2 of 3 nodes doen.. Zeker handig als je niet al te hoge stroomrekening wilt


_{oh dat was het al}

[MeneerKrab]

euhm, je kan natuurlijk ook wiet er naast verbouwen. Als de nuon dan komt geef je het crackrack de schuld. De kosten kan je weer betalen met de verkoop

btw, wel geld voor zo'n crackrack maar een fatsoenlijk bed kost te veel

[JustMe]

Ziet er gaaf uit man, en niet eens zo heel duur, nou hopen dat de energie rekening meevalt

[Roel]

Ik zie dat er paar een distributed project te gaan distribureren (oid)
Dat heeft dus weinig zin:

The client, or the currently running projects rather, are not particularly suitable for clustering. distributed.net's projects have so far all had high orthogonality/fine granularity, which being highly suitable for distributed computing, are not going to benefit from additional distribution.

Bron: Distributed.net faq

Je mag het natuurlijk gaan proberen, er staat zelfs bij hoe je het moet doen
Maar IMHO is het gewoon onzin, je zult er niet of niet veel op vooruit gaan....

[edit: Maar wel gaaf dat crackrack, en je hebt het lekker warm in de winter ]

[ Voor 7% gewijzigd door Roel op 10-07-2003 09:37 ]

[Mobster]

Wat dnet bedoelt is dat dat het aantal results op deze manier niet veel hoger zal zijn als wanneer het allemaal 'echte' PC's zouden zijn.

Maar op deze manier ben je in aankoop goedkoper uit en ook qua stroom...

[Anoniem: 33795]

PowerCow schreef op 10 July 2003 @ 08:47:
[...]

jou wil ik wel helpen mee bouwe. Voor jou wil ik zelfs de hardware wel inkopen bij de leverancier. Mocht je ook ooit eens gek worden dan.

Sorry Powercow, mijn zolder is te klein, ik denk dat ik na de vakantie de school weer eens ga infiltreren met de client.

[Broer]

Roel schreef op 10 July 2003 @ 09:34:
Ik zie dat er paar een distributed project te gaan distribureren (oid)
Dat heeft dus weinig zin:
...

Klopt wel dat een cluster voor Dnet niet veel oplevert, maar het is wel leuk prutsen natuurlijk. (dit snappen we nu, op naar de volgende uitdaging... )

Ons crackrack draait voor RC5-72, maar ook een beetje voor ons hoor.

[Okyah]

SpamLame schreef op 09 July 2003 @ 23:07:
[...]


Zo had ik het nog niet bekeken, zal ong neerkomen op 25 wu's of block of datapackets.

Een 2000+ kan in een nacht (nja, 12 uur) wel 50 blokjes doen, hoor
Ik weet btw ook niet wat de naam precies is, maarka

[Anoniem: 64276]

Anoniem: 63996 schreef op 10 July 2003 @ 06:34:
[afbeelding]


cruched ook wel lekker

Dus zo ziet je slaapkamer er uit soul

[mmxmmx]

Vette bak erg mooi gedaan man .

Ik zou het ook wel willen maar ik heb er denk ik de kennis niet voor in huis heheheh .

En nu maar hopen dat je meer mensen in je ongeving zo gek kan krijgen

O ja en wat betreft de stroom ? Maak je niet druk ik heb 1 jaar lang ff geen DPC gedraait en ik kreeg 100 € terug van de nuon . Dat is met 1x400 wat voeding .

[DPCKippie]

Stroom?
In het eerste jaar dat ik op mezelf woonde maar 2 pc's aanstaan.
2e jaar 4. Stroomkosten gingen 40 euro omhoog. Is nu 127 euro per maand.
Maar dat ken natuurlijk ook komen door de vaatwasser/droger enz.

[Jeldert]

Tof ding
Bij Genome@Home stond je met dat ding elke dag dik bovenaan

Maar welk OS draaien de clients nou, en welke de server?? Want er zijn hier al heel wat namen voorbij gekomen, en ook in je log pagina staat heel wat namen

[Broer]

Jeldert schreef op 10 July 2003 @ 13:06:
Tof ding
Bij Genome@Home stond je met dat ding elke dag dik bovenaan

Maar welk OS draaien de clients nou, en welke de server?? Want er zijn hier al heel wat namen voorbij gekomen, en ook in je log pagina staat heel wat namen

Alles draait op FreeBSD 4.7, clients en server
De proxy draait op FreeBSD 4.4

[Tao]

Als eerste: erg mooie actie, en een tof rack!
Denk er zelf ook aan om zoiets te bouwen (wel wat minder nodes), alleen wil ik UD-Think doen en die hebben geen Linux-client
Bovendien moet ik v.w.b. die boot-instellingen alles eerst duidelijk op m'n netvlies hebben, voordat ik er aan begin.... Als ik alles zo lees in jullie logboek -> petje af voor het volhouden!

[Erikie]

leuk dat je ecs-jes gebruikt.. idd erg cheapo en best wel stabiel. (waar voor zn geld). hoeveel zijn d'r al uitgevallen?! of is t resultaat nog 0 ?!

[ge-flopt]

Tao schreef op 10 July 2003 @ 13:24:
Als eerste: erg mooie actie, en een tof rack!
Denk er zelf ook aan om zoiets te bouwen (wel wat minder nodes), alleen wil ik UD-Think doen en die hebben geen Linux-client
Bovendien moet ik v.w.b. die boot-instellingen alles eerst duidelijk op m'n netvlies hebben, voordat ik er aan begin.... Als ik alles zo lees in jullie logboek -> petje af voor het volhouden!

Jawel hoor alleen geen client die zonder x wil draaien maar als je een uitgekleede icewm draait, moet het wel lukken denk ik.

[Tao]

[b][message=18267172,noline]ge-flopt schreef op 10 July 2003 @ 13:40
Jawel hoor alleen geen client die zonder x wil draaien maar als je een uitgekleede icewm draait, moet het wel lukken denk ik.

Wat doet dat icewm dan? (Ik ben een Linux n00b , indien dit een Linux-proggie is.)

[Super_ik]

icewm is een window manager

[Broer]

Tao schreef op 10 juli 2003 @ 13:24:
.... Als ik alles zo lees in jullie logboek -> petje af voor het volhouden!

Dat volhouden gaat wel goed met z'n tweeen, dan maak je mekaar gek

Maar inderdaad af en toe zagen we bepaalde oplossingen niet meer zitten. Vooral dat diskless booten was een crime om uit te zoeken. Ik had bijzonder veel moeite om de sequentie te begrijpen van de bootprocedure, waardoor het lang duurde voordat we etherboot aan de praat hadden.

Maar ik zeg altijd dat alles kan onder Unix, en dat moet ik dan wel waar maken natuurlijk.

We hebben nooit het idee opgegeven van een crackrack, maar de manier om er te komen was niet altijd even duidelijk. Het is nu naar deze oplossing ge-evolueerd.

[Tao]

Broer schreef op 10 juli 2003 @ 15:12:
Vooral dat diskless booten was een crime om uit te zoeken. Ik had bijzonder veel moeite om de sequentie te begrijpen van de bootprocedure, waardoor het lang duurde voordat we etherboot aan de praat hadden.
We hebben nooit het idee opgegeven van een crackrack, maar de manier om er te komen was niet altijd even duidelijk. Het is nu naar deze oplossing ge-evolueerd.

Dat diskless booten vind ik ook bijzonder weerbarstige materie. Op zich staat het er allemaal (na uitvoerig lezen) best wel aardig op papier / het web. Maar dan de praktijk.... -> dan blijkt het toch allemaal weer effe anders.
Zoals: een mobo dat geen PXE ondersteunt, etherbooten fijn maar toch net effe andere scriptfiles, enz. enz.

Vandaar dat ik alles softwarematig eerst op een rij wil hebben, voordat ik wat spullekes ga aanschaffen. Ik denk ook toch aan kleine HDD's, om die tegenslagen van jullie met diskless te voorkomen.

[Anoniem: 42323]

Zo echt vet ook zoiets te hebben, en gaaf dat je dat er voor over hebt om alleen te crunchen,
Ik zou ook wel zoiets willen maken maar zoveel geld heb ik niet, ben een arme student, en me ouders zullen ook wel niet zo blij zijn met de stroomrekening.

Mischien nog een keer als ik later groot ben

[Super_ik]

ipv een kleine hd en een pxe boot kun je ook van diskette booten, das toch weer makkelijker dan pxe en minder duur dan kleine hdtjes

[Broer]

Super_ik schreef op 10 July 2003 @ 15:44:
ipv een kleine hd en een pxe boot kun je ook van diskette booten, das toch weer makkelijker dan pxe en minder duur dan kleine hdtjes

Waar we tegenaan liepen was dat we na wat geknoei een werkende PXE boot hadden, wat volgens mij nog steeds de mooiste methode is (namelijk minder hardware per client), vervolgens zijn we deze configuratie om gaan bouwen naar etherboot, dat was dus fout.

Nadat we vanaf scratch de boel zijn gaan opzetten voor etherboot, en de geleerde zaken voor diskless booten in ons achterhoofd hielden, ging het beter, maar het blijft moeilijk:

Eerst wordt de kernel geladen in het geheugen van de client,
vervolgens worden een opstart directory via nfs of ftp doorlopen, namelijk de opstart directory die gecopieerd is op de server, naar een speciale directory voor de clients.
Daarna wordt door deze opstart scripts de boel ingeladen in memory-filesystems. Als dat gelukt is wordt de opstart directory van die memory-filesystems gebruikt voor de verdere werking van het systeem.

Er zijn dus twee plaatsen waar je rekening mee moet houden voor de configuratie van de client, en duurde bij mij best lang voordat ik dat door had.

Daarnaast zit er ook gewoon een bug in de rc.diskless2 script van FreeBSD, dat helpt ook niet hoor.

[Anoniem: 87380]

Je zou voor de grap nog ens kunnen kijken naar de mogelijkheden met ClusterKnoppix (http://bofh.be/clusterknoppix) Dit is een knoppixdistro met openMosix erin gestreamed...best leuk.

Ik loop alleen zelf nu tegen een paar problemen op met de mfs-mnt's wat niet helemaal lekker werkt, maar misschien hebben jullie de mazzel en expertise om hier geen hinder van te ondervinden.

Succes met jullie leuke project!

[Tao]

Super_ik schreef op 10 juli 2003 @ 15:44:
ipv een kleine hd en een pxe boot kun je ook van diskette booten, das toch weer makkelijker dan pxe en minder duur dan kleine hdtjes

Das wel waar. Anderzijds wil ik een Windows-only client draaien (UD), dus zonder HDD zou het floppybooten moeten worden met Linux en Wine (of Linux en VMMWare) waardoor ik ook wellicht meer geheugen nodig hebt: min. 256MB lijkt me
Dan lijkt me een oplossing met Windows booten van HDD ongecompliceerder

[DukeBox]

Broer schreef op 10 July 2003 @ 15:55:
[...]

Waar we tegenaan liepen was dat we na wat geknoei een werkende PXE boot hadden, wat volgens mij nog steeds de mooiste methode is (namelijk minder hardware per client), vervolgens zijn we deze configuratie om gaan bouwen naar etherboot, dat was dus fout.

Nadat we vanaf scratch de boel zijn gaan opzetten voor etherboot, en de geleerde zaken voor diskless booten in ons achterhoofd hielden, ging het beter, maar het blijft moeilijk:

Eerst wordt de kernel geladen in het geheugen van de client,
vervolgens worden een opstart directory via nfs of ftp doorlopen, namelijk de opstart directory die gecopieerd is op de server, naar een speciale directory voor de clients.
Daarna wordt door deze opstart scripts de boel ingeladen in memory-filesystems. Als dat gelukt is wordt de opstart directory van die memory-filesystems gebruikt voor de verdere werking van het systeem.

Er zijn dus twee plaatsen waar je rekening mee moet houden voor de configuratie van de client, en duurde bij mij best lang voordat ik dat door had.

Daarnaast zit er ook gewoon een bug in de rc.diskless2 script van FreeBSD, dat helpt ook niet hoor.

Voordat ik mijn nodes op pxe had bootte ik ook regelmatig van usb key (of usb floppy drive) Met een intelligent usb hubje kan je zelfs de usbkey/floppy drive delen op alle nodes.

[SpamLame]

Tao schreef op 10 July 2003 @ 16:27:
[...]


Das wel waar. Anderzijds wil ik een Windows-only client draaien (UD), dus zonder HDD zou het floppybooten moeten worden met Linux en Wine (of Linux en VMMWare) waardoor ik ook wellicht meer geheugen nodig hebt: min. 256MB lijkt me
Dan lijkt me een oplossing met Windows booten van HDD ongecompliceerder

Je hebt dan eigenlijk een volwaardige pc.
CPU/ NIC/ VGA/ MEM/ HD.
Het id (zo goedkoop mogelijk zoveel mogelijk Mhz's) achter een crackrack is dan gelijk weg.
Daarnaast is het nog maar de vraag, of je nog ergens goedkoop, een kleine fatsoenlijk werkende HD kan vinden.

Dan zou ik als ik jou was een rondkijken of het mogelijk is windows remote (PXE/ Etherboot) te booten.

offcourse nofi

Kijk [url=http://www.nilo.org/]hier[/url eens voor het pxe booten van windows tot NT.
Scheelt je weer een HD

[ Voor 7% gewijzigd door SpamLame op 10-07-2003 20:20 ]

[Visjes]

Je moet een zonne paneel, windmolen of kernenergie centrale aanschaffen om dit goed te kunnen laten draaien!
Scheelt denk ik echt aanzienelijk in de rekening!

http://www.evolta.nl/index_se.html

http://consumenten.eneco....ie/4_9_1_zonnepanelen.asp

misschien kan je alles in je huis hierop aansluiten

MAAR dit is echt mooi gemaakt

[ Voor 22% gewijzigd door Visjes op 10-07-2003 22:05 ]

[mmxmmx]

Ga je de processors ook upgraden ?

Je hebt voor een erg klein bedrag al veel snellere processoren op de markt .

Je moet alleen wel ff een zaakje vinden die de oude weer inruild natuurlijk

En dan nog een vraag die op het randje zit

Kunnen er ook mensen jullie team joinen ?

[Tao]

SpamLame schreef op 10 July 2003 @ 20:11:
[...]
Dan zou ik als ik jou was een rondkijken of het mogelijk is windows remote (PXE/ Etherboot) te booten.

offcourse nofi

Kijk [url=http://www.nilo.org/]hier[/url eens voor het pxe booten van windows tot NT.
Scheelt je weer een HD

nofi: none taken
En thnx for zuh tib. Die link is erg informatief

[axis]

woei.. restecpa!!

Je gaat gewoon stroom aftappen van een wijkverdeelpunt.. Doen ze in die woonwagenkampen toch ook? Dan moet jij het ook kunnen..

[X-G]

Respect...

Zo iets wil ik hebben voor ecc2 :'(!

[gp500]

Hier in DPC/GoT was ook al een Draad waarin we we zoiets besproken

Voor 1000 euro zoveel mogelijk CPU kracht

[SpamLame]

mmxmmx schreef op 11 July 2003 @ 13:50:
Ga je de processors ook upgraden ?

Je hebt voor een erg klein bedrag al veel snellere processoren op de markt .

Je moet alleen wel ff een zaakje vinden die de oude weer inruild natuurlijk

En dan nog een vraag die op het randje zit

Kunnen er ook mensen jullie team joinen ?

Upgrade komt vast wel, maar das pas ten sprake als de snelste T-bred uitgefaseerd gaat worden.
De moederborden accepteren nl geen Barton's en nu upgraden is te duur.
Dat ding heeft al genoeg gekost.

En over dat laatste...
Kom ik of Broer nog op terug, we hebben daar nog niet echt overnagedacht

[dude123]

dr is speciale software voor waarbij je op elke pc een client installeerd
dit valt zowel onder windows (NOT) als onder linux() te doen

[ThaHandy]

K*I*C*K, KICK

@ log tezien zijn jullie nog met (linux)OS aan et knoeien geweest

mijn vraag nog ff

is et nog steeds et zelfde als toen begin juli?

[ Voor 11% gewijzigd door ThaHandy op 17-08-2003 16:34 ]

[Broer]

'tis nog niet veel anders, alleen is het wel warm geweest in onze "server ruimte" (max 36 C)

We zijn met Linux aan het stoeien/knoeien inderdaad, om mosix te kunnen draaien, maar blijkbaar moet je het af en toe loslaten

Dus het enige echte nieuws is dat we een mijlpaal hebben gehaald.

[Eijkb]

Als je nog zin hebt om mee te doen met de DPC Stampede... Het team En de muis zei tegen de olifant... heeft nog leden nodig. In jouw geval misschien maar 1 lid

[SpamLame]

Hoewel we snel kunnen switchen tussen RC5/ Ecc2 etc. (aanpassing dhcp conf.) neemt dat wel veel diskspace in beslag (nieuwe competitie nieuwe image).

Alhoewel.....het moet ook mogelijk zijn alle clients (RC5/ Ecc2 etc) in een image te doen en de opstart te regelen via de rc.conf.

[ Voor 32% gewijzigd door SpamLame op 18-08-2003 07:13 . Reden: minibrainwave ]

[Jaap-Jan]

Jullie crackrack zal hoogstwaarschijnlijk een goede duw in de richting zijn om eens wat meer uit de schaduw van Ars te treden. We hebben nu iedere keer minimale verschillen, soms Ars eens wat meer, dan weer eens de DPC. Als je het aan de gang zou krijgen dan begint de Stampede echt nut te krijgen.

En het zal natuurlijk een flinke boost aan En die Muis zei Tegen de Olifant geven.

[SpamLame]

Uit nieuwschierigheid: hoeveel units zou dit ding in ecc2 opleveren dan?

Denk dat met de vakantie enzo, het niet zal lukken om met een stampede mee te doen (volgende keer ?), zeker niet, als de client niet zijn buffers in het geheugen vast kan houden.
Das nl makkelijker dan filesystems te gaan mounten (iedere client eigen diskspace dus uit diskspace lopen).

Prioriteit ligt momenteel bij het cluster met mossix oid.
Wat gelijk inhoud dat het rack op Linux (nu test met Slack) over moet.
We zien wel wat dde toekomst ons bregnt.

[ Voor 20% gewijzigd door SpamLame op 18-08-2003 07:36 . Reden: oeps ]

[mcB]

Hey,... Japie_17 ,... doe jij es assimileren voor de Stampertjes.

(er is/was nog ruimte voor een 6e team (Team Broer en SpamLame ??))
Alleen het crackrack kan al meer dan 3 keer zoveel output hebben dan SRA had.

[SpamLame]

mcB schreef op 18 August 2003 @ 07:35:
Hey,... Japie_17 ,... doe jij es assimileren voor de Stampertjes.

(er is/was nog ruimte voor een 6e team (Team Broer en SpamLame ??))
Alleen het crackrack kan al meer dan 3 keer zoveel output hebben dan SRA had.

Japie_17 weet vast wel dat recruten niet mag, mind de wink in zijn post.
Maar nooit geschoten is mis, dus ik kan hem wel begrijpen dat ie dit doet

Alleen hebben jullie niet al genoeg CPU's......
Zag er, wat zal het zijn, 50 CPU's in jullie team?
Zelfs een VIA C3 800 doet dapper mee.......:)

[ Voor 14% gewijzigd door SpamLame op 18-08-2003 07:42 ]

[Swaptor]

We zijn hard bezig, maar nooit hard genoeg!
Maareh, niets dan hulde met jullie crackrack!
Errug gaaf initiatief, zo moeten er meer mensen zijn!
(*Swaptor niet, hij is maar een arm studentje*)

[Anoniem: 7492]

* Anoniem: 7492 kent mensen die zelfs 1 AMD T-bird niet aan het draaien krijgen

Misschien een beowulf cluster een idee ?

[Anoniem: 40441]

Wanneer word dit rek ingezet voor de Stampede

[Jaap-Jan]

mcB schreef op 18 August 2003 @ 07:35:
Hey,... Japie_17 ,... doe jij es assimileren voor de Stampertjes.

(er is/was nog ruimte voor een 6e team (Team Broer en SpamLame ??))
Alleen het crackrack kan al meer dan 3 keer zoveel output hebben dan SRA had.

Als we het hebben over het zwakste team joinen, dan heeft EDMZTDO het harder nodig dan wij. Bovendien vind ik het nogal slap, want eikb heeft al gevraagd, dan ben ik niet zoëen die gaat roepen van nee joh, de stampertjes zijn veel leuker.

Maar een eigen team is misschien ook niet zo'n slecht idee. Vreemd genoeg moet je dan wel 3 personen hebben om een team op te mogen richten.