[OGR-25] hitparade van 17 juni

[Verwijderd]

Het is weer woensdag voorspeldag en de kristallen bollen worden uit de kast gehaald, spreadsheets opgestart...

{verhaal}

Eerst de analyse van de hitparade van de dag:
We doen "maar" 7 P vandaag, is er ergens een storing in de waterafvoer? Kennelijk niet bij H.M. van Essen, die een mijlpaal mag meenemen en mdenburger die flusher van de dag wordt.

[OGR-25] hitparade van 17 juni 2008

Daily Top 30
pos		daily	member	total
1.	()	5.564.032	NoizyCows	1.295.731.710	(1)
2.	()	584.703	x-RaY99 the one-man 'bucket'	125.490.140	(4)
3.	(1)	285.750	EliteHackers.info	94.646.643	(6)
4.	(3)	74.777	Fryslân MP	52.893.543	(10)
5.	(12)	61.394	Mooooohhhh - Top-30 here I stay >:-)	9.780.100	(30)
6.	(1)	53.319	Fwnk	8.214.774	(35)
7.	(1)	52.171	Team BSD	46.590.069	(13)
8.	(2)	36.788	Team Newton	23.773.677	(15)
9.	()	35.817	SKiLLa	4.568.748	(56)
10.	(1)	31.776	Jive	109.169.335	(5)
11.	(3)	22.526	H.M.vanEssen at GeoDelft.nl	4.608.204	(55)
12.	(3)	19.723	Division Brabant	48.491.502	(11)
13.	(1)	19.127	Ruben	4.954.192	(52)
14.	(5)	18.088	Robinski	5.599.465	(45)
15.	()	17.273	Peter 'MathFox' Roozemaal	10.524.065	(27)
16.	()	16.863	almaddin at yahoo.com	1.080.012	(124)
17.	(17)	15.511	Tinkerer	5.188.643	(46)
18.	(6)	15.072	Stappel	55.200.465	(9)
19.	(29)	15.064	Maantje	1.052.331	(128)
20.	(14)	14.898	Team ColdFusion	228.810.925	(2)
21.	(4)	13.237	reznor	12.680.934	(24)
22.	(8)	12.239	Team_Kwakende_kip	9.723.770	(31)
23.	(2)	11.555	Los Alcoholicos	47.445.230	(12)
24.	(2)	11.242	brum103	20.701.486	(17)
25.	(2)	10.694	Clearance	7.345.599	(37)
26.	(2)	9.502	ossy_666	4.660.184	(54)
27.	(7)	8.225	The_Greater	14.350.658	(22)
28.	()	8.053	MasterYoda	1.651.113	(96)
29.	()	7.824	mdenburger at xs4all.nl	19.396	(956)
30.	(1)	6.683	foxz at xs4all.nl	851.075	(143)
Meer...

Overall Top 30
pos		total	member	daily
1.	()	1.295.731.710	NoizyCows	5.564.032	(1)
2.	()	228.810.925	Team ColdFusion	14.898	(20)
3.	()	189.140.779	Graasland	0
4.	()	125.490.140	x-RaY99 the one-man 'bucket'	584.703	(2)
5.	()	109.169.335	Jive	31.776	(10)
6.	()	94.646.643	EliteHackers.info	285.750	(3)
7.	()	71.855.232	The Fonz	0
8.	()	65.404.875	Digital Pizza Crew	5.020	(32)
9.	()	55.200.465	Stappel	15.072	(18)
10.	()	52.893.543	Fryslân MP	74.777	(4)
11.	()	48.491.502	Division Brabant	19.723	(12)
12.	()	47.445.230	Los Alcoholicos	11.555	(23)
13.	()	46.590.069	Team BSD	52.171	(7)
14.	()	24.087.767	NGS	4.977	(33)
15.	()	23.773.677	Team Newton	36.788	(8)
16.	()	23.629.875	MAWEK	2.440	(38)
17.	()	20.701.486	brum103	11.242	(24)
18.	()	15.594.323	Puchelaar, TonioG & Fumble	6.650	(31)
19.	()	15.439.241	Pixilated NetphreaX	1.574	(41)
20.	()	15.413.901	Team Switch	248	(50)
21.	()	15.192.136	NightBird	0
22.	()	14.350.658	The_Greater	8.225	(27)
23.	()	12.847.222	De Unie's	0
24.	()	12.680.934	reznor	13.237	(21)
25.	()	11.324.511	DM	0
26.	()	10.841.561	De Utregse Kudde	0
27.	()	10.524.065	Peter 'MathFox' Roozemaal	17.273	(15)
28.	()	10.477.072	Theetjuh	0
29.	()	9.877.682	CSC Hand full Of Idiots "HOI"	4.452	(35)
30.	()	9.780.100	Mooooohhhh - Top-30 here I stay >:-)	61.394	(5)
Meer...

Teams Daily Top 15
pos		daily	member	total
1.	()	7.100.596	Dutch Power Cows	3.125.733.396	(1)
2.	()	3.181.889	linux-de.org	243.178.370	(16)
3.	()	2.663.379	BugTraq.Ru Team. United power of xUSSR.	1.728.047.626	(2)
4.	(1)	1.472.229	Ars Technica Team Beef Roast	736.498.280	(3)
5.	(1)	1.350.110	Free-DC	590.487.377	(5)
6.	()	1.256.782	yoyo@home BOINC wrapper	407.548.951	(7)
7.	()	1.028.744	2ch, Team	353.025.515	(9)
8.	()	464.739	Team Warped (OS/2)	518.093.990	(6)
9.	()	461.583	Distributed Amiga	590.993.758	(4)
10.	(5)	366.753	TeamComputerra - New Russian Generation	102.195.985	(33)
11.	(13)	347.151	Ukraine	144.476.934	(25)
12.	(1)	301.958	Monochrome BBS	270.696.646	(12)
13.	(1)	254.367	Namibia RC5-64 team	256.865.014	(14)
14.	(7)	239.824	SPring-8	190.662.932	(19)
15.	(2)	227.553	Terminal & BBS Liane & Others RC5 Team	187.812.701	(21)
Meer...

Teams Overall Top 15
pos		total	team	daily
1.	()	3.125.733.396	Dutch Power Cows	7.100.596	(1)
2.	()	1.728.047.626	BugTraq.Ru Team. United power of xUSSR.	2.663.379	(3)
3.	()	736.498.280	Ars Technica Team Beef Roast	1.472.229	(4)
4.	()	590.993.758	Distributed Amiga	461.583	(9)
5.	()	590.487.377	Free-DC	1.350.110	(5)
6.	()	518.093.990	Team Warped (OS/2)	464.739	(8)
7.	()	407.548.951	yoyo@home BOINC wrapper	1.256.782	(6)
8.	()	374.766.303	AnandTech 10635	78.492	(38)
9.	()	353.025.515	2ch, Team	1.028.744	(7)
10.	()	280.422.847	#distributed	97.035	(29)
11.	()	279.133.101	Czech D.NET Team	99.522	(27)
12.	()	270.696.646	Monochrome BBS	301.958	(12)
13.	()	267.118.422	BOFH@Chalmers	79.493	(37)
14.	()	256.865.014	Namibia RC5-64 team	254.367	(13)
15.	()	249.062.656	Slashdot.org 1365	149.090	(22)
Meer...

Mijlpalen
H.M.vanEssen at GeoDelft.nl	4.600.000

Leden
Flushers: 51/2972 = 1.7%
Geen nieuwe leden

Megaflush top 5
18 mei 2008	NoizyCows	258.349.434
21 oktober 2007	Team ColdFusion	57.070.210
30 mei 2008	x-RaY99 the one-man 'bucket'	40.871.874
31 december 2007	Graasland	23.030.821
31 december 2007	Los Alcoholicos	8.088.377

Meer informatie
OGR-25 projectpagina op WDO
*** suggesties voor een DPCH? ***
bron


Oja, de voorspelling: Er zijn nog 71066687 stubs met in totaal zo'n 3.5 Exanode te doen; als we dat relateren aan de productie van de afgelopen dagen of weken is het project op 16 of 17 september afgerond. De Russen staan nu bijna 1.4 Exanode achter en het wordt steeds onwaarschijnlijker dat ze ons ooit in zullen halen.

[ Voor 1% gewijzigd door Verwijderd op 18-06-2008 10:32 . Reden: verhaal ]

[Robinski]

Verwijderd schreef op woensdag 18 juni 2008 @ 10:18:
Oja, de voorspelling: Er zijn nog 71066687 stubs met in totaal zo'n 3.5 Exanode te doen; als we dat relateren aan de productie van de afgelopen dagen of weken is het project op 16 of 17 september afgerond. De Russen staan nu bijna 1.4 Exanode achter en het wordt steeds onwaarschijnlijker dat ze ons ooit in zullen halen.

Mijn voorspelling geeft dat we nog ongeveer 3.6E aan nodes moeten doen.
De eind data die ik momenteel zie zijn: 23-10-2008, 14-10-2008 of 28-10-2008.

Ik blijf nog steeds hopen op snel weer een hele grote berg veel kleinere stubs zodat de voortgang een zeer grote boost zal krijgen.

Volgende week weer een update!

[DPCKippie]

He Mooooohhhh... doe es aardig
Zo kunnen we je nooit inhalen natuurlijk


Feli van Essen met de mijlpaal

[ Voor 18% gewijzigd door DPCKippie op 18-06-2008 11:37 ]

[MeneerKrab]

Robinski schreef op woensdag 18 juni 2008 @ 11:09:
[...]


Mijn voorspelling geeft dat we nog ongeveer 3.6E aan nodes moeten doen.
De eind data die ik momenteel zie zijn: 23-10-2008, 14-10-2008 of 28-10-2008.

Ik blijf nog steeds hopen op snel weer een hele grote berg veel kleinere stubs zodat de voortgang een zeer grote boost zal krijgen.

Volgende week weer een update!

Er zullen op dat moment meer stubs verwerkt worden, die zullen sneller opraken, maar de hoeveelheid nodes zijn geleidelijk aan verminderen. Wij als NC zullen dan nog steeds ongeveer 7P doen p/d maar veel meer stubs dan normaal.

[ Voor 14% gewijzigd door MeneerKrab op 18-06-2008 14:08 ]

[Robinski]

GBI schreef op woensdag 18 juni 2008 @ 14:06:
[...]

Er zullen op dat moment meer stubs verwerkt worden, die zullen sneller opraken, maar de hoeveelheid nodes zijn geleidelijk aan verminderen. Wij als NC zullen dan nog steeds ongeveer 7P doen p/d maar veel meer stubs dan normaal.

Het zit hem dan ook niet in het aantal nodes dat er per dag doorheen gaat, maar juist in het aantal stubs. Als er meer stubs worden ingeleverd zal de voortgangs percentage sneller gaan omdat deze berekend wordt op basis van stubs.

Daarnaast zal hierdoor het aantal nodes dat nog gedaan moet worden dalen, omdat de gemiddelde grootte van de ingeleverde stubs naar beneden gaat, welke gebruikt wordt om het aantal nodes dat nog gedaan moet worden te schatten.

Ook wel, als de stubs kleiner worden, zal het aantal nodes dat nog gedaan moeten worden krimpen, en zal het aantal stubs dat gedaan wordt op een dag flink stijgen wat er voor zorgt dat de voorgang een versnelling krijgt.


Edit/PS
Volgens mijn berekeningen doet heel dnet momenteel 28.073.027 Gnodes per dag, terwijl dit volgens dnet zelf 35.073.569 Gnodes is.

Wat er op kan duiden dat mijn schatting voor de einddatum verkeerd is, en we waarschijnlijk sneller klaar zullen zijn.

[ Voor 11% gewijzigd door Robinski op 18-06-2008 15:15 ]

[Verwijderd]

GBI schreef op woensdag 18 juni 2008 @ 14:06:
[...]
Er zullen op dat moment meer stubs verwerkt worden, die zullen sneller opraken, maar de hoeveelheid nodes zijn geleidelijk aan verminderen. Wij als NC zullen dan nog steeds ongeveer 7P doen p/d maar veel meer stubs dan normaal.

Achter iedere voorspelling zit een aantal aannames. De meest simpele methode is "stubs tellen": Je deelt het aantal stubs wat er nog te doen is door het gemiddelde aantal stubs dat er per dag ingeleverd wordt. Je neemt dan aan dat de gemiddelde stubgrootte per dag ongeveer constant is en dat de totale computerpower op het project niet veel verandert. Je kunt met de wet van Moore rekening houden en kijken naar de productie van de laatste dagen of weken, maar dan verstoren spaaracties en megaflushes het beeld.
Het grootste probleem bij OGR voorspellen is dat de stubs aanzienlijk variëren in de hoeveelheid rekenwerk (meer dan een factor 1000). Niemand weet precies hoeveel werk (nodes, stat units) er nog gedaan moet worden; zelfs distributed.net niet. Ik werk met schattingen van de gemiddelde stubgrootte per subfase (aannames) en de aantallen stubs per subfase van d.net om een schatting te maken van de heveelheid werk (nog meer aannames) die er nog te doen is. Dan kijk je naar de statistieken (ingeleverde stat units) van de afgelopen weken en er verschijnt een datum in een spreadsheet.

[Verwijderd]

Robinski schreef op woensdag 18 juni 2008 @ 15:12:
[...]
Edit/PS
Volgens mijn berekeningen doet heel dnet momenteel 28.073.027 Gnodes per dag, terwijl dit volgens dnet zelf 35.073.569 Gnodes is.

Wat er op kan duiden dat mijn schatting voor de einddatum verkeerd is, en we waarschijnlijk sneller klaar zullen zijn.

Ik reken zelfs met 38 tot 39 Pnode/dag...

Betekent dat dat 20% van de ingeleverde stubs een derde, vierde, .... keer inleveren van dezelfde stub is?

[MarkB]

Ik vraag me af waarom d.net stubspace 6 nog niet helemaal heeft uitgegeven?

[NLSchutP]

Wat uitgegeven is, wordt pas na 3 maanden opnieuw uitgegeven volgens mij... dus op die manier kun je concluderen dat Stubspace 6 over 3 maanden weg moet zijn...

Om die reden zal OGR ook nog niet direct afgelopen zijn, wanneer er geen stubs meer te berekenen zijn....

[Robinski]

Verwijderd schreef op woensdag 18 juni 2008 @ 15:27:
[...]


Ik reken zelfs met 38 tot 39 Pnode/dag...

Betekent dat dat 20% van de ingeleverde stubs een derde, vierde, .... keer inleveren van dezelfde stub is?

Mijn eigen getal (28.073.027) is gebaseerd op het verschil in aantal geschatte nodes dat nog gedaan moet worden over de afgelopen 5 dagen.

Dit wordt berekend op basis van het aantal stubs dat gedaan is (op dnet), uitgezet op het gemiddelde aantal nodes dat nog per subfase (geschat) nog gedaan moet worden.

Hierin zijn dus meerdere factoren die kunnen veranderen, dus vandaar dat ik zelf denk dat we nog wel eerder met OGR klaar moeten kunnen zijn, dan wat ik nu gok.

Overigens denkt dnet zelf, dat in het meest gunstigste geval (30 dagen gemiddelde) dat we 11-Dec-2008 klaar zijn.

We zullen zien wie er momenteel de meest accurate schatting heeft als het project ten einde is, en tja het kan zomaar zo zijn dat op het einde veel mensen geen werk meer hebben, en dat we erg lang moeten wachten op de laatste stubs/nodes.

[SandStar]

Robinski schreef op woensdag 18 juni 2008 @ 22:00:
[...]

We zullen zien wie er momenteel de meest accurate schatting heeft als het project ten einde is, en tja het kan zomaar zo zijn dat op het einde veel mensen geen werk meer hebben, en dat we erg lang moeten wachten op de laatste stubs/nodes.

Ik vrees dat het einde van ogr-25 idd nogal moeilijk gaat worden. Is ook al eeuwen geleden dat ze zo enthousias aankondigden een nieuw project te willen lanceren om er vervolgens nooit meer iets over te laten weten. Wazige zooitje....

[Verwijderd]

Ja, over een maand of twee gaat het eindspel van OGR-25 beginnen en wordt het interessant om de input buffers gevuld te houden. Alle clients die geen OGR voer vinden kunnen overschakelen op RC5... totdat d.net haar nieuwe project uitgerold heeft.

[Robinski]

Verwijderd schreef op donderdag 19 juni 2008 @ 11:39:
Ja, over een maand of twee gaat het eindspel van OGR-25 beginnen en wordt het interessant om de input buffers gevuld te houden. Alle clients die geen OGR voer vinden kunnen overschakelen op RC5... totdat d.net haar nieuwe project uitgerold heeft.

Tegen de tijd dat OGR schaars gaat worden, ga ik mijn clients langzaam kleiner buffers geven, en mijn proxy een grotere om zo werk beter over de clients te verdelen.
Daarnaast is het dan ook gemakkelijker om stubs te "lenen" bij mede crunchers.


Nog iets opmerkelijks over de stubs, er zijn gister minder nodes ingeleverd dan eergisteren, maar er zijn wel meer stubs (30.000) gedaan dan eergisteren.

Dit wijst er op dat de gemiddelde stub grootte weer ietsjes naar beneden is gegaan, echter lijkt het er op dat de stub grootte al een geruime tijd licht schommelt.