ppstats met Ubuntu 10.04

[4681]

een goede dag allemaal, ik hoop dat een linux / stats guru mij kan helpen de laatste haak van alle haken en ogen die ik ben tegen gekomen weg te werken!

ok even kleine voor geschiedenis, ik draai al jaren een proxy op mijn werk voor de nodige koetjes en dat heb ik op Windhoos wel redelijk onder de knie maar ineens kwam daar Mcafee met een update en tada mijn mooie proxyper.exe word ineens gezien als een trojan horse!

nu draai ik op mijn desktop Ubuntu 10.04 en heb daar een proxy aan de praat gekregen, maar als echte stats freak wilde ik natuurlijk ook gewoon stats en dat is toch net even anders bij linux dan Windhoos!

via de Sobat van TheLawnMooherMan ben ik in contact gekomen met Rolf en daar kreeg een voorbeeld van de scrips van die ik nodig had om stats te draaien!

na een middagje piel werk ben ik zo ver dat ik elke 10 min mooie client stats heb maar het enige dat ik nog mis is de proxy stats, tijdens het script krijg ik een error:

WARNING : Personal Proxy Statistics : Cannot open ConsoleLogFile : (Bestand of map bestaat niet)

ik heb het gevoel dat mijn ppstats of de console file niet kan vinden of er niks mee kan maar na uren zitten spitten in de files of ik ergens een pad kan vinden waar het script gaat kijken naar de console file heb ik het opgegeven want ik kan niks vinden!

weet iemand waar ik kan opgeven waar ppstats moet kijken voor die file ???

Greetz Mo-Bees!

[Robinski]

Als ik het mij goed herinner kijkt ppstats in de proxyper.ini voor het pad van de ConsoleLogFiles.

Heb hem zelf iig draaiende onder Linux, kan vanavond eventueel voor je kijken.

[Witlof]

Tja, ik weet dat die pagina wel wat troubles kan geven. Maar volgens mij moet het in je proxyper.ini hetzelfde staan als in je ppstats.ini.

Ik weet dat het probleem in de ppstats-ogr versie zit. In RC5 werkt het namelijk wel zo lijkt het bij ons

[Voor 29% gewijzigd door Witlof op 25-10-2010 13:54]

[4681]

ik heb eigenlijk geen idee welke versie ppstats ik nu gebruik muhwhaha

euh weet ik dus wel

Personal Proxy Statistics ppstats-ogrng-7.1.zip v7.1.11d

nu ik dit zie roep ik uit mijn hoofd dat ik ergens gelezen had dat ik 7.2 nodig heb

[Voor 54% gewijzigd door 4681 op 25-10-2010 13:57]

[Witlof]

Mo-Bees schreef op maandag 25 oktober 2010 @ 13:55:
ik heb eigenlijk geen idee welke versie ppstats ik nu gebruik muhwhaha

Ik heb geloof ik destijds het probleem ook gehad en daarbij een 2e proxy.ini aangemaakt voor de stats. Deze heb ik in de ppstats.ini achter ProxyIni gezet. Daarmee was het toen geloof ik wel opgelost, maar zeker weten doe ik dat niet meer.

[stappel_]

Lang geleden hoor.

In ppstats-ogr.ini staat een regel met ProxyIni=
Deze wijst naar de proxyper folder met de proxyper.ini
bijvoorbeeld: ProxyIni = "/opt/perproxy/proxyper.ini"

In de proxyper.ini moet je de regels goed zetten bijvoorbeeld:
[console]
logfileconsole=/opt/perproxy/logs/console
logfileconsolerotation=daily
consoleverbosity="general keyblock stats buffers timestamp attention errlow errsevere"
timestampflags=129

de logfileconsole= wijst naar de log files.
de timestampflags=129 is ook nodig om een bruikbaar log datum te krijgen.

[Witlof]

Aangezien het bij ons ook alleen maar bij RC5 werkte, heb ik maar eens even gekeken waar het probleem zat. Als alles goed ingesteld staat, moet je nog even de ppstats-ogr-7.2.pl aanpassen (mits je die versie hebt maar anders dus een andere bestandsnaam).

Zoek daar de regel:

code:

            ($ldate, $ltime, $project, $ready, $max, $rate, $ratestr, $total) = split(/\ /, $entry);
            if ($project eq "ogr") {

En verander die naar:

code:

            ($ldate, $ltime, $project, $ready, $max, $rate, $ratestr, $total) = split(/\ /, $entry);
            if ($project eq "ogrng") {

Hier werkt het inmiddels dus

[4681]

Witlof schreef op maandag 25 oktober 2010 @ 19:47:
Aangezien het bij ons ook alleen maar bij RC5 werkte, heb ik maar eens even gekeken waar het probleem zat. Als alles goed ingesteld staat, moet je nog even de ppstats-ogr-7.2.pl aanpassen (mits je die versie hebt maar anders dus een andere bestandsnaam).

Zoek daar de regel:

code:

            ($ldate, $ltime, $project, $ready, $max, $rate, $ratestr, $total) = split(/\ /, $entry);
            if ($project eq "ogr") {

En verander die naar:

code:

            ($ldate, $ltime, $project, $ready, $max, $rate, $ratestr, $total) = split(/\ /, $entry);
            if ($project eq "ogrng") {

Hier werkt het inmiddels dus

Hummm die ogrng staat er dus al in

[4681]

geen error meer na de aanpassing van stappel maar ook geen output

[4681]

while (<CONSOLELOG>) {
if (/,ogrp2/) {
$statusin =$_;
$statusout = $_;
}

die zie ik nog in mijn striplog.pl moet dat niet ogrng zijn ??

[The_Greater]

Mo-Bees schreef op dinsdag 26 oktober 2010 @ 16:17:
[...]

die zie ik nog in mijn striplog.pl moet dat niet ogrng zijn ??

Ja, volgens mij wel. Het is namelijk anders gelogd.
Im gebruik thuis "Personal Proxy Statistics v7.2.1 revised ".
Deze kan ik je zo mailen als je het wilt.

[4681]

The_Greater schreef op dinsdag 26 oktober 2010 @ 16:21:
[...]


Ja, volgens mij wel. Het is namelijk anders gelogd.
Im gebruik thuis "Personal Proxy Statistics v7.2.1 revised ".
Deze kan ik je zo mailen als je het wilt.

heel graag

het gaat mij om deze output:
http://dpc.pegge.nl/server.html

e-mail denk ik te vinden bij mijn profiel anders ff een pm

denk trouwens nog steeds dat ik naar 7.2 moet alleen die kreeg ik helemaal niet aan de praat
ach een keer een verloren vrijdag middag maar eens sleutelen!

[Voor 15% gewijzigd door 4681 op 26-10-2010 16:26]

[The_Greater]

Mo-Bees schreef op dinsdag 26 oktober 2010 @ 16:24:
[...]


heel graag

het gaat mij om deze output:
http://dpc.pegge.nl/server.html

e-mail denk ik te vinden bij mijn profiel anders ff een pm

denk trouwens nog steeds dat ik naar 7.2 moet alleen die kreeg ik helemaal niet aan de praat
ach een keer een verloren vrijdag middag maar eens sleutelen!

Je hebt mail

Thuis draait het op een win2003 met de nodige ram-bam.

[SandStar]

Mocht je er alsnog niet uitkomen kan je wel configs van mij krijgen.
Kan ik vrij makkelijk copy pasten vanaf audhumla.

[4681]

Thx THE_CREATER

en mocht je tijd hebben stuur maar op sandstar beter te veel dan te weinig!

ik spijker wel mijn linux kennis op zo

[SandStar]

Mo-Bees schreef op dinsdag 26 oktober 2010 @ 18:06:
Thx THE_CREATER

en mocht je tijd hebben stuur maar op sandstar beter te veel dan te weinig!

ik spijker wel mijn linux kennis op zo

Ik wacht het wel even af. De versie die ik gebruik zal ongetwijfeld weer net iets anders zijn...

[4681]

SandStar schreef op dinsdag 26 oktober 2010 @ 18:31:
[...]


Ik wacht het wel even af. De versie die ik gebruik zal ongetwijfeld weer net iets anders zijn...

Sandstar draai jij de stats onder linux??

zo ja dan graag even mailen want ik krijg alleen windows based spullen opgestuurd

[The_Greater]

De scripts zijn perl gebasseerd, ik neem dan ook aan dat het mogelijk is om onder linux te draaien.
Alleen het wgnuplot.exe zal dan vervangen moeten worden met de linux variant.

[SandStar]

Mo-Bees schreef op dinsdag 26 oktober 2010 @ 19:05:
[...]


Sandstar draai jij de stats onder linux??

zo ja dan graag even mailen want ik krijg alleen windows based spullen opgestuurd

Audhumla (proxy.dutchpowercows.org) draait Debian.

Wellicht handig om via IRC even erachter komen wat je precies nodig hebt?
irc.iuturna.net #dpc
Of via de nieuwe WDO site

[Voor 6% gewijzigd door SandStar op 26-10-2010 19:23]

[Witlof]

Ik draai het ook onder linux. Fedora om precies te zijn. Dus als er nog meer hulp nodig is, dan hoor ik het wel.

[4681]

Witlof schreef op dinsdag 26 oktober 2010 @ 19:47:
Ik draai het ook onder linux. Fedora om precies te zijn. Dus als er nog meer hulp nodig is, dan hoor ik het wel.

tja hulp alleen om de proxy stats (console file) in te lezen rest werkt gewoon!

ik denk toch dat ik morgen of vrijdag middag eens in de 7.2 ga duiken want ik doe nu alles met de 7.1

download linkje gevonden op DPC.org dus gewoon een keer een verse start met de juiste versie we zien wel waar het schip strand!

[4681]

nou draai nu met 7.2 versie en de byhost.html werkt prima maar ik krijg nog steeds geen output in mijn server.html

ik kan zien dat de html files wel op dezelfde tijd worden aangemaakt hij leest alleen niet de info in die je normaal uit de console file haalt

[SandStar]

Post je config eens

[The_Greater]

Mo-Bees schreef op woensdag 27 oktober 2010 @ 10:56:
nou draai nu met 7.2 versie en de byhost.html werkt prima maar ik krijg nog steeds geen output in mijn server.html

ik kan zien dat de html files wel op dezelfde tijd worden aangemaakt hij leest alleen niet de info in die je normaal uit de console file haalt

Je hebt ook aangegeven dat de proxy een logfile poept?
proxy.ini vb :

code:

[console]
logfileconsole=E:/Distributed.net/proxy/console/
logfileconsolerotation=daily
consoleverbosity="general stats keyblock server client buffers timestamp attention errlow errsevere"
timestampflags=130

[4681]

proxyper.ini

code:

[console]
logfileconsole=/usr/koeproxy/console
logfileconsolerotation=daily
consoleverbosity="general stats keyblock server client buffers timestamp attention errlow errsevere"
timestampflags=129

[ogrng]
logfilekeyblock=/usr/koeproxy/ogrng/pproxyogrng
logfilekeyblockrotation=daily
minkeysready=10000
maxkeysready=10000
minkeysdone=00000000
maxkeysdone=00000000
expertmode=1

ppstats-ogr.ini

code:

LogDir = "/usr/koeproxy/ogrng/stripped/"
LogPre = "pinproxyogrng"      # For ogrpkeyYYYYMMDD
LogSuf = "log"          # For ogrpkeyYYYYMMDD.log

striplog

code:

$biglog  = "/usr/koeproxy/ogrng/pproxyogrng" . $logdate . ".log";
$smallog = "/usr/koeproxy/ogrng/stripped/pinproxyogrng" . $logdate . ".log";

$conslog  = "/usr/koeproxy/console" . $logdate . ".log";
$statfile  = "/var/www/stats/ogrng/buffout.txt";

de code waar het om gaat denk ik!

ik zie dus dat de verschillende .html files op dezelfde tijd gemaakt worden alleen zit er geen info in de server.html welke normaal gesproken uit de console file komt!

[The_Greater]

Mo-Bees schreef op woensdag 27 oktober 2010 @ 13:02:
proxyper.ini

code:

[console]
logfileconsole=/usr/koeproxy/console
logfileconsolerotation=daily
consoleverbosity="general stats keyblock server client buffers timestamp attention errlow errsevere"
timestampflags=129

Er is een klein verschil in de proxy.ini file.
Wellicht een probleem met de timestapflags?

code:

[console]
logfileconsole=E:/Distributed.net/proxy/console/
logfileconsolerotation=daily
consoleverbosity="general stats keyblock server client buffers timestamp attention errlow errsevere"
timestampflags=130

[4681]

130 van gemaakt en proxyper -restart om ini opnieuw te laden daarna stats run maar geen verschil!

[The_Greater]

Mo-Bees schreef op woensdag 27 oktober 2010 @ 13:18:
130 van gemaakt en proxyper -restart om ini opnieuw te laden daarna stats run maar geen verschil!

Kan ik van jou de console en proxy log eens krijgen, dan probeer ik deze eens te parsen.

[4681]

nou daar kijk ik nu dus in en zir dit:

code:

2010-10-27 11:17:25,distributed.net Personal Proxy (build 347)
2010-10-27 11:17:25,Visit http://www.distributed.net/ for details.
2010-10-27 11:17:25,Unrecognized command line option: "-restart"
2010-10-27 11:17:25,Shutting down contests.
2010-10-27 11:17:25,Proxy shutdown complete.
2010-10-27 11:22:50,distributed.net Personal Proxy (build 347)
2010-10-27 11:22:50,Visit http://www.distributed.net/ for details.
2010-10-27 11:22:50,Unrecognized command line option: "-restart"
2010-10-27 11:22:50,Shutting down contests.
2010-10-27 11:22:50,Proxy shutdown complete.

terwijl ik een oude console file dit zie:

code:

2010-10-22 12:37:06,distributed.net Personal Proxy (build 347)
2010-10-22 12:37:06,Visit http://www.distributed.net/ for details.
2010-10-22 12:37:06,Proxy starting up.
2010-10-22 12:37:06,Verbosity set to: general stats keyblock server client buffers timestamp attention errlow errsevere (3519)
2010-10-22 12:37:06,Notice: connectivity mode is normal
2010-10-22 12:37:06,Notice: Loaded 0 ignoredip addresses from ini file
2010-10-22 12:37:06,Notice: Loaded 0 allowedip addresses from ini file
2010-10-22 12:37:06,Notice: Primary listener bound to (all devices):2064
2010-10-22 12:37:06,Notice: Test listener bound to (all devices):3064
2010-10-22 12:37:06,rc5-72 r=5103/5000, d=0/0, 0.0 Mkeys/sec, tot=0/0
2010-10-22 12:37:06,ogrng r=10000/10000, d=0/0, 0.0 Mnodes/sec, tot=0/0 stubs
2010-10-22 12:37:06,Status: Uptime: 0.00:00:00, 2 listeners, 0 uplinks
2010-10-22 12:37:06,Status: 0 active clients (peak: 0, mean: 0.00)

ik mis dus een stuk in mijn console file op mijn linux doos

[4681]

WOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOOT

lezen is ook een vak er staat gewoon dat -restart geen goed commando is pppfff

ik dus maar ff killall proxyper en in een terminal gestart en hoppa ik zie data langs komen!

daarna ff mijn striplog.pl en ppstats-ogr-7.2.pl gedraait en TADA ik heb info !!!!!!!!!!

iedereen heel erg bedankt voor jullie hulp het lijkt te werken!

[The_Greater]

STATS or did not happen!

[4681]

dat zeg ik gamma

[SandStar]

je moet een SIGHUP signal sturen. Dan reload ie de .ini file

[4681]

SandStar schreef op woensdag 27 oktober 2010 @ 13:44:
je moet een SIGHUP signal sturen. Dan reload ie de .ini file

dude nogmaals ik ben blondt en ben sinds een weekje aan het prutsen met proxyper's op linux

zijn er commandline opties voor herstart / start / stop etc voor de proxyper onder linux??

[Witlof]

Mo-Bees schreef op woensdag 27 oktober 2010 @ 14:05:
[...]


dude nogmaals ik ben blondt en ben sinds een weekje aan het prutsen met proxyper's op linux

zijn er commandline opties voor herstart / start / stop etc voor de proxyper onder linux??

Check deze FAQ-o-matic van dnet: http://faq.distributed.net/cache/262.html

[4681]

Witlof schreef op woensdag 27 oktober 2010 @ 14:12:
[...]

Check deze FAQ-o-matic van dnet: http://faq.distributed.net/cache/262.html

daar kan ik niet echt uit halen wat het commando zou moeten zijn!

onder linux doe ik bv voor dnetc >> ./dnetc -restart en ding stopt en start incl. .ini reload!

-restart is dus geen proxyper command want dat werkt nie

[Witlof]

probeer eens -HUP

[4681]

Witlof schreef op woensdag 27 oktober 2010 @ 15:06:
probeer eens -HUP

[2010-10-27 14:17:49] Unrecognized command line option: "-HUP"

[4681]

service proxyper start

misschien dat service proxyper restart ook werkt!

vrijdag maar weer eens proberen morgen lekker vrij namelijk hehehe

[Witlof]

Oh ja, je was niet zo bekend met linux

code:

killall proxyper -SIGHUP

Fijne vrije dag morgen.