[Ervaringen] Newznab

[FutureCow]

Zou iemand mij kunnen helpen met het laatste stukje.

Ik heb ondertussen alles draaien op een Linux bak: nginx, percona, Sphinx, newznab+

De hele admin gebeuren van newsnab ingesteld. Om te testen heb ik even 2 groepen geactiveerd
a.b.teevee en a.b.tvseries, backfill days op 30 gezet.

Daaran:

php update_binaries.php:

code:

newznab 0.2.3p Copyright (C) 2013 newznab.com


This program is distributed with a commercial licence. See LICENCE.txt for
further details.
Updating: 2 groups - Using compression? Yes
Group 1 of 2
Processing a.b.teevee
INFO: daytopost finding post for a.b.teevee  48 days back.
Total Articles: 53678
 Upper: 53679
 Lower: 1
 Goal: Mon, 18 Feb 2013 13:35:06 +0100 (1361190906)
DEBUG: Searching for postdate
 Goaldate: 1361190906 (Mon, 18 Feb 2013 13:35:06 +0100)
 Firstdate: 1299606279 (Tue, 08 Mar 2011 18:44:39 +0100)
 Lastdate: 1361355357 (Wed, 20 Feb 2013 11:15:57 +0100)
Start: 1
 End: 53679
 Interval: 26839
Set interval to 13420 articles.
Set interval to 6710 articles.
Set interval to 3355 articles.
Set interval to 1678 articles.
Set interval to 839 articles.
New upperbound (52840) is 46.1 days old.
Set interval to 420 articles.
New upperbound (52420) is 46.1 days old.
Set interval to 210 articles.
New upperbound (52210) is 46.1 days old.
Set interval to 105 articles.
Set interval to 53 articles.
Set interval to 27 articles.
Set interval to 14 articles.
Set interval to 7 articles.
New upperbound (52203) is 46.1 days old.
Set interval to 4 articles.
Set interval to 2 articles.
New upperbound (52201) is 46.1 days old.
Set interval to 1 articles.
Determined to be article 52201 which is 99.6 days old (Sat, 29 Dec 2012 00:13:19                                                                                                                                +0100)
Group a.b.teevee has 1,479 new parts.
First: 1 Last: 53679 Local last: 0
New group starting with 48 days worth.
Getting 1,479 parts (52201 to 53679) - 0 in queue
Received 1479 articles of 1479 requested, 0 blacklisted, 0 not binaries
31 new, 0 updated, 1,479 parts. 2.36 headers, 0.22 update, 2.59 range.
Group processed in 10.64 seconds

Group 2 of 2
Processing a.b.tvseries
No new records for a.b.tvseries (first 826086 last 826085 total 0) grouplast 826                                                                                                                               085

Updating completed in 11.20 seconds

en php update_releases.php:

code:

newznab 0.2.3p Copyright (C) 2013 newznab.com


This program is distributed with a commercial licence. See LICENCE.txt for
further details.


Starting release update process (2013-04-07 14:35:23)
Using latest regex revision 2749
Stage 1 : Applying regex to binaries
Stage 2 : Marking binaries where all parts are available
Stage 3 : Creating releases from complete binaries
Stage 4 : Finished processing nfos
Stage 5 : Deleting releases less than 95 complete
Stage 5 : Post processing started
NfoProc : Complete 0 NFOs detected from 0 scanned NZB files.
PostPrc : Updating GID in releases table 0 release(s) updated
PostPrc : Removing unwanted releases
PostPrc : Deleting releases older than 1200 days
PostPrc : Deleting 0 audio previews older than 60 days
TVRage  : Looking up 0 releases using local and web
Stage 6 : Aggregating Files
Stage 7 : Deleting unused binaries and parts
Stage 7 : Complete - 0 rows affected
Done    : Added 0 releases

Updating delta indexes
Updating 'releases'
indexing index 'releases_delta'...
collected 0 docs, 0.0 MB
total 0 docs, 0 bytes
total 0.004 sec, 0 bytes/sec, 0.00 docs/sec
total 1 reads, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
total 5 writes, 0.000 sec, 1.1 kb/call avg, 0.0 msec/call avg
rotating indices: successfully sent SIGHUP to searchd (pid=20284).
Updating 'releasefiles'
indexing index 'releasefiles_delta'...
collected 0 docs, 0.0 MB
total 0 docs, 0 bytes
total 0.004 sec, 0 bytes/sec, 0.00 docs/sec
total 1 reads, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
total 5 writes, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
rotating indices: successfully sent SIGHUP to searchd (pid=20284).
Updating 'releasenfo'
indexing index 'releasenfo_delta'...
collected 0 docs, 0.0 MB
total 0 docs, 0 bytes
total 0.004 sec, 0 bytes/sec, 0.00 docs/sec
total 1 reads, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
total 5 writes, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
rotating indices: successfully sent SIGHUP to searchd (pid=20284).
Updating 'predb'
indexing index 'predb_delta'...
collected 0 docs, 0.0 MB
total 0 docs, 0 bytes
total 0.004 sec, 0 bytes/sec, 0.00 docs/sec
total 1 reads, 0.000 sec, 0.0 kb/call avg, 0.0 msec/call avg
total 5 writes, 0.000 sec, 0.1 kb/call avg, 0.0 msec/call avg
rotating indices: successfully sent SIGHUP to searchd (pid=20284).

Maar nu blijft alles gewoon leeg. op de site zie ik niets, heb ook geen idee of er iets naar de database wordt weggeschreven. Wat gaat er fout?

[Delsin]

FutureCow schreef op zondag 07 april 2013 @ 17:30:
Zou iemand mij kunnen helpen met het laatste stukje.

Ik heb ondertussen alles draaien op een Linux bak: nginx, percona, Sphinx, newznab+

De hele admin gebeuren van newsnab ingesteld. Om te testen heb ik even 2 groepen geactiveerd
a.b.teevee en a.b.tvseries, backfill days op 30 gezet.

Daaran:

php update_binaries.php:
[code]
newznab 0.2.3p Copyright (C) 2013 newznab.com


This program is distributed with a commercial licence. See LICENCE.txt for
further details.
Updating: 2 groups - Using compression? Yes
Group 1 of 2
Processing a.b.teevee

Aan je releases log te zien heb je wel de laatste regexes in je database.

Wat me opvalt is dat de log van update_binaries een onwaarschijnlijk laag aantal posts aangeeft voor a.b.teevee. Met zoveel dagen terug zou dat in de miljoenen moeten lopen.

Kun je eens in je binaries tabel kijken of er in elk geval enkele records in terecht zijn gekomen?
Met query " select count(*) from binaries " , of doe een raw search en zoek bijv. naar de letter "a".
Als er dan wat in je database zit zou je dat wel moeten zien.

Als je records in binaries ziet, backfill.php eens starten voor a.b.teevee?
Wellicht komen er dan wel records binnen.

Of gebruik je misschien een usenet provider die geen retentie/binaries heeft?

[FutureCow]

als ik php backfill.php uitvoer:

code:

Processing a.b.teevee
INFO: daytopost finding post for a.b.teevee  48 days back.
Total Articles: 53678
 Upper: 53679
 Lower: 1
 Goal: Mon, 18 Feb 2013 22:30:30 +0100 (1361223030)
DEBUG: Searching for postdate
 Goaldate: 1361223030 (Mon, 18 Feb 2013 22:30:30 +0100)
 Firstdate: 1299606279 (Tue, 08 Mar 2011 18:44:39 +0100)
 Lastdate: 1361355357 (Wed, 20 Feb 2013 11:15:57 +0100)
Start: 1
 End: 53679
 Interval: 26839
Set interval to 13420 articles.
Set interval to 6710 articles.
Set interval to 3355 articles.
Set interval to 1678 articles.
Set interval to 839 articles.
New upperbound (52840) is 46.5 days old.
Set interval to 420 articles.
New upperbound (52420) is 46.5 days old.
Set interval to 210 articles.
New upperbound (52210) is 46.5 days old.
Set interval to 105 articles.
Set interval to 53 articles.
Set interval to 27 articles.
Set interval to 14 articles.
Set interval to 7 articles.
New upperbound (52203) is 46.5 days old.
Set interval to 4 articles.
Set interval to 2 articles.
New upperbound (52201) is 46.5 days old.
Set interval to 1 articles.
Determined to be article 52201 which is 99.9 days old (Sat, 29 Dec 2012 00:13:19 +0100)
Group a.b.teevee: server has 1 - 53679, or ~714 days.
Local first = 52201 (46 days).  Backfill target of 48days is post 52201.
Nothing to do, we already have the target post.

Als ik in de binaries tabel kijk:
Records 0 - 29 ( 6,436 totaal, Query duurde 0.0003 sec)

Dus daar staat iig iets in. maar heb eerder ook al wel met a.b.boneless geprobeerd.

[wauwwie]

Als ik "php backfill_date.php 2013-03-08 alt.binaries.teevee" uitvoer dan krijg ik al als total article count 120000002 terug terwijl jij er maar 53678 terug krijgt. Dat is meer dan 2000x zo weinig. Het lijkt er sterk op dat deze groep bij jouw provider een hele slechte retentie heeft.

Test het eens tegen een anders (betaalde) nieuwsserver.

code:

php backfill_date.php 2013-03-08 alt.binaries.teevee
Processing alt.binaries.teevee
INFO: daytopost finding post for alt.binaries.teevee 31 days back.
Total Articles: 120000002
 Upper: 493738820
 Lower: 373738818
 Goal: Fri, 08 Mar 2013 09:41:44 +0100 (1362732104)
DEBUG: Searching for postdate
 Goaldate: 1362732104 (Fri, 08 Mar 2013 09:41:44 +0100)
 Firstdate:  (n/a)
 Lastdate: 1365410501 (Mon, 08 Apr 2013 10:41:41 +0200)
Start: 373738818
 End: 493738820
 Interval: 60000001
Set interval to 30000001 articles.
Set interval to 15000001 articles.
Set interval to 7500001 articles.
New upperbound (486238819) is 13.3 days old.
Set interval to 3750001 articles.
New upperbound (482488818) is 24.7 days old.
Set interval to 1875001 articles.
Set interval to 937501 articles.
New upperbound (481551317) is 28 days old.
Set interval to 468751 articles.
New upperbound (481082566) is 29.8 days old.
Set interval to 234376 articles.
New upperbound (480848190) is 30.5 days old.
Set interval to 117188 articles.
Set interval to 58594 articles.
New upperbound (480789596) is 30.9 days old.
Set interval to 29297 articles.
Set interval to 14649 articles.
Set interval to 7325 articles.
Set interval to 3663 articles.
New upperbound (480785933) is 31 days old.
Set interval to 1832 articles.
Determined to be article 480785933 which is 31 days old (Fri, 08 Mar 2013 09:54:27 +0100)
Group alt.binaries.teevee: server has 373738818 - 493738819, or ~15803 days.
Local first = 487428342 (9 days).  Backfill target of 1days is post 480785933.
Getting 20000 parts (6622409 in queue)

[Mr_Blobby]

a.b.teevee is niet hetzelfde als alt.binaries.teevee

[FutureCow]

ik heb een betaalde server (hitnews.eu) blijkbaar blokkeert deze newznab?

[Coenen]

Newznab haalt headers op, het lijkt me sterk dat Hitnews.eu dat blokkeert. Je zou het kunnen testen met een ander nieuwsprogramma, zoals bv newsleecher.

HEt verschil wat Mr_Blobby aangeeft is ook iets om naar te kjken.

[wauwwie]

Weet iemand waar je de links op de portal naar sickbeard en sabnzbd kan aanpassen? Ik heb al zitten zoeken, maar deze niet kunnen vinden.

[Red Boll]

wauwwie schreef op woensdag 10 april 2013 @ 18:26:
Weet iemand waar je de links op de portal naar sickbeard en sabnzbd kan aanpassen? Ik heb al zitten zoeken, maar deze niet kunnen vinden.

Wanneer je "SABnzbd Integration" in NN bedoeld: Inloggen > Profile > Edit > SABnzbd Integration

EDIT 01 : *ARGH* ... Snap het al... Effe kijken hoor.
EDIT 02 : in je basepage.tpl (deze staat in mijn geval in templates\default\views\frontend vanaf regel 110)

[ Voor 20% gewijzigd door Red Boll op 10-04-2013 21:33 ]

[wauwwie]

Red Boll schreef op woensdag 10 april 2013 @ 21:28:
[...]

Wanneer je "SABnzbd Integration" in NN bedoeld: Inloggen > Profile > Edit > SABnzbd Integration

EDIT 01 : *ARGH* ... Snap het al... Effe kijken hoor.
EDIT 02 : in je basepage.tpl (deze staat in mijn geval in templates\default\views\frontend vanaf regel 110)

Bedankt! Dit is inderdaad de plek om de voorpagina links aan te passen.

[Coenen]

Sinds ik gister m'n (Windows) server even een harde power reset moest geven staat m'n Newznab al een hele nacht "Stage 3 : Added Release blablaetcetc" te doen. Terwijl voor de reset hij prima werkte. 9 van de 10 series werden via mijn Newznab gevonden. Ik laat hem nog wel even door zwoegen en als ie vanacond nog niet klaar is, ga ik het script maar restarten.

[Protax]

Goedemorgen,

Ik heb onlangs een VPS aangeschaft om hier NN op te gaan draaien.
Op advies van een medetweaker heb ik het volgende script gekregen om de boel te installeren:

https://github.com/zombu2/nninstall/blob/master/nninstall.sh

Echter als ik nu het script probeer te runnen krijg ik diverse meldingen.

nn.sh: line 11: $'\r': command not found

Weet iemand wat ik hieraan kan doen? Zou het graag eens met een dergelijk script willen installeren inplaats van handmatig.

Alvast bedankt!

Edit: Hij installeert dos2unix did the trick

[ Voor 4% gewijzigd door Protax op 12-04-2013 09:27 ]

[Slurpgeit]

He? Dat script chmod de hele newznab directory gewoon naar 777! Dat zijn dus ook scripts die door root als crontab gerund worden. Zo maak je het voor hackers wel heel makkelijk om je server over te nemen.

[Protax]

Kan ik weer terugdraaien neem ik aan?

[Coenen]

Ik heb net maar weer een repair op m'n database gedaan, die was helaas crashed. Vandaar dat ie nog steeds bezig was met die releases.

[FutureCow]

ik heb a.b.boneless toegevoegd, met de backfill op 5 days (in de groep settings)

extra zie ik dit bij update binaries:

code:

Group 2 of 7
Processing a.b.boneless
INFO: daytopost finding post for a.b.boneless 5 days back.
Total Articles: 10000000
 Upper: 18737705
 Lower: 8737705
 Goal: Tue, 09 Apr 2013 12:30:10 +0200 (1365503410)
ERROR: Backfill target of 5 day(s) is newer than the last article stored on your                                                                                                                                news server.
To backfill this group you need to set Backfill Days to at least 9 days (Fri, 05                                                                                                                                Apr 2013 12:14:01 +0200).
Skipping group: a.b.boneless
Group 3 of 7
Processing alt.binaries.boneless
INFO: daytopost finding post for alt.binaries.boneless 5 days back.
Total Articles: -1
 Upper: 0
 Lower: 1
 Goal: Tue, 09 Apr 2013 12:30:10 +0200 (1365503410)
ERROR: Backfill target of 5 day(s) is newer than the last article stored on your                                                                                                                                news server.
To backfill this group you need to set Backfill Days to at least 15811 days (Wed                                                                                                                               , 31 Dec 1969 01:00:00 +0100).
Skipping group: alt.binaries.boneless

het lijkt mij dat er toch wel iets meer in a.b.boneless moet staan?

[Coenen]

Voor Boneless waren de standaard regexen wat beperkt, dus dan krijg je niet super veel releases.
Ik kan het even niet checken, maar ik heb Boneless als het goed is er niet meer tussen zitten, dit omdat ik maar weinig release kreeg, maar wel veel headers moest downaloaden.

[Tsurany]

Opeens uit het niets bij applying regex to binaries:
PHP Fatal error: Call to a member function fetch_assoc() on a non-object in /var/www/newznab/www/lib/framework/db.php on line 193
Wat kan ik hier tegen doen?

[Potame]

Is er misschien iemand die me kan helpen met m'n probleempje? Ik ben nogal een waardeloze programmeur en kom hier gewoon niet meer uit.
Als ik wil updaten, blijft hij op Stage 1: Applying regex to binaries hangen.
Googlen heeft geen soelaas geboden, dus hopelijk is hier iemand die 't bekend voor komt en me verder kan helpen

[Ultimation]

Ik heb mijn index al een tijdje laten draaien en nu kom ik zo nu en dan wat probleemjes tegen:

code:

MusicPr : Processing 1000 audio releases
Updating animetitles.PHP Warning:  gzopen(http://anidb.net/api/animetitles.dat.gz): failed to open stream: HTTP request failed! HTTP/1.1 404 Not Found
 in /var/www/newznab/www/lib/anidb.php on line 40
PHP Warning:  gzread() expects parameter 1 to be resource, boolean given in /var/www/newznab/www/lib/anidb.php on line 42
.PHP Warning:  gzclose() expects parameter 1 to be resource, boolean given in /var/www/newznab/www/lib/anidb.php on line 58
 done.

Ik wil ook graag weten hoe ik zeker kan weten dat mijn index nu goed draait i.v.b.m de wens om deze op invite voor een beperkte groep Tweakers beschikbaar te stellen.

EDIT: Daarnaast zie ik toch weer een hoop releases verschijnen die geen duidelijke titels hebben ({738FF934-8A1C-4C9C-8DF7-71E3A6B7000F}, usenet-4all bd doku 31a6teo4, Uwomi3Edep76 etc). Ondanks de regexen.

Ook werkt het updaten van mijn newznab installatie niet helemaal. Ik snap dat de nieuwste regexen worden gedownload, maar hoe kan ik dit zeker weten?

[ Voor 18% gewijzigd door Ultimation op 23-04-2013 22:14 ]

[Elect]

Meer mensen hier het probleem dan nieuwsgroepen niet meer volledig geindexeerd kunnen worden omdat de server 'did not return XXX articles'?

Ik zie dit bij i-telligent, extremeusenet en sunnynews. Probleem is dat de partrepair tabel uiteindelijk uit z'n klauwen groeit om nog binnen de timeout van de nieuwsgroep in te lezen. 9 GB is echt niet grappig meer.

[kmf]

Elect schreef op woensdag 24 april 2013 @ 08:26:
Meer mensen hier het probleem dan nieuwsgroepen niet meer volledig geindexeerd kunnen worden omdat de server 'did not return XXX articles'?

Ik zie dit bij i-telligent, extremeusenet en sunnynews. Probleem is dat de partrepair tabel uiteindelijk uit z'n klauwen groeit om nog binnen de timeout van de nieuwsgroep in te lezen. 9 GB is echt niet grappig meer.

zelfde problemen hier. Iemand een oplossing gevonden?

[timminater]

Ik volg de newznab informatie al enige tijd en vraag me af hoe belastend het voor een systeem is. Aangezien in op dit moment alles draai (win8, PLEX, PLEX server, SB, CP, autosub, maraschino, spotweb) op een asrock COREHT 233D draai ( i3 2330M CPU, 4GB ram) vraag ik mij af of er nog recource vrij is om bijvoorbeeld alleen films te indexeren, aangezien mijn series momenteel wel prima binnenkomen

[Verwijderd]

timminater schreef op maandag 06 mei 2013 @ 23:08:
Ik volg de newznab informatie al enige tijd en vraag me af hoe belastend het voor een systeem is. Aangezien in op dit moment alles draai (win8, PLEX, PLEX server, SB, CP, autosub, maraschino, spotweb) op een asrock COREHT 233D draai ( i3 2330M CPU, 4GB ram) vraag ik mij af of er nog recource vrij is om bijvoorbeeld alleen films te indexeren, aangezien mijn series momenteel wel prima binnenkomen

Genoeg mensen om me heen die het bovenstaande draaien maar wel met een linux distro.... en xbmc draait er ook vrolijk mee. Met Win8 weet ik het helaas niet

[Coenen]

Volgens mij valt het wel mee qua resource gebruik. Ik draai nu WHS2011, met een i3 en 4GB en ongeveer dezelfde services. Zorg wel voor lekker wat schijf ruimte voor je database en ga niet gelijk tig dagen backfillen en te veel groepen indexen.

[Qazwaplol]

timminater schreef op maandag 06 mei 2013 @ 23:08:
Ik volg de newznab informatie al enige tijd en vraag me af hoe belastend het voor een systeem is. Aangezien in op dit moment alles draai (win8, PLEX, PLEX server, SB, CP, autosub, maraschino, spotweb) op een asrock COREHT 233D draai ( i3 2330M CPU, 4GB ram) vraag ik mij af of er nog recource vrij is om bijvoorbeeld alleen films te indexeren, aangezien mijn series momenteel wel prima binnenkomen

CPU/memory valt wel mee, zal bij standaard inrichting nooit meer dan 2 threads vol trekken (1x php en 1x mysql), 't is vooral disk I/O.

Kan het niet aanbevelen om bijvoorbeeld de newznab database op dezelfde disk te zetten als waar je video opslaat (of OS disk), dan kan je tijdens de index momenten van newznab problemen krijgen bij afspelen van HD materiaal.

Elect schreef op woensdag 24 april 2013 @ 08:26:
Meer mensen hier het probleem dan nieuwsgroepen niet meer volledig geindexeerd kunnen worden omdat de server 'did not return XXX articles'?

Ik zie dit bij i-telligent, extremeusenet en sunnynews. Probleem is dat de partrepair tabel uiteindelijk uit z'n klauwen groeit om nog binnen de timeout van de nieuwsgroep in te lezen. 9 GB is echt niet grappig meer.

Niet helemaal, wel vergelijkbaar iets dat na een maand of 2 het update_binaries script crashed bij het doorlopen van de repair lijst. Fix het steeds door maar gewoon de repairs weg te mikken (TRUNCATE `partrepair`;) maar een structurele oplossing niet gevonden

[ Voor 18% gewijzigd door Qazwaplol op 12-05-2013 22:20 . Reden: new page, dan quote er maar bij ]

[dannzyx]

Tsurany schreef op zondag 14 april 2013 @ 22:50:
Opeens uit het niets bij applying regex to binaries:
PHP Fatal error: Call to a member function fetch_assoc() on a non-object in /var/www/newznab/www/lib/framework/db.php on line 193
Wat kan ik hier tegen doen?

Ik krijg sinds gisteren avond exact hetzelfde, dit wordt aangeroepen in de /www/bin/releases.php, en dan volgens mij voor de regexes.
Nog meer mensen hier sinds kort last van?

EDIT:
Net even in de chat gegaan van de newznab, kreeg meteen dit terug:

<newznab>: donnie: myisam table crash frequently, use "optimisedb.php true" to repair. if your parts table is large consider truncating first. For more information write ?? fetch_assoc

Kan het zelf helaas pas vanavond proberen, kan iemand de oplossing bevestigen?

[ Voor 26% gewijzigd door dannzyx op 17-05-2013 09:29 ]

[Tsurany]

Mijn oplossing was stoppen met Newznab Teveel issues en te weinig opbrengst.

[Freaked]

Ik heb nu twee dagen Newznab+ draaien (dankzij de manual van MrOizo2005), alleen nu merk ik dat er bij MP3 releases vaak staat: Rar contents: {releasenaam}/install.bin

En zo heb ik vele releases die allemaal netjes getagged zijn, maar die allemaal een install.bin bevatten. Nu vond ik bij de instellingen wel een mogelijkheid om .exe's toe te laten staan bij sommige categorieën, maar is het ook mogelijk om zelf nog een filter aan te maken dat een MP3 releases geen .bin (van bijv. < 200MB) mag bevatten..?

Het enige wat ik nog aangepast heb:

• newznab_screen_local.sh: update_binaries_threadedphp i.p.v. non-threaded.
• newznab_screen_local.sh: ook nog update_parsing.php toegevoegd (update_releases wordt ervoor gerunt én erna.. is dit goed?)
• Blacklist geupdate a.d.h.v. de lijst van Nivong

[Red Boll]

Die meuk met de .bin erin zal zeer waarschijnlijk malware o.i.d. zijn.

[Freaked]

De install.bin bestanden zijn inderdaad spam/malware. In de IRC chat zag ik dat je met het deletereleases.php script (/newznab/misc/testing/deletereleases.php) ervoor kunt zorgen dat deze verwijdert worden.
Ik heb deze regel toegevoegd in deleterelease.php (verwijdert alle releases in audio met install.bin in de release)

code:

$sql = "select distinct r.ID from releasefiles rf inner join releases r on r.id = rf.releaseID and r.categoryID like '3%' where rf.name like '%install.bin'";

Tevens heb ik dit script toegevoegd aan newznab_screen_local.sh

[Coenen]

Binnenkort ook maar eens aan mijn NewzNAb toevoegen, kan geen kwaad. Verder draait ie prima. Van de week misschien eens kijken of er nog SVN updates zijn.

[Slurpgeit]

Hmm, deze week opeens veel problemen met newznab. Ik kan niet meer inloggen, en sabnzbd krijgt alleen maar lege nzb's. De log staat vol met dit soort dingen:

[Sun May 19 09:42:24 2013] [error] [client x.x.x.x] PHP Notice:  Undefined index: lastlogin in /<newznabpad>/www/lib/framework/basepage.php on line 83, referer: http://<newznaburl>/login
[Sun May 19 09:42:24 2013] [error] [client x.x.x.x] PHP Notice:  Undefined index: ID in /<newznabpad>/www/lib/framework/basepage.php on line 84, referer: http://<newznaburl>/login
[Sun May 19 09:42:24 2013] [error] [client x.x.x.x] PHP Notice:  Undefined index: ID in /<newznabpad>/www/lib/sabnzbd.php on line 32, referer: http://<newznaburl>/login
[Sun May 19 09:42:24 2013] [error] [client x.x.x.x] PHP Notice:  Undefined index: rsstoken in /<newznabpad>/www/lib/sabnzbd.php on line 33, referer: http://<newznaburl>/login
[Sun May 19 09:42:24 2013] [error] [client x.x.x.x] PHP Notice:  Undefined index: role in /<newznabpad>/www/lib/framework/basepage.php on line 95, referer: http://<newznaburl>/login

Iemand enig idee waar ik moet beginnen met zoeken?

EDIT: Hmm, optimize tables lijkt geholpen te hebben, raar.

[ Voor 4% gewijzigd door Slurpgeit op 19-05-2013 10:04 ]

[Red Boll]

Coenen schreef op zaterdag 18 mei 2013 @ 14:20:
Binnenkort ook maar eens aan mijn NewzNAb toevoegen, kan geen kwaad. Verder draait ie prima. Van de week misschien eens kijken of er nog SVN updates zijn.

Zal vast al langsgekomen zijn maareh, toch makkelijk: http://newznab.com/plussvnrss.xml
(al werkt een rechtermuisklik op de installatie folder ook nog steeds prima natuurlijk )

[Ultimation]

Ik wil graag een newznab indexer onder meerdere domeinnamen draaien. Is dat ook mogelijk en hoe werkt dat precies?

Ik heb iets gelezen over de ngix config, maar ik kom er niet helemaal uit.

[kmf]

Ultimation schreef op maandag 27 mei 2013 @ 11:01:
Ik wil graag een newznab indexer onder meerdere domeinnamen draaien. Is dat ook mogelijk en hoe werkt dat precies?

Ik heb iets gelezen over de ngix config, maar ik kom er niet helemaal uit.

Nou, laat maar zien wat je nu hebt qua configaanpassingen en vertel effe waar je vast zit. Dan kijken we wel effe

[Ultimation]

Nou ik dacht gewoon door de bestaande server config te kopieeren en de server_name aan te passen, maar dat blijkt niet te werken.

[tomdabom]

Hoi medetweakers,

Ik heb vandaag Newznab voor het eerst geinstalleerd en heb even 2 groepen toegevoegd.
Daarna probeerde ik update_binaries en update_releases te draaien, maar bijde werkten niet omdat php een error gaf. De error was: could not open input file. Ik heb het meeste al geprobeerd, maar heel erg verder kom ik niet.

Misschien dat 1 van jullie mij hiermee kan helpen ?

Specs:
Win SRV2008R2
Xampp met php

Probleem gevonden, cd.. stond niet meer in de batch file

[ Voor 7% gewijzigd door tomdabom op 27-05-2013 16:44 ]

[Coenen]

Lol, mijn newznab liep even niet meer, m'n data block bij Astraweb was op.
Voor Newznab gebruik ik m'n block account bij Astraweb, helaas tellen headers tegenwoording mee....

[Damian]

Iemand een goede handleiding om Newznab werkend te krijgen onder linux?

Ik heb de guides in de TS gevolgd maar die kloppen voor geen meter meer ivm nieuwere versies van de verschillende packages die er geïnstalleerd moeten worden.

[Dacuuu]

Gebruikt er iemand ook nZEDb Dat is een newznab fork.

[Buzzie]

Dacuuu schreef op zondag 16 juni 2013 @ 16:49:
Gebruikt er iemand ook nZEDb Dat is een newznab fork.

Nog niet.
Staat wel in de planning om dat te gaan doen.

[Freekers]

Dacuuu schreef op zondag 16 juni 2013 @ 16:49:
Gebruikt er iemand ook nZEDb Dat is een newznab fork.

Bedankt voor de tip. Zal het op de todo-lijst zetten bij de rest van de projecten
Aangezien mijn indexer momenteel broken beyond repairs is, kan ik net zo goed van voor af aan beginnen. Ik heb destijds veel gebruik gemaakt van het script dat Johnny had geschreven, dus een fork van hem met deze verbeteringen er reeds in verwerkt maakt dat alleen maar makkelijker.

[Elect]

Mocht iemand een goede vergelijking kunnen maken of nZEDb echt een verbetering is dan hoor ik het graag

[Dacuuu]

Elect schreef op dinsdag 18 juni 2013 @ 11:26:
Mocht iemand een goede vergelijking kunnen maken of nZEDb echt een verbetering is dan hoor ik het graag

Dit is een vergelijking: Klikje

Geef het een kans , ik ben er blij mee. Verder ben ik een echte noob op database gebied etc. Dus ik ben benieuwd wat de mensen er van vinden die er wel gespecialiseerd in zijn.

[ Voor 16% gewijzigd door Dacuuu op 18-06-2013 11:38 ]

[LyP0]

Sta ook op het punt om een nieuwe server in te richten. Had NN+ lopend... eindelijk maar hier kwamen heel weinig bruikbare releases uit, reageerde ongelofelijk traag en gebruikte veel te veel resources.
Tijd voor een installeren en dus twijfel ik nu of ik NN+ ga draaiden of nzedb.

[Dacuuu]

LyP0 schreef op dinsdag 18 juni 2013 @ 11:40:
Sta ook op het punt om een nieuwe server in te richten. Had NN+ lopend... eindelijk maar hier kwamen heel weinig bruikbare releases uit, reageerde ongelofelijk traag en gebruikte veel te veel resources.
Tijd voor een installeren en dus twijfel ik nu of ik NN+ ga draaiden of nzedb.

Je kan ook eerst nzedb installeren, en daarna nn+ er bij op. Als je server dat trekt. Nzedb kwa install exact het zelfde als newznab

[kmf]

kan je de database van nn+ eigenlijk migreren naar Nzedb dan?

[Buzzie]

Dacuuu schreef op dinsdag 18 juni 2013 @ 14:28:
[...]


Je kan ook eerst nzedb installeren, en daarna nn+ er bij op. Als je server dat trekt. Nzedb kwa install exact het zelfde als newznab

Heb jij een goede tutorial daarvoor?
Heb zelf dit ooit is geprobeerd op mijn Synology NAS maar dat werd hem niet bepaald.
Hoe ga ik dat bijvoorbeeld doen dat ze beide te benaderen zijn via de inlog pagina?

[Dacuuu]

Buzzie schreef op dinsdag 18 juni 2013 @ 21:22:
[...]


Heb jij een goede tutorial daarvoor?
Heb zelf dit ooit is geprobeerd op mijn Synology NAS maar dat werd hem niet bepaald.
Hoe ga ik dat bijvoorbeeld doen dat ze beide te benaderen zijn via de inlog pagina?

Je nas is geen apparaat om een newznab op te draaien. of net 1 groep indexen zonder te veel poespas. Ik index hier 1 groep. a.b.teevee op mijn raspberrypi. maar geen deep rar inspection enzo.

binnekort komt er een tutorial hoe je nZEDb op de pi installeerd. Op de website zie onder mijn post. www.raspberrypihelp.net

[ Voor 10% gewijzigd door Dacuuu op 18-06-2013 22:03 ]

[Freekers]

Dacuuu schreef op dinsdag 18 juni 2013 @ 22:02:
Je nas is geen apparaat om een newznab op te draaien. of net 1 groep indexen zonder te veel poespas. Ik index hier 1 groep. a.b.teevee op mijn raspberrypi. maar geen deep rar inspection enzo.

binnekort komt er een tutorial hoe je nZEDb op de pi installeerd. Op de website zie onder mijn post. www.raspberrypihelp.net

Een NAS is niet geschikt maar de Pi wel ??

[Dacuuu]

Freekers schreef op woensdag 19 juni 2013 @ 08:00:
[...]


Een NAS is niet geschikt maar de Pi wel ??

Nee ook niet. Maar ik neem aan dat een nas ook nog voor data opslag en overdracht gebruikt word. En dus cpu power over moet hebben. En dat hebben de nas en de pi niet.

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 08:46:
[...]


Nee ook niet. Maar ik neem aan dat een nas ook nog voor data opslag en overdracht gebruikt word. En dus cpu power over moet hebben. En dat hebben de nas en de pi niet.

Je weet dat er veel verschillende modellen zijn van een NAS?

Mijn NAS (Synology 1812+) met 3GB geheugen werkt NN+ anders prima op hoor met 10 tal groepen.
Daarnaast wordt er ook andere software op gedraaid als SabNZBD en Sickbeard.

Dus het kan prima.

[Dacuuu]

Buzzie schreef op woensdag 19 juni 2013 @ 11:05:
[...]


Je weet dat er veel verschillende modellen zijn van een NAS?

Mijn NAS (Synology 1812+) met 3GB geheugen werkt NN+ anders prima op hoor met 10 tal groepen.
Daarnaast wordt er ook andere software op gedraaid als SabNZBD en Sickbeard.

Dus het kan prima.

Het was niet mijn idee om te zeggen dat het niet kan op een nas. Ik typte het bericht vanaf te tablet. En dan typ ik meestal korte zinnen.
Nu ik achter de pc zit gooi ik je nas type in google en zie direct de specs. Dat praat inderdaad wat fijner

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 11:43:
[...]


Het was niet mijn idee om te zeggen dat het niet kan op een nas. Ik typte het bericht vanaf te tablet. En dan typ ik meestal korte zinnen.
Nu ik achter de pc zit gooi ik je nas type in google en zie direct de specs. Dat praat inderdaad wat fijner

Was ook geen aanval ofzo

klopt inderdaad dat deze NAS wel lekker is ja voor dat soort doeleinden.
Kost wat....maar dan heb je ook wat.

[Dacuuu]

Buzzie schreef op woensdag 19 juni 2013 @ 12:17:
[...]


Was ook geen aanval ofzo

klopt inderdaad dat deze NAS wel lekker is ja voor dat soort doeleinden.
Kost wat....maar dan heb je ook wat.

Zo had ik het ook niet opgevat de tut staat trouwens online, kan nog veel aan gebeuren maar het in ieder geval een begin. Maar op een nas zou het installeren wel heel anders gaan verwacht ik.

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 12:28:
[...]


Zo had ik het ook niet opgevat de tut staat trouwens online, kan nog veel aan gebeuren maar het in ieder geval een begin. Maar op een nas zou het installeren wel heel anders gaan verwacht ik.

Ik wil het sowieso niet op een NAS gaan dan maar op een Linux VM

[Dacuuu]

Gas op die lollie!

[Buzzie]

haha grappig gedaan

[Dacuuu]

Dit topic ging eerst erg snel, en de laatste tijd erg langzaam! Veel mensen interesse verloren in newznab, of hebben ze er allemaal stilletjes 1 draaien? Het 2e geloof ik niet echt aangezien er veel problemen waren in dit topic.

[Coenen]

Die van mij draait, gelukkig, nog gewoon. Ik draai met een i3 machine en WHS 2011. Dus geen NAS of Pi.
Al mijn experimenten (mailserver, Wireless XMBC, RTL-SDR) met m'n Pi zijn nog niet echt goed gelukt.

[Buzzie]

Die van mij draait ook weer nadat ik pas vanaf scratch weer gestart ben.
Alleen nog geen preview icon bij de releases maar dat komt nog wel.

Heb ook daarnaast nZEDb geinstalleerd.
nu nog ff achterhalen hoe ik nieuw geactiveerde groepen kan laten indexen want dat doet ie nog niet.
Ik draai het tmux script overigens met de tmux instellingen in admin aangepast

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 17:12:
Die van mij draait ook weer nadat ik pas vanaf scratch weer gestart ben.
Alleen nog geen preview icon bij de releases maar dat komt nog wel.

Heb ook daarnaast nZEDb geinstalleerd.
nu nog ff achterhalen hoe ik nieuw geactiveerde groepen kan laten indexen want dat doet ie nog niet.
Ik draai het tmux script overigens met de tmux instellingen in admin aangepast

Ik draai gewoon het misc -> update_scripts -> nix_scripts -> screen -> sequential -> simple.sh script.

Heb alleen de pause van 60 seconden naar 480 sec gezet.

Uiteraard eerst op de nZEDb pagina -> Admin -> Group list een groep activeren.

[Buzzie]

ja heb het nu draaien.....ff gesproken met jonnyboy. maker van dit moois.

ik had nog iets niet geinstalleerd om de tmux scripts te laten werken..

draait nu goed....ook de nieuw geactiveerde groepen.
nu alleen nog wat verzinnen op de releases in misc-sorter

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 18:38:
ja heb het nu draaien.....ff gesproken met jonnyboy. maker van dit moois.

ik had nog iets niet geinstalleerd om de tmux scripts te laten werken..

draait nu goed....ook de nieuw geactiveerde groepen.
nu alleen nog wat verzinnen op de releases in misc-sorter

Bij Other -> Misc staat al die troep of niet.

Admin -> Edit site -> onder het kopje: Advanced Settings - For advanced users. zie je het volgende te staan "Misc->Other Retention Hours:" Die kan je instellen hoeveel uur de misc releases moeten blijven bestaan. Tenminste dat denk ik dat die optie betekend.

Wat heb jij allemaal nog meer aangepast?

[ Voor 3% gewijzigd door Dacuuu op 23-06-2013 18:58 ]

[Buzzie]

Dacuuu schreef op zondag 23 juni 2013 @ 18:58:
[...]


Bij Other -> Misc staat al die troep of niet.

Admin -> Edit site -> onder het kopje: Advanced Settings - For advanced users. zie je het volgende te staan "Misc->Other Retention Hours:" Die kan je instellen hoeveel uur de misc releases moeten blijven bestaan. Tenminste dat denk ik dat die optie betekend.

Wat heb jij allemaal nog meer aangepast?

Als ik het zo lees dan is het inderdaad wat het inhoudt en ik vermoed daarna dan weggegooid wordt als je iets hebt ingevuld teminste.

Ik heb niet zoveel aangepast.
Ik draai het nu naast NN+ op mijn bestaande Ubuntu 12.10 box.
De installatie had ik al grotendeels gedaan met NN+ natuurlijk.

verder alleen de vhost aangemaakt en aangepast voor nZEDb
en python-mysqldb geinstalleerd want die ontbrak nog.
rechten toegekend aan de mappen en thats it

[Coenen]

nZEDb werkt beter dan NN+? Voor het downloaden wordt meestal mijn NN gebruikt. Dus voor is het een prima oplossing.

[Buzzie]

Of het daadwerkelijk beter werkt dan NN+ kan ik je nog niet vertellen.

heb nog niet veel groepen toegevoegd....maar als ik alleen maar naar de TV groepen kijk dan lijkt het er op dat nZEDb (veel) meer releases vindt dan NN+.
Kan natuurlijk ook aan de regex liggen maar daar heb ik zelf niets aan verandert.

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 21:23:
Of het daadwerkelijk beter werkt dan NN+ kan ik je nog niet vertellen.

heb nog niet veel groepen toegevoegd....maar als ik alleen maar naar de TV groepen kijk dan lijkt het er op dat nZEDb (veel) meer releases vindt dan NN+.
Kan natuurlijk ook aan de regex liggen maar daar heb ik zelf niets aan verandert.

Als je nog tips of tweaks hebt, gooi ze maar hier neer .

Ik index 1 groep. En dat draait als een tiet. Zonder enige error draait het hier al een hele week.

[Buzzie]

Dacuuu schreef op maandag 24 juni 2013 @ 13:33:
[...]


Als je nog tips of tweaks hebt, gooi ze maar hier neer .

Ik index 1 groep. En dat draait als een tiet. Zonder enige error draait het hier al een hele week.

Is goed. Zodra ik die heb zal ik dat zeker laten weten.
uiteraard kan er op hun forum ook genoeg gevonden worden

http://forums.nzedb.com/

heb nu wel een aantal groepen er in staan.

[Verwijderd]

Hallo, iemand die nog een gratis Newznab server nodig heeft kan mij een om sturen. (Mag de link niet plaatsen).

[Elect]

Ik heb nu NN+ en nZEDb naast elkaar draaien, maar NN+ heeft nu toeveel meer (en recentere) films gevonden. Ik moet nog even de backfill van nZEDb laten draaien en dan heb ik 2 identieke setups (inclusief juiste API instellingen).

[kmf]

Elect schreef op donderdag 27 juni 2013 @ 11:05:
Ik heb nu NN+ en nZEDb naast elkaar draaien, maar NN+ heeft nu toeveel meer (en recentere) films gevonden. Ik moet nog even de backfill van nZEDb laten draaien en dan heb ik 2 identieke setups (inclusief juiste API instellingen).

volgens johnnyboy zal nZEDb na verloop van tijd evenveel of meer releases krijgen.

Ik heb echter geen idee op welke manier de releases nou herkend worden. Ik heb dat nog niet geinstalleerd en er staat niks op de site hoe dat nou exact werkt. Regex is niet nodig op een of andere manier? Hoe doet ie dat dan?

[Freekers]

Ik heb nZEDb nu ook draaien in een test omgeving. Hoe het de releases verwerkt is mij ook nog niet geheel duidelijk,maar eigen regexen zijn inderdaad niet nodig. Ik heb wel last van veel hashed releases, ondanks mijn blacklist.
Ik draai de tmux scripts, die na een bepaalde tijd onverklaarbaar stoppen met updaten.
Ik heb overigens een Word documentje bijgehouden tijdens de installatie van nZEDb, even kijken of ik die dit weekend op m'n blog kan zetten. Screenshots zijn wel deels in het Frans omdat de server taal destijds nog op Frans stond en ik te lui was dat te veranderen (kon het zo 1-2-3 niet vinden )
Kan mij overigens iemand het nut van PreDB uitleggen?

[ Voor 18% gewijzigd door Freekers op 28-06-2013 07:56 ]

[Dacuuu]

Freekers schreef op vrijdag 28 juni 2013 @ 07:48:
Ik heb nZEDb nu ook draaien in een test omgeving. Hoe het de releases verwerkt is mij ook nog niet geheel duidelijk,maar eigen regexen zijn inderdaad niet nodig. Ik heb wel last van veel hashed releases, ondanks mijn blacklist.
Ik draai de tmux scripts, die na een bepaalde tijd onverklaarbaar stoppen met updaten.
Ik heb overigens een Word documentje bijgehouden tijdens de installatie van nZEDb, even kijken of ik die dit weekend op m'n blog kan zetten. Screenshots zijn wel deels in het Frans omdat de server taal destijds nog op Frans stond en ik te lui was dat te veranderen (kon het zo 1-2-3 niet vinden )
Kan mij overigens iemand het nut van PreDB uitleggen?

Wat voor blacklist regel heb je gemaakt om hashed releases weg te kriijgen?. Ik draai hier het simple.sh sctipt. Wat doet het tmux script meer?

hier staat wat info over predb: http://en.m.wikipedia.org/wiki/Nuke_(warez)

Problemen ffe melden op het nZEDb forum of irc kanaal. Die mensen daar zijn erg behulpzaam!

[Mana]

Hoi,

Ik heb sinds gisteren NewzNab draaiend op mijn NAS. Echter krijg ik de jobs niet goed in de crontab. Ik heb de volgende jobs in de crontab gezet:

50 0-22/2 * * * /usr/bin/php5 /var/www/newznab/misc/update_scripts/update_binaries_threaded.php >> /var/log/logfile.log
50 1-23/2 * * * /usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php >> /var/log/logfile.log

Echter krijg ik de volgende melding in de syslog:

Jun 28 17:50:01 openmediavault /USR/SBIN/CRON[14512]: (root) CMD (/usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php >> /var/log/logfile.log )
Jun 28 17:50:01 openmediavault /USR/SBIN/CRON[14510]: (CRON) error (grandchild # 14512 failed with exit status 255)

Het handmatig aanroepen van deze call (/usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php) werkt zonder problemen en verwerkt netjes de releases, maar vanuit de cron dus niet. Nou ben ik niet echt een Linux kenner en zelfs google heeft me nog niet echt verder kunnen helpen hiermee. Iemand die toevallig raad weet?

[Dacuuu]

@Mana: Probeer het eerst eens zonder die >> wegschrijven naar log bestanden.
Lukt het dan wel? Misschien heeft het script geen rechten om het logfile.log bestand aan te maken.

[Elect]

Ik zie nu dat veel films staan in a.b.astronomy. Doe er je voordeel mee

[Coenen]

Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

[Buzzie]

Coenen schreef op woensdag 03 juli 2013 @ 16:14:
Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

Misschien toch nadenken om over te stappen naar nZEDb ?
Dan heb je geen regex nodig.

[Dacuuu]

Buzzie schreef op woensdag 03 juli 2013 @ 16:15:
[...]


Misschien toch nadenken om over te stappen naar nZEDb ?
Dan heb je geen regex nodig.

Of NzedB even naast nn+ draaien. NZedB is tenslotte gratis

[Buzzie]

Dacuuu schreef op donderdag 04 juli 2013 @ 09:20:
[...]


Of NzedB even naast nn+ draaien. NZedB is tenslotte gratis

Dat is ook een optie en heb ik ook eerst gedaan.
maar mijn ervaring was dat ik met nZEDb meer releases kreeg dan met NN+.
hoe raar dat dan misschien ook is

[Elect]

Coenen schreef op woensdag 03 juli 2013 @ 16:14:
Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

Voor die groep zijn genoeg regex'en
nZEDb is leuk, maar verwerken van releases duurt 2x zo lang en leverde uiteindelijk een stuk minder op dan NN+ over dezelfde periode.

[Coenen]

Ik heb nu zo'n 51 releases in de Astronomy groep. Dus de regex'en doen hun werk.

[.je]

Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

[Dacuuu]

.je schreef op maandag 22 juli 2013 @ 00:57:
Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

Eerst werkte Git pull wel? Ik update met de hand, wil nog eens omzetten naar een git pull. Maar weet even niet hoe dat moet

[WaRSTeaM]

Is er toevallig iemand die mij kan voorzien van de default meegeleverde amazon key's? Ik heb deze per ongeluk verwijderd en ik krijg mijn application er niet door heen bij hun. (Graag de key's niet hier posten maar in PM)

Alvast bedankt!

[Coenen]

Zijn er nog belangrijke updates geweest? Ik heb mijn Newznab install al een tijd niet meer geupdate.

[Edd]

Geen idee.. Ik heb newzdash draaien, dus zie vrij makkelijk of er een update is of niet. Als dat het geval is, update ik ook mijn installatie en dat gebeurt dus met regelmaat. Voor de rest ook weinig problemen, behalve dat mijn usenet provider af en toe niet wil meewerken..

[RudolfR]

.je schreef op maandag 22 juli 2013 @ 00:57:
Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

Doe je een git pull?
Want een pull request is iets heel anders. (Dat is als je wil dat je maintainer van de software wijzigingen uit jouw fork overneemt)

Welke foutmelding krijg je dan?

[kroegtijger]

Is het mogelijk om het aantal threads dat door Newznab gebruikt wordt te limiteren? Ik gebruik Eweka als Usenet-provider en die staat slechts 8 threads toe, waardoor ik niet gelijktijdig kan downloaden en mn newznab kan bijwerken.

[Coenen]

Voor zover ik weet zou ie onder Windows maar 1 thread moeten doen, dat zou genoeg moeten zijn om headers op te halen. Onder Linux kan je, geloof ik, meerdere sessie tegelijk hebben.
Ik gebruik Astraweb als nieuwsserver voor m'n Newznab en Sunny voor het gewone download werk, dan bijten ze elkaar zeker niet. Ik heb bij Astraweb daar een blockaccount voor afgesloten. Vroeger waren de headers gratis, maar nu tellen deze ook mee met je data verbruik...

[kroegtijger]

ik draai newznab op een Debian-omgeving, en daar neemt hij dus vrolijk alle 8 de threads in beslag, terwijl ik dat eigenlijk wil limiteren op max 2. Om er nu een 2e usenet-account voor te nemen gaat me ook wel weer wat ver

[Rowdy.nl]

Dan gebruik je voor het ophalen van de binaries de _threaded methode? Die dus niet gebruiken.. Je hebt update_binaries.php (singlethreaded) en update_binaries_threaded.php. Die laatste gebruikt idd meerdere threads. 8 draadjes is overigens best weinig; er zijn goedkopere alternatieven met meer draadjes...

[kroegtijger]

Rowdy.nl schreef op maandag 23 september 2013 @ 09:05:
Dan gebruik je voor het ophalen van de binaries de _threaded methode? Die dus niet gebruiken.. Je hebt update_binaries.php (singlethreaded) en update_binaries_threaded.php. Die laatste gebruikt idd meerdere threads. 8 draadjes is overigens best weinig; er zijn goedkopere alternatieven met meer draadjes...

Heb inderdaad nu met update_binaries.php het getest en dan gaat het wel goed als ik mn Sabnzbd op 7 threads zet
8 threads houdt inderdaad niet over, maar het is op zich natuurlijk voldoende. Qua snelheid is het allemaal dik in orde, alleen bij dit soort setups is het wat geknoei ermee. Zit al wel met een schuin oog te kijken naar een andere usenet-provider gezien dat Eweka nog wel eens wat content eraf gooit. Astraweb schijnt een stuk aantrekkelijker te zijn wat dat betreft.

[Elect]

Ik gebruik i-telligent als provider, goedkoop, snel en heel erg compleet.

[Ultimation]

Ik krijg het idee dat de VM die ik gebruik voor newznab kapot aan het gaan is. Vaak kernel problemen of een geheel vastgelopen systeem die ik moet resetten. Daarom wil ik een backup maken van de index en nzb's maken, een schone VM installeren en deze daarin terug zetten. Iemand die wat aan te vullen heeft op dit stappenplan:

Backup stappenplan:
1. NZB's exporteren naar een netwerk share map.
2. MySQL/Percona DB backuppen middels MySQL Workbench.

=> Heb ik nu alle data?

Restore stappenplan:
1. Ubuntu 13.03 downloaden en installeren.
2. Benodigdheden installeren.
3. NZB's kopieren van netwerk map naar lokale map
4. MySQL backup in DB plaatsen

Mis ik hier nog wat speciale stappen voor de index. Ik ga van Ubuntu 12.10 naar 13.04, dat zal wel geen groot verschil geven?

[Coenen]

Gister druk geweest om m'n Newznab server weer aan de gang te krijgen. Na een stroomstoring en een vakantie koste dat toch wat moeite. Een database die stuk was en niet te repareren was omdat de C schijf waar ie op stond vol was.... Maar hij draait weer. Gister eerst maar eens m'n databases verplaatst naar m'n D schijf. Daarna de reparatie maar eens gestart en weer updaten.

[ Voor 19% gewijzigd door Coenen op 15-10-2013 08:50 ]

[kroegtijger]

Ultimation schreef op vrijdag 04 oktober 2013 @ 10:53:
Ik krijg het idee dat de VM die ik gebruik voor newznab kapot aan het gaan is. Vaak kernel problemen of een geheel vastgelopen systeem die ik moet resetten. Daarom wil ik een backup maken van de index en nzb's maken, een schone VM installeren en deze daarin terug zetten. Iemand die wat aan te vullen heeft op dit stappenplan:

Backup stappenplan:
1. NZB's exporteren naar een netwerk share map.
2. MySQL/Percona DB backuppen middels MySQL Workbench.

=> Heb ik nu alle data?

Restore stappenplan:
1. Ubuntu 13.03 downloaden en installeren.
2. Benodigdheden installeren.
3. NZB's kopieren van netwerk map naar lokale map
4. MySQL backup in DB plaatsen

Mis ik hier nog wat speciale stappen voor de index. Ik ga van Ubuntu 12.10 naar 13.04, dat zal wel geen groot verschil geven?

Heb je niet nog aanpassingen in je configuratie gemaakt van Apache, PHP of NewzNab zelf? Dan zou je die mogelijk ook even mee moeten nemen.
Waarom kies je trouwens voor Ubuntu? Ik heb zelf gekozen voor Debian 7, en dat bevalt tot dusver prima, maar heb lange tijd getwijfeld tussen deze 2. Uiteindelijk voor Debian gekozen omdat Ubuntu veel meer bood dan ik nodig had wat onnodig veel resources in beslag zou gaan nemen, maar ben nieuwsgierig naar anderen hun beweegredenen uiteraard.


Daarnaast loop ik zelf ook nog tegen een probleem aan, namelijk dat sphinx enorm lang bezig is met "rotating indices". Uitendelijk wordt het hele proces succesvol afgerond, maar ik kan de bottleneck nog niet echt erin terug vinden, en vraag me ook af of ik Sphinx niet beter kan uitschakelen. Hoeveel meerwaarde biedt het me? Betreft een database van zo'n 140GB op het moment waarop 45 groepen worden geindexeerd en met 4 users gebruik van wordt gemaakt.

[ Voor 14% gewijzigd door kroegtijger op 30-10-2013 12:17 ]

[kmf]

Sinds een aantal weken ben ik ook overgestapt op nzedb. Ik ben hier inderdaad wel meer tevreden mee dan nn+.

Voordelen:
Veel minder onderhoud in ieder geval. Ik heb geen eigen scriptjes moeten schrijven om het goed te laten werken.
Qua releases lijkt het ook goed te werken. Import van bestaande nzb ging in ieder geval razendsnel (paar dagen al helemaal verwerkt ipv weken).
Meerdere manieren om de juiste releasenaam te krijgen.
Update van releases gaat heel snel. Zelfs boneless indexen is niet zo'n probleem.

Nadelen:
geen sphinxsupport waardoor zoeken best langzaam is.
En nog steeds weinig documentatie. Maar al heel wat beter dan NN+
Het is mij onduidelijk waarom en wanneer nieuwe movie-releases, e.d. nou verwerkt worden. Ze komen in de grote verzamelpot genaamd MISC...