[Ervaringen] Newznab

[tomdabom]

Hoi medetweakers,

Ik heb vandaag Newznab voor het eerst geinstalleerd en heb even 2 groepen toegevoegd.
Daarna probeerde ik update_binaries en update_releases te draaien, maar bijde werkten niet omdat php een error gaf. De error was: could not open input file. Ik heb het meeste al geprobeerd, maar heel erg verder kom ik niet.

Misschien dat 1 van jullie mij hiermee kan helpen ?

Specs:
Win SRV2008R2
Xampp met php

Probleem gevonden, cd.. stond niet meer in de batch file

[ Voor 7% gewijzigd door tomdabom op 27-05-2013 16:44 ]

[Coenen]

Lol, mijn newznab liep even niet meer, m'n data block bij Astraweb was op.
Voor Newznab gebruik ik m'n block account bij Astraweb, helaas tellen headers tegenwoording mee....

[Damian]

Iemand een goede handleiding om Newznab werkend te krijgen onder linux?

Ik heb de guides in de TS gevolgd maar die kloppen voor geen meter meer ivm nieuwere versies van de verschillende packages die er geïnstalleerd moeten worden.

[Dacuuu]

Gebruikt er iemand ook nZEDb Dat is een newznab fork.

[Buzzie]

Dacuuu schreef op zondag 16 juni 2013 @ 16:49:
Gebruikt er iemand ook nZEDb Dat is een newznab fork.

Nog niet.
Staat wel in de planning om dat te gaan doen.

[Freekers]

Dacuuu schreef op zondag 16 juni 2013 @ 16:49:
Gebruikt er iemand ook nZEDb Dat is een newznab fork.

Bedankt voor de tip. Zal het op de todo-lijst zetten bij de rest van de projecten
Aangezien mijn indexer momenteel broken beyond repairs is, kan ik net zo goed van voor af aan beginnen. Ik heb destijds veel gebruik gemaakt van het script dat Johnny had geschreven, dus een fork van hem met deze verbeteringen er reeds in verwerkt maakt dat alleen maar makkelijker.

[Elect]

Mocht iemand een goede vergelijking kunnen maken of nZEDb echt een verbetering is dan hoor ik het graag

[Dacuuu]

Elect schreef op dinsdag 18 juni 2013 @ 11:26:
Mocht iemand een goede vergelijking kunnen maken of nZEDb echt een verbetering is dan hoor ik het graag

Dit is een vergelijking: Klikje

Geef het een kans , ik ben er blij mee. Verder ben ik een echte noob op database gebied etc. Dus ik ben benieuwd wat de mensen er van vinden die er wel gespecialiseerd in zijn.

[ Voor 16% gewijzigd door Dacuuu op 18-06-2013 11:38 ]

[LyP0]

Sta ook op het punt om een nieuwe server in te richten. Had NN+ lopend... eindelijk maar hier kwamen heel weinig bruikbare releases uit, reageerde ongelofelijk traag en gebruikte veel te veel resources.
Tijd voor een installeren en dus twijfel ik nu of ik NN+ ga draaiden of nzedb.

[Dacuuu]

LyP0 schreef op dinsdag 18 juni 2013 @ 11:40:
Sta ook op het punt om een nieuwe server in te richten. Had NN+ lopend... eindelijk maar hier kwamen heel weinig bruikbare releases uit, reageerde ongelofelijk traag en gebruikte veel te veel resources.
Tijd voor een installeren en dus twijfel ik nu of ik NN+ ga draaiden of nzedb.

Je kan ook eerst nzedb installeren, en daarna nn+ er bij op. Als je server dat trekt. Nzedb kwa install exact het zelfde als newznab

[kmf]

kan je de database van nn+ eigenlijk migreren naar Nzedb dan?

[Buzzie]

Dacuuu schreef op dinsdag 18 juni 2013 @ 14:28:
[...]


Je kan ook eerst nzedb installeren, en daarna nn+ er bij op. Als je server dat trekt. Nzedb kwa install exact het zelfde als newznab

Heb jij een goede tutorial daarvoor?
Heb zelf dit ooit is geprobeerd op mijn Synology NAS maar dat werd hem niet bepaald.
Hoe ga ik dat bijvoorbeeld doen dat ze beide te benaderen zijn via de inlog pagina?

[Dacuuu]

Buzzie schreef op dinsdag 18 juni 2013 @ 21:22:
[...]


Heb jij een goede tutorial daarvoor?
Heb zelf dit ooit is geprobeerd op mijn Synology NAS maar dat werd hem niet bepaald.
Hoe ga ik dat bijvoorbeeld doen dat ze beide te benaderen zijn via de inlog pagina?

Je nas is geen apparaat om een newznab op te draaien. of net 1 groep indexen zonder te veel poespas. Ik index hier 1 groep. a.b.teevee op mijn raspberrypi. maar geen deep rar inspection enzo.

binnekort komt er een tutorial hoe je nZEDb op de pi installeerd. Op de website zie onder mijn post. www.raspberrypihelp.net

[ Voor 10% gewijzigd door Dacuuu op 18-06-2013 22:03 ]

[Freekers]

Dacuuu schreef op dinsdag 18 juni 2013 @ 22:02:
Je nas is geen apparaat om een newznab op te draaien. of net 1 groep indexen zonder te veel poespas. Ik index hier 1 groep. a.b.teevee op mijn raspberrypi. maar geen deep rar inspection enzo.

binnekort komt er een tutorial hoe je nZEDb op de pi installeerd. Op de website zie onder mijn post. www.raspberrypihelp.net

Een NAS is niet geschikt maar de Pi wel ??

[Dacuuu]

Freekers schreef op woensdag 19 juni 2013 @ 08:00:
[...]


Een NAS is niet geschikt maar de Pi wel ??

Nee ook niet. Maar ik neem aan dat een nas ook nog voor data opslag en overdracht gebruikt word. En dus cpu power over moet hebben. En dat hebben de nas en de pi niet.

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 08:46:
[...]


Nee ook niet. Maar ik neem aan dat een nas ook nog voor data opslag en overdracht gebruikt word. En dus cpu power over moet hebben. En dat hebben de nas en de pi niet.

Je weet dat er veel verschillende modellen zijn van een NAS?

Mijn NAS (Synology 1812+) met 3GB geheugen werkt NN+ anders prima op hoor met 10 tal groepen.
Daarnaast wordt er ook andere software op gedraaid als SabNZBD en Sickbeard.

Dus het kan prima.

[Dacuuu]

Buzzie schreef op woensdag 19 juni 2013 @ 11:05:
[...]


Je weet dat er veel verschillende modellen zijn van een NAS?

Mijn NAS (Synology 1812+) met 3GB geheugen werkt NN+ anders prima op hoor met 10 tal groepen.
Daarnaast wordt er ook andere software op gedraaid als SabNZBD en Sickbeard.

Dus het kan prima.

Het was niet mijn idee om te zeggen dat het niet kan op een nas. Ik typte het bericht vanaf te tablet. En dan typ ik meestal korte zinnen.
Nu ik achter de pc zit gooi ik je nas type in google en zie direct de specs. Dat praat inderdaad wat fijner

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 11:43:
[...]


Het was niet mijn idee om te zeggen dat het niet kan op een nas. Ik typte het bericht vanaf te tablet. En dan typ ik meestal korte zinnen.
Nu ik achter de pc zit gooi ik je nas type in google en zie direct de specs. Dat praat inderdaad wat fijner

Was ook geen aanval ofzo

klopt inderdaad dat deze NAS wel lekker is ja voor dat soort doeleinden.
Kost wat....maar dan heb je ook wat.

[Dacuuu]

Buzzie schreef op woensdag 19 juni 2013 @ 12:17:
[...]


Was ook geen aanval ofzo

klopt inderdaad dat deze NAS wel lekker is ja voor dat soort doeleinden.
Kost wat....maar dan heb je ook wat.

Zo had ik het ook niet opgevat de tut staat trouwens online, kan nog veel aan gebeuren maar het in ieder geval een begin. Maar op een nas zou het installeren wel heel anders gaan verwacht ik.

[Buzzie]

Dacuuu schreef op woensdag 19 juni 2013 @ 12:28:
[...]


Zo had ik het ook niet opgevat de tut staat trouwens online, kan nog veel aan gebeuren maar het in ieder geval een begin. Maar op een nas zou het installeren wel heel anders gaan verwacht ik.

Ik wil het sowieso niet op een NAS gaan dan maar op een Linux VM

[Dacuuu]

Gas op die lollie!

[Buzzie]

haha grappig gedaan

[Dacuuu]

Dit topic ging eerst erg snel, en de laatste tijd erg langzaam! Veel mensen interesse verloren in newznab, of hebben ze er allemaal stilletjes 1 draaien? Het 2e geloof ik niet echt aangezien er veel problemen waren in dit topic.

[Coenen]

Die van mij draait, gelukkig, nog gewoon. Ik draai met een i3 machine en WHS 2011. Dus geen NAS of Pi.
Al mijn experimenten (mailserver, Wireless XMBC, RTL-SDR) met m'n Pi zijn nog niet echt goed gelukt.

[Buzzie]

Die van mij draait ook weer nadat ik pas vanaf scratch weer gestart ben.
Alleen nog geen preview icon bij de releases maar dat komt nog wel.

Heb ook daarnaast nZEDb geinstalleerd.
nu nog ff achterhalen hoe ik nieuw geactiveerde groepen kan laten indexen want dat doet ie nog niet.
Ik draai het tmux script overigens met de tmux instellingen in admin aangepast

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 17:12:
Die van mij draait ook weer nadat ik pas vanaf scratch weer gestart ben.
Alleen nog geen preview icon bij de releases maar dat komt nog wel.

Heb ook daarnaast nZEDb geinstalleerd.
nu nog ff achterhalen hoe ik nieuw geactiveerde groepen kan laten indexen want dat doet ie nog niet.
Ik draai het tmux script overigens met de tmux instellingen in admin aangepast

Ik draai gewoon het misc -> update_scripts -> nix_scripts -> screen -> sequential -> simple.sh script.

Heb alleen de pause van 60 seconden naar 480 sec gezet.

Uiteraard eerst op de nZEDb pagina -> Admin -> Group list een groep activeren.

[Buzzie]

ja heb het nu draaien.....ff gesproken met jonnyboy. maker van dit moois.

ik had nog iets niet geinstalleerd om de tmux scripts te laten werken..

draait nu goed....ook de nieuw geactiveerde groepen.
nu alleen nog wat verzinnen op de releases in misc-sorter

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 18:38:
ja heb het nu draaien.....ff gesproken met jonnyboy. maker van dit moois.

ik had nog iets niet geinstalleerd om de tmux scripts te laten werken..

draait nu goed....ook de nieuw geactiveerde groepen.
nu alleen nog wat verzinnen op de releases in misc-sorter

Bij Other -> Misc staat al die troep of niet.

Admin -> Edit site -> onder het kopje: Advanced Settings - For advanced users. zie je het volgende te staan "Misc->Other Retention Hours:" Die kan je instellen hoeveel uur de misc releases moeten blijven bestaan. Tenminste dat denk ik dat die optie betekend.

Wat heb jij allemaal nog meer aangepast?

[ Voor 3% gewijzigd door Dacuuu op 23-06-2013 18:58 ]

[Buzzie]

Dacuuu schreef op zondag 23 juni 2013 @ 18:58:
[...]


Bij Other -> Misc staat al die troep of niet.

Admin -> Edit site -> onder het kopje: Advanced Settings - For advanced users. zie je het volgende te staan "Misc->Other Retention Hours:" Die kan je instellen hoeveel uur de misc releases moeten blijven bestaan. Tenminste dat denk ik dat die optie betekend.

Wat heb jij allemaal nog meer aangepast?

Als ik het zo lees dan is het inderdaad wat het inhoudt en ik vermoed daarna dan weggegooid wordt als je iets hebt ingevuld teminste.

Ik heb niet zoveel aangepast.
Ik draai het nu naast NN+ op mijn bestaande Ubuntu 12.10 box.
De installatie had ik al grotendeels gedaan met NN+ natuurlijk.

verder alleen de vhost aangemaakt en aangepast voor nZEDb
en python-mysqldb geinstalleerd want die ontbrak nog.
rechten toegekend aan de mappen en thats it

[Coenen]

nZEDb werkt beter dan NN+? Voor het downloaden wordt meestal mijn NN gebruikt. Dus voor is het een prima oplossing.

[Buzzie]

Of het daadwerkelijk beter werkt dan NN+ kan ik je nog niet vertellen.

heb nog niet veel groepen toegevoegd....maar als ik alleen maar naar de TV groepen kijk dan lijkt het er op dat nZEDb (veel) meer releases vindt dan NN+.
Kan natuurlijk ook aan de regex liggen maar daar heb ik zelf niets aan verandert.

[Dacuuu]

Buzzie schreef op zondag 23 juni 2013 @ 21:23:
Of het daadwerkelijk beter werkt dan NN+ kan ik je nog niet vertellen.

heb nog niet veel groepen toegevoegd....maar als ik alleen maar naar de TV groepen kijk dan lijkt het er op dat nZEDb (veel) meer releases vindt dan NN+.
Kan natuurlijk ook aan de regex liggen maar daar heb ik zelf niets aan verandert.

Als je nog tips of tweaks hebt, gooi ze maar hier neer .

Ik index 1 groep. En dat draait als een tiet. Zonder enige error draait het hier al een hele week.

[Buzzie]

Dacuuu schreef op maandag 24 juni 2013 @ 13:33:
[...]


Als je nog tips of tweaks hebt, gooi ze maar hier neer .

Ik index 1 groep. En dat draait als een tiet. Zonder enige error draait het hier al een hele week.

Is goed. Zodra ik die heb zal ik dat zeker laten weten.
uiteraard kan er op hun forum ook genoeg gevonden worden

http://forums.nzedb.com/

heb nu wel een aantal groepen er in staan.

[Anoniem: 327097]

Hallo, iemand die nog een gratis Newznab server nodig heeft kan mij een om sturen. (Mag de link niet plaatsen).

[Elect]

Ik heb nu NN+ en nZEDb naast elkaar draaien, maar NN+ heeft nu toeveel meer (en recentere) films gevonden. Ik moet nog even de backfill van nZEDb laten draaien en dan heb ik 2 identieke setups (inclusief juiste API instellingen).

[kmf]

Elect schreef op donderdag 27 juni 2013 @ 11:05:
Ik heb nu NN+ en nZEDb naast elkaar draaien, maar NN+ heeft nu toeveel meer (en recentere) films gevonden. Ik moet nog even de backfill van nZEDb laten draaien en dan heb ik 2 identieke setups (inclusief juiste API instellingen).

volgens johnnyboy zal nZEDb na verloop van tijd evenveel of meer releases krijgen.

Ik heb echter geen idee op welke manier de releases nou herkend worden. Ik heb dat nog niet geinstalleerd en er staat niks op de site hoe dat nou exact werkt. Regex is niet nodig op een of andere manier? Hoe doet ie dat dan?

[Freekers]

Ik heb nZEDb nu ook draaien in een test omgeving. Hoe het de releases verwerkt is mij ook nog niet geheel duidelijk,maar eigen regexen zijn inderdaad niet nodig. Ik heb wel last van veel hashed releases, ondanks mijn blacklist.
Ik draai de tmux scripts, die na een bepaalde tijd onverklaarbaar stoppen met updaten.
Ik heb overigens een Word documentje bijgehouden tijdens de installatie van nZEDb, even kijken of ik die dit weekend op m'n blog kan zetten. Screenshots zijn wel deels in het Frans omdat de server taal destijds nog op Frans stond en ik te lui was dat te veranderen (kon het zo 1-2-3 niet vinden )
Kan mij overigens iemand het nut van PreDB uitleggen?

[ Voor 18% gewijzigd door Freekers op 28-06-2013 07:56 ]

[Dacuuu]

Freekers schreef op vrijdag 28 juni 2013 @ 07:48:
Ik heb nZEDb nu ook draaien in een test omgeving. Hoe het de releases verwerkt is mij ook nog niet geheel duidelijk,maar eigen regexen zijn inderdaad niet nodig. Ik heb wel last van veel hashed releases, ondanks mijn blacklist.
Ik draai de tmux scripts, die na een bepaalde tijd onverklaarbaar stoppen met updaten.
Ik heb overigens een Word documentje bijgehouden tijdens de installatie van nZEDb, even kijken of ik die dit weekend op m'n blog kan zetten. Screenshots zijn wel deels in het Frans omdat de server taal destijds nog op Frans stond en ik te lui was dat te veranderen (kon het zo 1-2-3 niet vinden )
Kan mij overigens iemand het nut van PreDB uitleggen?

Wat voor blacklist regel heb je gemaakt om hashed releases weg te kriijgen?. Ik draai hier het simple.sh sctipt. Wat doet het tmux script meer?

hier staat wat info over predb: http://en.m.wikipedia.org/wiki/Nuke_(warez)

Problemen ffe melden op het nZEDb forum of irc kanaal. Die mensen daar zijn erg behulpzaam!

[Mana]

Hoi,

Ik heb sinds gisteren NewzNab draaiend op mijn NAS. Echter krijg ik de jobs niet goed in de crontab. Ik heb de volgende jobs in de crontab gezet:

50 0-22/2 * * * /usr/bin/php5 /var/www/newznab/misc/update_scripts/update_binaries_threaded.php >> /var/log/logfile.log
50 1-23/2 * * * /usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php >> /var/log/logfile.log

Echter krijg ik de volgende melding in de syslog:

Jun 28 17:50:01 openmediavault /USR/SBIN/CRON[14512]: (root) CMD (/usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php >> /var/log/logfile.log )
Jun 28 17:50:01 openmediavault /USR/SBIN/CRON[14510]: (CRON) error (grandchild # 14512 failed with exit status 255)

Het handmatig aanroepen van deze call (/usr/bin/php5 /var/www/newznab/misc/update_scripts/update_releases.php) werkt zonder problemen en verwerkt netjes de releases, maar vanuit de cron dus niet. Nou ben ik niet echt een Linux kenner en zelfs google heeft me nog niet echt verder kunnen helpen hiermee. Iemand die toevallig raad weet?

[Dacuuu]

@Mana: Probeer het eerst eens zonder die >> wegschrijven naar log bestanden.
Lukt het dan wel? Misschien heeft het script geen rechten om het logfile.log bestand aan te maken.

[Elect]

Ik zie nu dat veel films staan in a.b.astronomy. Doe er je voordeel mee

[Coenen]

Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

[Buzzie]

Coenen schreef op woensdag 03 juli 2013 @ 16:14:
Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

Misschien toch nadenken om over te stappen naar nZEDb ?
Dan heb je geen regex nodig.

[Dacuuu]

Buzzie schreef op woensdag 03 juli 2013 @ 16:15:
[...]


Misschien toch nadenken om over te stappen naar nZEDb ?
Dan heb je geen regex nodig.

Of NzedB even naast nn+ draaien. NZedB is tenslotte gratis

[Buzzie]

Dacuuu schreef op donderdag 04 juli 2013 @ 09:20:
[...]


Of NzedB even naast nn+ draaien. NZedB is tenslotte gratis

Dat is ook een optie en heb ik ook eerst gedaan.
maar mijn ervaring was dat ik met nZEDb meer releases kreeg dan met NN+.
hoe raar dat dan misschien ook is

[Elect]

Coenen schreef op woensdag 03 juli 2013 @ 16:14:
Krijg je ook regexen voor die groep? Ik had laatst een wat obscure groep toegevoegd, maar die doet helaas niks omdat je er geen regex'en voor krijjgt.

Voor die groep zijn genoeg regex'en
nZEDb is leuk, maar verwerken van releases duurt 2x zo lang en leverde uiteindelijk een stuk minder op dan NN+ over dezelfde periode.

[Coenen]

Ik heb nu zo'n 51 releases in de Astronomy groep. Dus de regex'en doen hun werk.

[.je]

Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

[Dacuuu]

.je schreef op maandag 22 juli 2013 @ 00:57:
Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

Eerst werkte Git pull wel? Ik update met de hand, wil nog eens omzetten naar een git pull. Maar weet even niet hoe dat moet

[WaRSTeaM]

Is er toevallig iemand die mij kan voorzien van de default meegeleverde amazon key's? Ik heb deze per ongeluk verwijderd en ik krijg mijn application er niet door heen bij hun. (Graag de key's niet hier posten maar in PM)

Alvast bedankt!

[Coenen]

Zijn er nog belangrijke updates geweest? Ik heb mijn Newznab install al een tijd niet meer geupdate.

[Edd]

Geen idee.. Ik heb newzdash draaien, dus zie vrij makkelijk of er een update is of niet. Als dat het geval is, update ik ook mijn installatie en dat gebeurt dus met regelmaat. Voor de rest ook weinig problemen, behalve dat mijn usenet provider af en toe niet wil meewerken..

[RudolfR]

.je schreef op maandag 22 juli 2013 @ 00:57:
Helaas schijnt bij mij de git repo van nZEDb dusdanig forked te zijn dat een pull request niets meer doet. Andere mensen hier ook last van?

Doe je een git pull?
Want een pull request is iets heel anders. (Dat is als je wil dat je maintainer van de software wijzigingen uit jouw fork overneemt)

Welke foutmelding krijg je dan?

[kroegtijger]

Is het mogelijk om het aantal threads dat door Newznab gebruikt wordt te limiteren? Ik gebruik Eweka als Usenet-provider en die staat slechts 8 threads toe, waardoor ik niet gelijktijdig kan downloaden en mn newznab kan bijwerken.

[Coenen]

Voor zover ik weet zou ie onder Windows maar 1 thread moeten doen, dat zou genoeg moeten zijn om headers op te halen. Onder Linux kan je, geloof ik, meerdere sessie tegelijk hebben.
Ik gebruik Astraweb als nieuwsserver voor m'n Newznab en Sunny voor het gewone download werk, dan bijten ze elkaar zeker niet. Ik heb bij Astraweb daar een blockaccount voor afgesloten. Vroeger waren de headers gratis, maar nu tellen deze ook mee met je data verbruik...

[kroegtijger]

ik draai newznab op een Debian-omgeving, en daar neemt hij dus vrolijk alle 8 de threads in beslag, terwijl ik dat eigenlijk wil limiteren op max 2. Om er nu een 2e usenet-account voor te nemen gaat me ook wel weer wat ver

[Rowdy.nl]

Dan gebruik je voor het ophalen van de binaries de _threaded methode? Die dus niet gebruiken.. Je hebt update_binaries.php (singlethreaded) en update_binaries_threaded.php. Die laatste gebruikt idd meerdere threads. 8 draadjes is overigens best weinig; er zijn goedkopere alternatieven met meer draadjes...

[kroegtijger]

Rowdy.nl schreef op maandag 23 september 2013 @ 09:05:
Dan gebruik je voor het ophalen van de binaries de _threaded methode? Die dus niet gebruiken.. Je hebt update_binaries.php (singlethreaded) en update_binaries_threaded.php. Die laatste gebruikt idd meerdere threads. 8 draadjes is overigens best weinig; er zijn goedkopere alternatieven met meer draadjes...

Heb inderdaad nu met update_binaries.php het getest en dan gaat het wel goed als ik mn Sabnzbd op 7 threads zet
8 threads houdt inderdaad niet over, maar het is op zich natuurlijk voldoende. Qua snelheid is het allemaal dik in orde, alleen bij dit soort setups is het wat geknoei ermee. Zit al wel met een schuin oog te kijken naar een andere usenet-provider gezien dat Eweka nog wel eens wat content eraf gooit. Astraweb schijnt een stuk aantrekkelijker te zijn wat dat betreft.

[Elect]

Ik gebruik i-telligent als provider, goedkoop, snel en heel erg compleet.

[Ultimation]

Ik krijg het idee dat de VM die ik gebruik voor newznab kapot aan het gaan is. Vaak kernel problemen of een geheel vastgelopen systeem die ik moet resetten. Daarom wil ik een backup maken van de index en nzb's maken, een schone VM installeren en deze daarin terug zetten. Iemand die wat aan te vullen heeft op dit stappenplan:

Backup stappenplan:
1. NZB's exporteren naar een netwerk share map.
2. MySQL/Percona DB backuppen middels MySQL Workbench.

=> Heb ik nu alle data?

Restore stappenplan:
1. Ubuntu 13.03 downloaden en installeren.
2. Benodigdheden installeren.
3. NZB's kopieren van netwerk map naar lokale map
4. MySQL backup in DB plaatsen

Mis ik hier nog wat speciale stappen voor de index. Ik ga van Ubuntu 12.10 naar 13.04, dat zal wel geen groot verschil geven?

[Coenen]

Gister druk geweest om m'n Newznab server weer aan de gang te krijgen. Na een stroomstoring en een vakantie koste dat toch wat moeite. Een database die stuk was en niet te repareren was omdat de C schijf waar ie op stond vol was.... Maar hij draait weer. Gister eerst maar eens m'n databases verplaatst naar m'n D schijf. Daarna de reparatie maar eens gestart en weer updaten.

[ Voor 19% gewijzigd door Coenen op 15-10-2013 08:50 ]

[kroegtijger]

Ultimation schreef op vrijdag 04 oktober 2013 @ 10:53:
Ik krijg het idee dat de VM die ik gebruik voor newznab kapot aan het gaan is. Vaak kernel problemen of een geheel vastgelopen systeem die ik moet resetten. Daarom wil ik een backup maken van de index en nzb's maken, een schone VM installeren en deze daarin terug zetten. Iemand die wat aan te vullen heeft op dit stappenplan:

Backup stappenplan:
1. NZB's exporteren naar een netwerk share map.
2. MySQL/Percona DB backuppen middels MySQL Workbench.

=> Heb ik nu alle data?

Restore stappenplan:
1. Ubuntu 13.03 downloaden en installeren.
2. Benodigdheden installeren.
3. NZB's kopieren van netwerk map naar lokale map
4. MySQL backup in DB plaatsen

Mis ik hier nog wat speciale stappen voor de index. Ik ga van Ubuntu 12.10 naar 13.04, dat zal wel geen groot verschil geven?

Heb je niet nog aanpassingen in je configuratie gemaakt van Apache, PHP of NewzNab zelf? Dan zou je die mogelijk ook even mee moeten nemen.
Waarom kies je trouwens voor Ubuntu? Ik heb zelf gekozen voor Debian 7, en dat bevalt tot dusver prima, maar heb lange tijd getwijfeld tussen deze 2. Uiteindelijk voor Debian gekozen omdat Ubuntu veel meer bood dan ik nodig had wat onnodig veel resources in beslag zou gaan nemen, maar ben nieuwsgierig naar anderen hun beweegredenen uiteraard.


Daarnaast loop ik zelf ook nog tegen een probleem aan, namelijk dat sphinx enorm lang bezig is met "rotating indices". Uitendelijk wordt het hele proces succesvol afgerond, maar ik kan de bottleneck nog niet echt erin terug vinden, en vraag me ook af of ik Sphinx niet beter kan uitschakelen. Hoeveel meerwaarde biedt het me? Betreft een database van zo'n 140GB op het moment waarop 45 groepen worden geindexeerd en met 4 users gebruik van wordt gemaakt.

[ Voor 14% gewijzigd door kroegtijger op 30-10-2013 12:17 ]

[kmf]

Sinds een aantal weken ben ik ook overgestapt op nzedb. Ik ben hier inderdaad wel meer tevreden mee dan nn+.

Voordelen:
Veel minder onderhoud in ieder geval. Ik heb geen eigen scriptjes moeten schrijven om het goed te laten werken.
Qua releases lijkt het ook goed te werken. Import van bestaande nzb ging in ieder geval razendsnel (paar dagen al helemaal verwerkt ipv weken).
Meerdere manieren om de juiste releasenaam te krijgen.
Update van releases gaat heel snel. Zelfs boneless indexen is niet zo'n probleem.

Nadelen:
geen sphinxsupport waardoor zoeken best langzaam is.
En nog steeds weinig documentatie. Maar al heel wat beter dan NN+
Het is mij onduidelijk waarom en wanneer nieuwe movie-releases, e.d. nou verwerkt worden. Ze komen in de grote verzamelpot genaamd MISC...

[FutureCow]

Had verkeerde topic erbij gepakt. Hierbij dus nogmaals de vraag:

Ik heb een nieuwe server geïnstalleerd en wil graag de hele database van bijna een jaar overzetten van de oude naar de nieuwe server. Welke bestanden/database moet ik overzetten zodat newznab gewoon lekker doorgaat?

[tcviper]

Nvm, lekker handig dat je hier niet een reply kan deleten

[ Voor 195% gewijzigd door tcviper op 02-12-2013 12:42 ]

[KorneelB]

het klinkt alsof nzedb the way to go is.. ik heb momenteel een nn+ installatie draaien op een ubuntu server.
ik heb ook een nzedb installatie draaien op een tweede ubuntu server.. is het nu mogelijk om de hele boel te migreren vanaf server 1 naar server 2? dit omdat die nn+ installatie wel heel erg veel releases al heeft...

of zeggen jullie dom idee, nn+ is beter?

[kmf]

NN+ vind ik dus slechter dan nzedb. Ik was echter helemaal opnieuw begonnen omdat ik de releases van NN+ niet al te best vind.

Maar als je het toch wilt gaan doen: op nzedb's forum zijn er wat topics erover te vinden. De veiligstee lijkt me echter nog steeds: alle nzb exporteren en dan importeren in nzedb

[Oxize]

Spotnab discovery blijft op 0 staan. Vind geen sources. En nu?

Heb spotnab puur ingesteld om posts binnen te halen. Werkt het bij jullie wel?

[Coenen]

Ik heb voor Spotnab alles (3) op yes staan. Ik heb een hele zooi sources.
Bij sommige releases heb ik commentaar (posts).

[Oxize]

Staat bij mij allemaal aan, maar er komt niks binnen. Blijft allemaal op 0 staan. Geen discovery, geen sources. Niks nada. Hij vind gewoon niks.

[Coenen]

Geen idee, ik heb het lang geleden aangezet en verder niet naar de instellingen omgekeken. Je krijgt geen lijstje met sources die inactive zijn? Als je inactive zijn dan moet je nog even op inactive klikken dan gaan ze naar active. Dan gaat er wat gebeuren.

[Edd]

Heb je in het Edit Site gedeelte de Discovery voor Spotnab aangezet?

[Coenen]

Heeft iemands nog wel eens een SVN update gedaan? Ik heb het echt al tijden niet meer gedaan.
Dus ik loop behoorlijk achter.... M'n Newznab draait goed, opzich. Alleen heb ik vandaag even m'n database een trap gegeven. (truncate parts, partrepair en binaries) Het eea liep niet echt meer lekker.

[Rowdy.nl]

Jep, vandaag nog. Laatste revisie is 3172. (tenminste, voor de betaalde variant)

[Buzzie]

Coenen schreef op donderdag 27 maart 2014 @ 11:16:
Heeft iemands nog wel eens een SVN update gedaan? Ik heb het echt al tijden niet meer gedaan.
Dus ik loop behoorlijk achter.... M'n Newznab draait goed, opzich. Alleen heb ik vandaag even m'n database een trap gegeven. (truncate parts, partrepair en binaries) Het eea liep niet echt meer lekker.

gebeurd bij mij automatisch.....kijk er eigenlijk al heel lang niet meer naar omdat hij nog steeds prima werkt en ik het alleen voor mezelf en een paar vrienden gebruik en dan index ik alleen voor series.

versie 3176 nu overigens hier

[Coenen]

Ik ben net aan het updaten geweest. Helaas doet de webinterface het nu niet meer.
Voor de rest lijkt ie nog wel te werken.

De install pagina lijkt nog wel te werken. Er is nog hoop.

Inmiddels maar volledig opnieuw begonnen.....
Dus ook een nieuwe database. Dat is aan de ene kant wel jammer, aan de andere kant scheelt het een hoop repairs die om de een of andere reden nooit gerepaired werden.

Damn, er gaat toch het eea mis, deze link " http://localhost:8085/www/apihelp" doet het niet...
Of wel ik kan geen nieuwe API key genereren voor SickBeard.

Ik moest de 'web.config' file nog terug zetten, nu zou alles weer normaal moeten werken.

[ Voor 80% gewijzigd door Coenen op 29-03-2014 21:26 ]

[Buzzie]

Fijn dat alles weer werkt

[KorneelB]

hmm,sinds vanmorgen ineens vastgelopen..

creating releases from complete binairies.

en daar hangt hij al een uur op. optimise_database.php gedraait maar kom niet verder. iemand anders dit al gehad?

[Coenen]

Het komt mij niet bekend voor. Is rebooten een optie? Of draait ie alweer?

[Buzzie]

Nee mij ook niet. Draait bij mij al maanden als een zonnetje.
Maar ik gebruik hem dan ook maar voor 4 groepen

[Coenen]

Hmmm, m'n MySQL database is weer niet bereikbaar. Het lijkt ook steeds vaker te gebeuren.
Het is een kwestie de MySQL service starten. Als iemand een suggestie heeft, graag. Zo maar eens in de logs duiken.

[RickDB]

Coenen schreef op zondag 20 april 2014 @ 20:52:
Hmmm, m'n MySQL database is weer niet bereikbaar. Het lijkt ook steeds vaker te gebeuren.
Het is een kwestie de MySQL service starten. Als iemand een suggestie heeft, graag. Zo maar eens in de logs duiken.

Wat wel eens voorkomt is dat de PHP processen leken en je dus out of memory bent (staat dan in je syslog), als je innoDB gebruikt kan het ook zijn dat je log size te groot ingesteld staat.
Aangezien het na verloop van tijd gebeurt gok ik dus op een memory leak, de laatste stock versie is ook vrij beroerd (met spam/mismatches) en heb daardoor mijn eigen mod gemaakt op basis van NN-tmux ( https://github.com/DariusIII/newznab-tmux )

De NN-tmux mod zelf is zeer buggy en wordt niet onderhouden door een top programmeur (veel stomme fouten), dus als je deze gaat draaien altijd zorgen voor goede backups en code nalopen.

[Coenen]

@RickDB, het is begonnen na m'n update van Newznab nog niet zo lang geleden. Ik heb nog niet goed in detail kunnen kijken, maar het lijkt mis te gaan als er repair gedaan wordt. Uit m'n event viewer:

code:

Found 9 of 0 rows when repairing '.\newznab_01\partrepair'

For more

Zo heb ik nog 3 foutmeldingen.

Veder nog:

code:

Faulting application name: mysqld.exe, version: 0.0.0.0, time stamp: 0x504a572c
Faulting module name: mysqld.exe, version: 0.0.0.0, time stamp: 0x504a572c
Exception code: 0xc0000005
Fault offset: 0x00000000003379d6
Faulting process id: 0x2864
Faulting application start time: 0x01cf5ccb712f7bf3
Faulting application path: C:\Program Files\MySQL\MySQL Server 5.1\bin\mysqld.exe
Faulting module path: C:\Program Files\MySQL\MySQL Server 5.1\bin\mysqld.exe
Report Id: 9ff

Er is nu zo'n 5GB aan geheugen in gebruik en 2.8GB beschikbaar. Die 5GB is wat aan de hoge kant, maar opzich zou nu, net na een start van mySQL, er nog genoeg vrij moeten zijn.

Ik blijf nog wel even stock draaien. Als ie draait, draait ie goed, 9 van 10 series worden gevonden met mijn Newznab.

[ Voor 5% gewijzigd door Coenen op 22-04-2014 19:47 ]

[RickDB]

Wat je kan is dan doen is alles behalve binaries/parts/partsrepair converten naar innoDB dan weet je in ieder geval dat na zo'n crash je belangrijke data niet corrupt raakt.

Wat ik voorheen deed om de tabellen te binaries/parts tabellen te krimpen is een aantal keer update_releases.php los draaien om ervoor te zorgen dat alles erin zit en ge-postprocessed is en vervolgens bij mysql dan:

TRUNCATE `parts`;
TRUNCATE `partrepair`;
TRUNCATE `binaries`;

Dan zijn deze weer leeg en als die vervolgens dan nog steeds crashed kan je dit uitsluiten

[Coenen]

Hij draait nu al weer een paar dagen goed. Als ie weer onderuit gaat, ga die tabellen truncaten.

Net maar eens de truncate gedaan. Ik had heel veel parts repair.
Plus hij was nog een paar keer onderuit gegaan.

Er gaat weer wat nieuws mis:

NfoProc : Scanning hdQF5iNSMnW8Af0L9o - nfo missing.
NfoProc : Retrieval .....++ss
NfoProc : Complete 2 NFOs detected from 437 scanned NZB files.
Spotnab : 111 source(s)...
Spotnab : 1 source(s)...

Hier blijft ie dan op hangen. ik heb al even zitten zoeken hoe ik dat spotnab gebeuren kan uitzetten.
Maar dat is me nog niet gelukt.

Ik ben al een stapje veder met:

C:\inetpub\wwwroot\newznab\misc\testing>php.exe spotnab.php -r
Soft Reseting Spotnab... Done

[ Voor 94% gewijzigd door Coenen op 22-05-2014 21:10 . Reden: nieuw probleem, wat alweer opgelost lijkt. ]

[KorneelB]

goedemorgen;

tijd om maar weer eens wat leven hier in de brouwerij te brengen..

mijn newznab loopt prima, maar ik zie veel releases gewoon niet omdat ze dan gehashed zijn.
nzedb schijnt hier dus beter mee om te gaan, dus daar maar een servertje mee ingericht.
nu draai ik die met tmux, dus die script lopen, maar ik snap niet helemaal wat da tstatus scherm nu betekend?
heeft iemand daar een tutorial of uitleg voor?

nog tips voor nzedb?

[zeroday]

Iemand een tip om releases ouder dan 21 dagen te verwijderen uit de database?
ik werk met de tmux tool die alles processed

[KorneelB]

ligt d edevelopment voor newznab gewoon al een half jaar stil nu?

[Dacuuu]

zeroday schreef op vrijdag 24 oktober 2014 @ 08:18:
Iemand een tip om releases ouder dan 21 dagen te verwijderen uit de database?
ik werk met de tmux tool die alles processed

Met nzedb weet ik dit. NN weet ik het niet.

Edit: Nzedb: /misc/testing/release/delete_releases.php

[ Voor 9% gewijzigd door Dacuuu op 24-10-2014 12:28 ]

[zeroday]

Dacuuu schreef op vrijdag 24 oktober 2014 @ 10:25:
[...]


Met nzedb weet ik dit. NN weet ik het niet.

Edit: Nzedb: /misc/testing/release/delete_releases.php

thanks
dat ik daar moest zoeken wist ik .. maar daar staat de query niet ..
dus zelf even lopen te pielen

$sql = "SELECT ID FROM releases WHERE adddate < DATE_SUB( NOW( ) , INTERVAL 1 MONTH )";

vond ik wel een mooie ;-)

[zeroday]

zeroday schreef op zaterdag 25 oktober 2014 @ 08:10:
[...]


thanks
dat ik daar moest zoeken wist ik .. maar daar staat de query niet ..
dus zelf even lopen te pielen

$sql = "SELECT ID FROM releases WHERE adddate < DATE_SUB( NOW( ) , INTERVAL 1 MONTH )";

vond ik wel een mooie ;-)

Update .. en later kom je erachter dat je 1 kleine K instelling was vergeten zodat je script het zelf wel automatisch doet .. <zucht>

[Coenen]

Hier gaat weer iets niet helemaal lekker, al een tijdje loopt m'n Newznab niet zo lekker, ik heb al een keer wat tables gedumpt, maar nog steeds loopt ie niet fijn.

Gister zag ik dat MySQL rond de 10G aan temp files op m'n C schijf aan het maken was.
Dit was tijdens: "Stage 3 : Creating releases from complete binaries" Dus de temp folder voor MySQL naar D verplaatst. Hij mag 100GB aan temp files maken, ik had helaas niet iets minder beschikbaar. Na snel wat ruimte gemaakt te hebben, werd er verder niet meer ruimte gebruikt.
Hij is nu ongeveer 12 uur bezig met "Stage 3 : Creating releases from complete binaries" er wordt alleen maar gelezen van de tmp files, ik wacht het nog even af, maar ik ga, denk ik, toch maar eens afbreken.En de temp files weggooien.

Edit 12-11-2014, update,
Ik heb gisteravond m'n database maar gedumped. Na een nieuwe newznab install gedaan te hebben draait ie weer. Moest nog wel een nieuwe API key in Sickbeard invullen.

Edit 17-11-2-14,
Inmiddels loopt m'n Newznab weer lekker, het gros van de series wordt gevonden via mijn Newznab.
Ik heb nog wel een keer gehad dat MySQL er mee gestopt was.

[ Voor 19% gewijzigd door Coenen op 17-11-2014 08:09 ]

[Coenen]

Sinds vanochtend/vannacht kan ik geen NZB files meer downloaden vanaf m'n Newznab server. Sickbeard vind de NZB, geeft hem door aan SABnzdb, die geeft aan wait blabla en gaat verder niks downloaden. Ook handmatig werkt het niet. Ik heb nog geen idee waarom het misgaat. Van het weekend wel een hoop updates gedownload en geinstalleerd. Voor de rest niks veranderd.

Iemand enig idee? Ik ben aan het zoeken, maar ik vrees een moeilijke zoektocht.


Het is me gelukt om het te fixen, ik weet alleen niet precies wat het nu was.....
Ik heb een database repair gedaan en de locatie van de nzb opnieuw ingevuld. De tmprar folder veranderd en de website in IIS even opnieuw gestart. Nu lijkt hij weer te werken. Ben blij.

[ Voor 23% gewijzigd door Coenen op 20-12-2014 17:30 . Reden: probleem opgelost. ]

[KorneelB]

ik ben ondertussen wel klaar met newznab.. overgegaan naar nzedb.

loopt heel lekker, maar heb het gevoel dat ik iets mis qua optimalisatie..

draait op een bakje met 8 cores en 16 gig geheugen.. en is redelijk traag..

iemand die me kan helpen met optimalisatie?

[KorneelB]

ok, dan een subtiele kick

indien iemand kan helpen met optimaliseren.. fijn!

ik zit dus met een interessante situatie..
backfill staat uit maar heeft lang aangestaan.

Tmux zegt me nu, onder de monitoring pane;

in process : 3.273.566 misc and 1.709.554 TV ..
in database zitten ook al een 2 miljoen voor TV maar die 1.7 miljoen voor TV stijgt alleen maar.. langzaam aan..
is er een manier om dit sneller te laten verwerken?

[FREAKJAM]

Ik wil me ook eens wagen aan NzedB en ik vraag me af hoe groot gemiddeld een database kan worden. Ik lees dat in principe een database niet zo heel groot hoeft te worden (je dient hem zelf goed te onderhouden/optimizen).

Reden dat ik dit vraag:
Ik heb op dit moment een ESXi bak draaien (32GB ram met Xeon 1230v3 cpu).

Ik store op dit moment mijn virtual machines rechtstreeks op mijn SSD (datastore). Ik heb nog ~120GB vrij aan ruimte op deze SSD. Dit zou voldoende moeten zijn voor de VM + SQL db, maar ik kan hem eventueel mijn ZFS storage gebruiken om hier deze specifieke VM + dB op te slaan (ik draai 63xTB in een RAIDZ2 setup).

Wat raden jullie aan? De boel op SSD zetten of op mijn ZFS storage? Wanneer ik het ga opslaan op mijn ZFS storage is het namelijk van belang dat je de boel dan goed inricht en eigenlijk een SLOG dient te gebruiken, anders is de performance niet zo heel best. Ik ben een beetje bang dat de NZedB veel schrijfacties doet op een dag naar mijn SSD en dat zie ik ook niet zo zitten.

[ Voor 5% gewijzigd door FREAKJAM op 23-02-2015 19:47 ]

[Anoniem: 665387]

Hallo mensen,

Ben na ongeveer een jaar weer begonnen met een Ubuntu server met daarop Newznab+

Alles netjes geinstalleerd. De member key ingevuld. Krijg alleen geen releases toegevoegd. Zelfs als ik de groepen op 10 dagen backfill zet dan komen er nog geen releases tevoorschijn. Iemand een idee?

Heb Giganews en Easyusenet als newsproviders. Allebei hetzelfde verhaal.

Hoor graag van iemand.

[Anoniem: 665387]

De eerste 20 hebben mazzel.

-knip

[ Voor 25% gewijzigd door Anoniem: 665387 op 31-03-2015 07:45 ]

[Coenen]

M'n Newznab heeft weer kuren....
Nu krijg ik: Error Regex File Does Not Exist or Unable to Connect
Zou er bij Newznab wat aan de hand zijn?

[Coenen]

Sinds een paar weken kan ik bijna niks meer vinden met m'n Newznab server. Moet ik bepaalde (nieuwe) groepen toevoegen?