Zoals beloofd, zou ik nog een posting doen over de netwerk aanpassingen en de veranderingen, zoals afgelopen tijd doorgevoerd.
De grote technische veranderingen behelsen voornamelijk de newsserver en het netwerk; beide trajecten die nogal wat voeten in de aarde hebben gehad.
Als eerste de newsserver.
-------------------------
De newsserver, zoals we die eind 2002 hebben opgebouwd, heeft het lang vol gehouden; twee keer een vervangingstraject van schijven; extra array's. Wat we hadden onderschat is de populariteit van deze dienst.
In het voorjaar, begon de newsservice zich dan ook te begeven tegen de maximaal haalbare capaciteit, met als gevolg dat storingen vaker optraden.
Er is toen een investering gedaan in een snelle scsi array, welke de verlossing zou moeten brengen. De eerste array ging kapot; de tweede liep af en toe vast, voornamelijk in het weekend.
Besloten is toen een ander merk te nemen en deze 'versneld af te schrijven'. Het andere merk leek stabiel; nog een keer uitgebreid met een 2e en uiteindelijk tijdens de zomer hebben we maar besloten dat news gewoon een stap groter moest worden aangepakt.
Uiteindelijk is er gekozen voor een oplossing met een aantal spoolers (data opslag), een tweetal feeders (aanleveren/uitwisselen newsgroepen) en een aantal caching readers (een cache, welke de spoolers benaderd).
Met veel pijn en moeite heeft men dit project uiteindelijk begin november voor elkaar gekregen en nu sinds ruim een maand draait het project op een paar kinderziektes na, zoals we verwachten. We kunnen nu met news doorgroeien tot ongeveer 2Gbit, zonder dat performance een issue zou moeten worden; door middel van verdubbeling van het aantal spoolers en caching readers is er een behoorlijke groei mogelijk.
Voor TweakDSL gebruikers is de retentie (bewaartermijn) verhoogd van 4 naar circa 10 dagen. Ook mensen van buitenaf kunnen de newsserver gebruiken. De tekstgroepen zijn publiekelijk toegankelijk (textnews.tweakdsl.nl); op de binary groepen kan men als niet tweakdsl gebruiker een abbonement nemen bij
www.tweaknews.nl
We hopen dat dankzij alle investeringen in dit platform en de finetuning die nog steeds plaats vind, de nieuwe newsserver als een aanwinst beschouwd word.
Ten tweede, het netwerk.
------------------------
Vanwege de bouw van de nieuwe newsserver en voor het ontsluiten van de colo op RedBus is er in dezelfde zomer op dezelfde avond ook besloten, dat we onze eigen infrastructuur maar eens moesten gaan regelen.
Het klinkt eenvoudig: je besteld een glasvezel ring, koopt een paar switches, neemt de juiste lazers en draaien met dat spul.
Zo gezegd, zo gedaan. We waren ooit begonnen met Allied Telesyn als switch merk. Alle mogelijkheden die we wildde hebben, zaten in deze switch, en zelfs nog meer.
Maar eerst de glasvezelring besteld. BBNed komt binnen op Telecity 1; we moesten dus dit datacenter gaan ontsluiten, wat betekend dat we daar een rackruimte moesten hebben. Dat kwam goed uit, want Tweakable (kabel internet in het Essent gebied) was ook net opgestart.
Vol goede moed een tweetal switches bijbesteld van het zelfde type. Om een lang verhaal kort te maken, we hebben deze switches nooit stabiel aan het werk gezien, ondanks support van de leverancier gedurende enkele nachten; na 6 weken iedere week onderhoudswindow, want het ging fout bij het omschakelen van de bbned link, is besloten dat dit produkt het niet was.
Vervolgens hebben we van ellende gekozen voor Extreme Networks. Dit heeft namelijk een goede naam en veel collega ISP's gebruiken apparatuur van dit merk.
Slecht is nog een te milde omschrijving voor het levertraject van deze spullen; ondertussen moesten de Allied Switches terug naar de leverancier. Ondertussen was ook het levertraject van alle glasvezelverbindingen op de datacenters een beetje aan het tegen lopen. Van de circa 14 aangevraagde patches zijn er 2 in een keer goed gegaan; alle andere verbindingen vroegen bij elkaar ongeveer 200 akties om het geregeld te krijgen; een belachelijk aantal voor de eenvoud van de werkzaamheden.
Onze eerste mooie nieuwe extreme switch in het rack gehangen en vol goede moed weer een nacht opgeofferd. De switch werktte, ook met bbned, maar de performance was 'niet echt super', maar weer alleen op de bbned link.
Dankzij hulp van een collega ISP hebben we deze performance beter gekregen; de ring afgebouwd en enkele weken geleden was er de migratie van de bbned link van Telecity 2 naar Telecity 1, over onze eigen infrastructuur. Dit liep niet heel erg tegen en uiteindelijk draait dit al een aantal weken, ongeveer vanaf 1 november.
Bleef er dus nog een issue over, en dat was dat er af en toe geklaagd werd over oplopende responsetijden. We hebben op een gegeven moment een bridge gebouwd tussen bbned en ons netwerk; deze haalde de performance niet. Bij herhaling mislukte dit ook; Technical Assistence van Extreme Networks, kwam met een paar standaard tips maar eigenlijk ervaarden we de kou van buiten.
Door toch nog steeds de groei in de hoeveelheid verkeer, moesten we op Telecity 2 de routers voor AMS-IX en Transit gaan splitsen; daar we toch fallback transit hebben op RedBus is deze laatste migratiestap eergisteren uitgevoerd.
Eigenlijk tijdens deze omzetting ontstond er een idee voor een andere benadering van 'het ping probleem', voor zover je eigenlijk mag spreken van een probleem. De situatie bij bbned voorgelegd gister middag, gisteravond met de juiste mensen een mailwisseling (we schijnen de enige te zijn met dit probleem en ook de enige die om deze oplossing vroegen) en vanmorgen zijn deze wijzigingen doorgevoerd.
Het grote netwerkonderhoud is bij deze afgerond en de verwachting is, dat het netwerk nu superstrak is en blijft.
Als laatste bbned
-----------------
We zijn met bbned in overleg om de verdeling van het verkeer over beide STM-4 verbindingen netjes te verdelen; planning hiervoor volgt nog.