Backups, wat is hier verstandig.

[nasdude]

Het bedrijf waarvoor ik werk heeft een maand of 4 geleden een locatie in zweden aangekocht.

Er zijn daar 11 fysieke servers
1x windows 2000
9x windows 2003
1x windows 2008

1 van de servers is een windows 2003 server waarop een tape robot aangesloten zit, helaas is het robot gedeelte stuk en kan er maar 1 tape per keer geladen worden (dit is net genoeg voor de belangrijkste data). Die tape werd iedere dag gewisseld door de IT man die op de locatie werkt. de backup software is trouwens het antieke arcserv

Nu zijn er momenteel geen financiële middelen om investeringen te doen in deze locatie, nieuwe servers zijn de komende 3 maanden niet aan de orde (dit bedrijf kennende zal het wss nog wel een maand of 6 duren voordat er nieuwe servers komen). *jaja ik weet het, laten we hier maar verder geen tijd aan besteden, managers snappen het gewoon weg niet*

Nu is het zo dat de IT man aldaar sinds 2 weken ziek is (tapes worden nu gewisseld door een jongen van de sales afdeling, maar erlijk gezegd vertrouw ik die tape unit voor geen meter, laat staan dat ik remote zou kunnen recoveren), en deze maand niet terug verwacht wordt (burn-out klachten(, hij komt in ieder geval dit jaar niet meer terug, ik verwacht zelfs wel langer.
Als nood oplossing heb ik afgelopen week een oude desktop die kant op gestuurd met een 4tb disk, daarop staat vmware, en draait een windows 7 guest os, waarop vervolgens P2V software van vmware staat (vmware converter).

Iedere dag maak ik nu handmatig een p2v sync van de servers zodat ik in ieder geval de data virtueel heb staan (die gaat vervolgens met veeam over de WAN link naar mijn locatie), dan kan ik nog iets waar ik iets mee kan.


=========
De situatie is in het kort:
- Tape backups zijn naar mijn inziens niet betrouwbaar en slecht te recoveren
- geen IT skills on site in case of emergency
- Handmatige backups is kut, dat weet iedereen
- Ik mag geen geld uitgeven, minimaal over 3 maanden
=========

Wie heeft een nuttige tip in deze situatie? Ik zit te denken aan trail licenses van een backup software product welke de servers P2V backupped, maar ik wil niet iedere 15 dagen een nieuwe server installeren (iedere 60 dagen is acceptabel)

[aZuL2001]

Wachten totdat het fout gaat en er wel budget komt.

Tot die tijd een mooi (investerings)plan opstellen.

En alvast gepaste kledij kopen voor als je snel die kant op mag

[nasdude]

aZuL2001 schreef op donderdag 11 december 2014 @ 00:05:
Wachten totdat het fout gaat en er wel budget komt.

Tot die tijd een mooi (investerings)plan opstellen.

Het plan is er, de knaken komen helaas niet op tafel.... zucht

En alvast gepaste kledij kopen voor als je snel die kant op mag

gezin, kinderen, nee, dat gaat hem niet worden, en dat heb ik de directie vandaag heel duidelijk gemaakt toen de financieel directeur de opmerking maakte 'ach, als er wat mis gaat, zweden is maar 6 uurtjes deur tot deur'

[Powermage]

Kijk, als je geen geld mag uitgeven houd t al heel snel op, behalve dan kijken dat je dmv scripting en scheduling je handmatige scriptjes kan automatiseren (geen idee of dit kan, maar disk2vhd bijvoorbeeld kan je ook vanaf de commandline aan sturen en dit weer in een batch file zetten)

Als je een paar honderd euro mag kwijt zijn de komende maanden kan je (afhankelijk van wat zaken) in iedergeval zorgen dat alles ingedekt en veilig is.

Als je toch alles al over een WAN link heen krijgt dan zou mijn strategie zijn:
Automatiseren van de vmware backups op de locatie (of uitwijken naar disk2vhd en die lokaal weg backuppen elke nacht) en vervolgens de data die nodig is dmv een ip backup tool lekker buiten de deur weg zetten.
Crasht een server: nieuwe server opsturen/halen/laten leveren met vmware of hyper-v en recente data restoren
brand de hele tent af: nieuwe servers integreren met jullie netwerk en de data terugzetten.

[Equator]

Los van mogelijke oplossingen:

jaja ik weet het, laten we hier maar verder geen tijd aan besteden, managers snappen het gewoon weg niet

Managers snappen inderdaad geen techniek, dat is hun functie ook niet. Jij zal ze moeten vertellen hoe groot de kans is dat er iets omvalt. En met dergelijk oude OS'en denk ik dat je dat best hard kunt maken. Niet goed werkende back-ups houdt gewoon in dat je gerede kans hebt geen restore uit te kunnen voeren. Maak duidelijk wat de doorlooptijd gaat worden om systemen/data terug te halen uit een restore en geef aan hoeveel data er verloren kan gaan.

Maak dan maar eens duidelijk welke applicaties en daaraan gekoppelde bedrijfsprocessen er niet meer werken als het e.e.a. daar uitvalt.
Dat snappen ze namelijk wel. Dan kunnen ze alsnog beslissen dat er niets aan gedaan wordt, maar dan is de impact daarvan in ieder geval wel bekend.

[IceTeaGX]

Simuleer eens een hardware uitval (zou je hoe dan ook af en toe moeten doen)
Dan beseft men misschien dat een goede backup oplossing minder kost dan X aantal mensen die niet kunnen werken.

Veel meer kan je niet doen buiten hier en daar wat lapmiddelen toepassen.

[Mad Marty]

Met Equator, maak voor het management inzichtelijk wat er gebeurt als de boel omvalt en wat dan de kosten zijn. Ook managers moet je in hun eigen taal aanspreken

[nasdude]

Equator schreef op donderdag 11 december 2014 @ 08:48:
Maak dan maar eens duidelijk welke applicaties en daaraan gekoppelde bedrijfsprocessen er niet meer werken als het e.e.a. daar uitvalt.
Dat snappen ze namelijk wel. Dan kunnen ze alsnog beslissen dat er niets aan gedaan wordt, maar dan is de impact daarvan in ieder geval wel bekend.

Ik heb onlangs in de management meeting dit aan de kaart gebracht. Heb ze uitgelegd dat de switches in die locatie 11 jaar oud (no shit) zijn en dat ze elke moment kunnen uitvallen. Dat de volledige kantoor + productie dan plat ligt en het ERP pakket onbereikbaar is, er geen orders in het systeem gezet kunnen worden, de werkbonnen niet geprint kunnen worden en dat shipping geen labels meer kan printen en er dus helemaal niets de deur uit gaat.

Vervolgens heb ik het gehad over de servers en van de 4 belangrijkste servers (ERP, File, Print en Finance) de impact beschreven op het moment dat ze uitvallen.

Als laatste heb ik ze gemeld dat afhankelijk van de storing ze er rekening mee moeten houden dat ze er minimaal 3 dagen volledig uit liggen maar dat dit in de slechtste scenario's tot 2 volle weken kan duren.

het antwoord blijft hetzelfde. geen geld, geen servers, zoek het maar uit, we nemen het risico wel

IceTeaGX schreef op donderdag 11 december 2014 @ 08:54:
Simuleer eens een hardware uitval (zou je hoe dan ook af en toe moeten doen)
Dan beseft men misschien dat een goede backup oplossing minder kost dan X aantal mensen die niet kunnen werken.

Dat zou ik maar al te graag doen, laat de medewekers maar een dagje zweten, dan snapt het management wat de impact is van een falende IT infrastructuur.... Helaas kan ik dat niet over mijn IT hart verkrijgen

overigens kan ik een paar honderd euro wel los peuteren, ik schat max 500 euro

[IceTeaGX]

Wel ik zou het houden op de PC met schijf als backup, ideaal gezien met offsite optie.
En vooral zorgen dat de DATA veilig is, de Servers en OSsen tot daar aan toe.

Als er iets mis gaat, en er kan een week+ niet gewerkt worden, zeer spijtig,

Eventueel even een documentje ter ondertekening voorleggen dat jij niet verantwoordelijk gesteld kan worden voor eventueel data en/of productiviteitsverlies vanwege eventuele storingen op IT vlak.
Dat kan soms al eens iemand wakker schudden.

[Janoz]

Er staat ook simuleer. Dus niet daadwerkelijk alles omgooien, maar naspelen.

[Equator]

nasdude schreef op donderdag 11 december 2014 @ 10:45:
[...]

Ik heb onlangs in de management meeting dit aan de kaart gebracht. Heb ze uitgelegd dat de switches in die locatie 11 jaar oud (no shit) zijn en dat ze elke moment kunnen uitvallen. Dat de volledige kantoor + productie dan plat ligt en het ERP pakket onbereikbaar is, er geen orders in het systeem gezet kunnen worden, de werkbonnen niet geprint kunnen worden en dat shipping geen labels meer kan printen en er dus helemaal niets de deur uit gaat.

Vervolgens heb ik het gehad over de servers en van de 4 belangrijkste servers (ERP, File, Print en Finance) de impact beschreven op het moment dat ze uitvallen.

Als laatste heb ik ze gemeld dat afhankelijk van de storing ze er rekening mee moeten houden dat ze er minimaal 3 dagen volledig uit liggen maar dat dit in de slechtste scenario's tot 2 volle weken kan duren.

het antwoord blijft hetzelfde. geen geld, geen servers, zoek het maar uit, we nemen het risico wel

Prima toch, dan heb jij aan je verantwoordelijkheden voldaan. Maak een memo / notitie waarin je aangeeft dat je op basis van best effort een back-up maakt, waarvan je niet weet of je hem volledig kan restoren binnen de tijd dat zij dat willen en dat het risico hiervan door het management wordt geaccepteerd. Laat ze het ondertekenen of mail het naar ze. Indekken noemen ze dat

Dat je vanuit de techniek probeert het e.e.a. te regelen om altijd nog een restore te kunnen doen is logisch natuurlijk.

[MaD_co]

Trek de netwerkkabel uit je manager zijn pc, en laat hem eens kijken wat hij daadwerkelijk nog kan doen op dat moment...
Dat zijn in principe de mogelijkheden die hij ook nog heeft als er server(s) uit gaan vallen

[ElCondor]

Het vervelende van dit vak is vaak toch dat als er dan toch iets uitvalt, dat jij er dan wél op aangekeken wordt, ondanks dat er door iedereen gezegd wordt, hey, we nemen dat risico wel. Kijken wie ze als eerste proberen te lozen of de verantwoordelijkheid in de schoenen te schuiven. Als zij zeggen: dat risico nemen we, graag even op papier zetten en laten tekenen.

[Arunia]

ElCondor schreef op donderdag 11 december 2014 @ 11:41:
Het verveldne van dit vak is vaak toch dat als er dan toch iets uitvalt, dat jij er dan wél op aangekeken wordt, ondanks dat er door iedereen gezegd wordt, hey, we nemen dat risico wel. Kijken wie ze als eerste proberen te lozen of de verantwoordelijkheid in de schoenen te schuiven. Als zij zeggen: dat risico nemen we, graag even op papier zetten en laten tekenen.

Dit inderdaad. Dek jezelf in.
Jij en wij als ITers weten wat de gevolgen zijn en het management zegt alleen maar dat ze het risico wel zullen nemen. Puntje bij paaltje, ben jij de lul.

[Breezers]

Goede ervaringen met Acronis Backup Advanced for Windows Server , tevens is backup naar een online storage ook mogelijk met complete server snapshots, incremental etc. Zelfs complete server recovery op afwijkende hardwrae is mogelijk.

http://www.acronis.com/en.../advanced-windows-server/

Een aanschaf zou je wel wat geld kosten, maar als je die afzet tegen de downtime en mogelijke dataloss, dan is een investering heel simpel te verdedigen ? Breng het gewoon als: "minimaal 1-2 dagen downtime, mogelijk data verdwenen, personeel die niet kan werken, geen nieuwe orders of facturatie, wat kost dat op een gemiddelde dag ?"

[ Voor 34% gewijzigd door Breezers op 11-12-2014 12:00 ]

[Dets]

Je hebt de consequenties van een uitval in kaart gebracht. En ik snap dat je vanuit je IT-hart toch probeert er wat van te maken. Als jij een best effort oplossing aanbiedt dan rekent het management zich rijk, in die zin van "heeft die knappe knul zonder budget toch goed weten te regelen". Als het dan toch misgaat dan krijg je de schuld want "jij had het toch geregeld?" Kortom ik zou de noodoplossing wel doen maar niet verkopen als oplossing aan het management.
Ik zou richting management met enige regelmaat terugkomen op de risico's die gelopen worden. Zoek wel even de handige momenten uit.
Als het misgaat krijg je toch de schuld en de vraag waarom het niet in een halve dag gefikst is. Het voelt in ieder geval beter als je niet de verkeerde verwachtingen bij het management hebt gewekt.

[Ultimation]

Ik zou inderdaad een documentje opstellen en die laten tekenen door management waarin jij aangeeft dat je niet langer deze setup ondersteund, en dat wanneer zij bereid zijn geld uit te geven dat jij meer dan happy bent hun te helpen met het opzetten van een nieuwe omgeving.

Ik vindt de tip om de netwerkkabel uit de managers computer te trekken een hele goede. Wellicht kan je dit beter in het patch panel doen, en hem zo even een half uurtje laten zweten.

[crazy7]

Je kan een tweede hands back-up unit/robot kopen bij serverhome.nl. Ze hebben mij wel eens geholpen aan een aantal server schijven met spoed.

[Jazzy]

In een informele organisatie laat de systeembeheerder zijn manager geen verklaring ondertekenen, en in formele organisaties zie ik dat ook nog niet zo snel gebeuren.

Ik kan me wel vinden in het standpunt dat je alles gedaan hebt. En natuurlijk, als er stront aan de knikker is mag jij het oplossen maar dat is een fact of life. Frustrerend maar je kunt nu eenmaal niet alles oplossen.

[Powermage]

mbt tot die documenten en tekenen, ik heb dat werkelijk nog nooit bij een organisatie gezien.
Imho zou een email naar de verantwoordelijke voldoende moeten zijn, zeker in een wat informelere organisatie. "De backup gaat niet goed, we hebben ivm geen budget een houwtje touwtje oplossing gemaakt voor een paar honderd euro, echter kan ik hier geen garanties opgeven maar het zou een aantal grote risico's kunnen veranderen in kleine risico's tot het plan X uitgevoerd is."

Overigens, alle adviezen over je indekken etc, dat helpt de TS niet echt verder natuurlijk, als je t met een paar honderd euro weet te fixen is dat altijd beter dan achteraf aan te kunnen tonen dat je ze gewaarschuwd had.

[The Eagle]

Indekken en misschien een noodoplossing verzorgen.

Mail sturen, toen en toen heb ik dit uit de doeken gedaan, dit is het risico dat jullie nemen, jullie geven aan dat je dat wilt nemen, graag even bevestigen.
Antwoord goed bewaren en zeker niet op hun servers


ook zou ik even bij je management navragen wat hun strategie is, wellicht mbt die hele locatie. Kan goed zijn dat ze de boel willen integreren in de bestaande systemen (logische stap). Dat kan ook een mitigation step van het risico zijn. Dan is alleen de vraag hoe lang ze bereid zijn het risico te dragen.

[nasdude]

Ik denk dat ik Veeam endpoint backup eens ga proberen.
http://www.veeam.com/news...desktops-and-laptops.html

Iemand hier al ervaring mee? Ik gebruik al jaren backup&replication, dat werkt gewoonweg heerlijk

edit: laat maar, omgeving draait nog op windows 2003, dat werkt daar niet mee

[ Voor 13% gewijzigd door nasdude op 11-12-2014 15:14 ]

[aZuL2001]

RSync van data naar een NAS die je daar plaatst?

Is een pleister maar in ieder geval nog betaalbaar.
En beter dan niets.

Hoewel, gezien je input al, blijft mijn eerdere suggestie overeind

[DrakeNL]

Ik zou zeggen: altijd indeken. Stuur het MT een mail met de beviningen of een MOM (minuts of meeting) van de desbetreffende meeting.

Dat je alles er aan doet om zo goedkoop mogelijk een tijdelijke zo goed mogelijke oplosing bied is niet meer dan logisch.

Zelf zit ik in een soortgelijke situatie. Onze 10 jaar oude backup faalt regelmatig. We hebben onderstaande de laatste 2 maanden alleen al gehad.
- defecte disk in server
- defecte disk in storage
- vollopende storage
- 2 failende raid batterij'en
- defecte tapeunit. We hebben nu een huurunit en ik mag meer dan 70 tapes gaan herconfigureren
- 30 corupte volumes

MT is hier van op de hoogte (we geven het pas 3 jaar aan), ik doe mijn uiterste best om het overeind te houden, maar geef geen garanties.

voor jou situatie. beschrijf (in een mail) 3 situaties. De huidige, de minimale en de ideale aanpassing. Zet er bij wat de risico's, downtime, dataverlies en kosten zijn en laat het MT beslissen. Men kan dan een beslissing maken op de juiste info. Daarna en Nu komt het "lullige" Leg je bij die beslissing neer en doe doe je werk zo goed mogelijk.


_{ps. Mocht je iemand zoeken die, (permanent) die kant op wil dan houd ik me aangeraden}

[ Voor 4% gewijzigd door DrakeNL op 12-12-2014 00:49 . Reden: ps toegevoegd ]

[madsector]

Als je daar 11 fysieke servers al hebt draaien, is het wellicht zinvol om te kijken welke van deze servers nog levensvatbaar zijn. Neem één (oude?) server mee naar zweden waarop VMWare kan draaien en ga consolideren. Kijk of je met minimale of zonder verdere aanschaf van meerdere machines een dikkere kan maken. Die servers ga je converteren naar de VMWare machine, de gemigreerde machines kan je herinstalleren naar VMWare etc. Gebruik die desktop met 4GB voor je backups, dat doe je in feite nu ook al.

Wees creatief! Als er geen budget is, vinden ze het soms wel normaal dat je er veel tijd in steekt. Want dat komt uit een ander potje of zo...

Maar misschien is het niet zinvol en moet je je gewoon indekken.

[nexhil]

aZuL2001 schreef op donderdag 11 december 2014 @ 18:41:
RSync van data naar een NAS die je daar plaatst?

Is een pleister maar in ieder geval nog betaalbaar.
En beter dan niets.

Hoewel, gezien je input al, blijft mijn eerdere suggestie overeind

Ik zat ook aan een RSYNC of misschien BTSYNC te denken.

ik gebruik zelf een combinatie van deze 2 voor een backup van 1 TB

[ Voor 8% gewijzigd door nexhil op 18-12-2014 15:28 ]

[josvane]

Documenten ondertekenen, no way dat ze dat gaan doen. Mijn inziens moet je een aantal stappen doorlopen.

-bepaal hoeveel tijd je nodig hebt om te inventariseren en vraag hiervoor toestemming.
-als je tijd hebt bedenk scenarios en maak hiervoor een risicoanalyse.
-deze analyse overleg met je manager.

Het is vervolgens aan hun wat ze er mee doen.

[Gomez12]

Powermage schreef op donderdag 11 december 2014 @ 14:23:
mbt tot die documenten en tekenen, ik heb dat werkelijk nog nooit bij een organisatie gezien.
Imho zou een email naar de verantwoordelijke voldoende moeten zijn, zeker in een wat informelere organisatie.

Is niet zo heel bijzonder hoor, hangt ervanaf op welk niveau je zit en wat de structuur van het bedrijf is.

Ik ken genoeg bedrijven waar de totale eindverantwoordelijke voor het bedrijf niet bij dit soort meetings zit.Maar waar de totale eindverantwoordelijke wel bij 2 weken uitval (en dus zwaar verwijtbaar verlies) koppen gaat laten rollen.
En op zo'n moment kan jouw verantwoordelijke (want zijn baan staat op het spel) wel eens selectief geheugenverlies krijgen en nog net wel weten dat jij het minder erg voorgespiegeld had en dat op basis van jouw minder erge voorspiegeling het risico genomen is.

De kosten bij uitval lopen al heel snel in de tonnen voor menig bedrijf (gemiste omzet, foutieve orders, voorradverschillen, direct extra overwerk van personeel, indirect extra overwerk van personeel etc etc ). En als een ceo hoort dat er tonnen verlies is omdat iemand dacht 5000 euro uit te sparen, tja dan vind ik het logisch dat er koppen gaan rollen.

Zat de ceo ook aan die tafel dan hoef je het niet te documenteren (meeste mensen worden geen ceo als ze dit soort dingen niet onthouden) maar zat de ceo niet aan de tafel, maar bijv de lokale directeur of ... dan heb je vrij grote kans dat als het fout gaat het goed fout gaat en de shitstorm op jouw bureau komt te liggen/ jij eruit mag.

Sowieso zou ik dit soort dingen nooit mondeling brengen in een meeting maar altijd uitwerken op papier en dan je uitwerking mondeling toelichten, maar mocht je het alleen mondeling hebben toegelicht dan erop toezien dat het in de notulen staat.

Dit zijn van die geintjes van het gaat altijd goed, maar als het 1x fout gaat dan gaat het ook goed fout en gaat het over veel geld.
Als 20 man 1 uurtje moet overwerken vanwege uitval dan heb je waarschijnlijk je hele investering er al uit.

Alhoewel ik het trouwens apart vind dat het bedrijf 4 maanden terug is overgenomen en dat er nu geen geld is. In mijn verleden als er een bedrijf overgenomen werd dan werd er gelijk een totale inventarisatie gemaakt (ook van IT) en dan werd er gewoon gekeken naar wat er vervangen zou moeten worden om het op corporate standaard te krijgen en die kostenpost werd gewoon ingecalculeerd bij overname-prijs.

[Powermage]

Selectief lezen???

Ik geef aan dat het op papier uitwerken en laten tekenen door je manager niet vaak gebeurt (en ik kom bij vrij veel verschillende bedrijven) dat je dit in een email na stuurt ter bevestiging en indekking is iets wat ik alleen maar toe juich