Nieuwe software, oude data niet te importeren

[Triple]

Een aantal applicaties van laboratorium apparatuur worden binnenkort vervangen door nieuwe versies. Het is niet per definitie zo dat de oude meetdata kan worden geimporteerd naar de nieuwe software versie. De meetdata moet echter wel 30 jaar bewaard worden en moet in die periode ook kunnen worden uitgelezen.

Ik heb al zitten denken en de PC met de huidige installatie weggooien en de software installatie CD bewaren lijkt met niet zo erg handig. Wie kan mij garanderen dat de PC's in 2030 (als dan nog PC's bestaan) in staat zijn om een programma uit 1998 te draaien. Het alternatief zou zijn om de hele PC te bewaren. Een nadeel dat hier weer aan zit is dat er op den duur heel wat computer kasten moeten worden opgeslagen, ook niet echt handig dus...

Heeft iemand al eens zo iets aan de hand gehad? Of is er nog iemand met een briljant idee??

[Verwijderd]

Exporteer de data, naar CVS bestanden ofzo. Die kan je altijd weer inlezen, indien nodig, kan je dan altijd wel een conversie programma schrijven in het jaar 2025 , mocht je de data dan weer in een of ander pakket moeten inlezen.

Zit de data nu opgeslagen in een eigen formaat van dat pakket, of een of andere database als Oracle, Ms-Sql ofzo?

(over hoeveel data hebben we het eigenlijk, is ook wel belangrijk om te weten).

[Triple]

Het zijn allemaal formaten van de software zelf. In het geval van het pakket waarmee ik nu bezig ben gaat het om 25 MB verspreid over bijna 200 files.

[Verwijderd]

SG >> SA

[Verwijderd]

Heeft het pakket wel een Export functie, zoniet, dan moet je toch het pakket bewaren (met 1 bijpassende PC ), of iemand vinden die de data naar een algemeen export formaat kan omzetten. (Heeft de fabrikant van het oude pakket, geen advies hierover)?

[Rukapul]

Indien het opslaan van de computerkasten een probleem is: gebruik laptops Die zijn prima te stapelen.

Kun je de boel trouwens niet uitprinten? Papier is geduldig (en gaat langer mee dan optische media) en kan dmv OCR altijd wel weer ingelezen worden.

Hoe groot is de kans dat de data over 5, 10 of 20 jaar nog nodig is? Als dat vrijwel zeker 0 is dan zou ik de data backuppen (in verschillend formaten indien mogelijk) incl software en de problemen in de toekomst laten. Is het vrijwel zeker nodig in de toekomst dan zou ik daar bovenop een laptopje met complete installatie er bij houden.

[Verwijderd]

Je hoeft maar 1 PC te bewaren. De rest bewaar je de hhd van en zet je de software van op1 of meerdere tapes.

[Verwijderd]

Rukapul schreef op 11 August 2003 @ 11:47:
Indien het opslaan van de computerkasten een probleem is: gebruik laptops Die zijn prima te stapelen.

Kun je de boel trouwens niet uitprinten? Papier is geduldig (en gaat langer mee dan optische media) en kan dmv OCR altijd wel weer ingelezen worden.

Hoe groot is de kans dat de data over 5, 10 of 20 jaar nog nodig is? Als dat vrijwel zeker 0 is dan zou ik de data backuppen (in verschillend formaten indien mogelijk) incl software en de problemen in de toekomst laten. Is het vrijwel zeker nodig in de toekomst dan zou ik daar bovenop een laptopje met complete installatie er bij houden.

De vraag is natuurlijk of een laptop (of PC) die 20 jaar in de kast ligt, ook nog gaat opstarten.

[Verwijderd]

Verwijderd schreef op 11 augustus 2003 @ 11:48:
[...]


De vraag is natuurlijk of een laptop (of PC) die 20 jaar in de kast ligt, ook nog gaat opstarten.

Waarom zou dat niet?

zolang hij niet blootgesteld word aan dingen waar hij nie tegen kan, extreme hitte, extreme koude, water...

moet ie het toch gewoon blijven doen?

Het is ook niet zo dat die continu zou moeten blijven aanliggen, maar gewoon daar ligt te wachten tot de data nodig is, dus kan hij ook niet 'verslijten'

[Verwijderd]

Omdat de batterij dan op is?
PCs en Laptops zijn niet gemaakt om 30 jaar te verstoffen. Tenminste tegenwoordig niet meer

[Triple]

De optie van ItSnows is wel een goeie... 1 PC kast met een stapel HD's van alle applicaties.

De kans dat de data moet worden teruggehaald is een beetje afhankelijk van wat er in de toekomst met de kwaliteit van ons product gebeurt. Als er te veel mensen het loodje leggen moeten we even de vrijgifte analyses doornemen. Verder zou het ook kunnen dat een inspecteur wil zien dat de data nog beschikbaar is, dus zonder aanleiding toch de data moeten inzien.

[Brothar]

En hoe kostbaar is het om een import-functie in de nieuwe software in te bouwen ?
Je hoeft dan echt alleen maar data te bewaren, en kunt op elk willekeurig moment die oudedata opnieuw analyseren.

[Verwijderd]

Ik zou als ik jou was het volgende proberen:

1 PC.
Grote schijf.
Alle andere PC's overzetten naar die PC. Dus indien de verschillende data bestanden in 1 keer binnen de applicatie gebruikt kunnen worden dan zo installeren anders door de applicatie meerdere keren te installeren.

Dit maakt het mogelijk met 1 PC te blijven zitten waarbij je van die ene PC meerdere backups maakt op verschillende media zoals CD rom of Exabyte (iig geen DAT tapes want die gaan maar beperkt mee!)

[F_J_K]

Dan zit je nog wel met het probleem dat je afhankelijk bent van 1 enkele PC: als daar wat (hardwarematig) kapot gaat heb je een probleem, dan is alles (minstens) dubbel uitvoeren al veiliger. Zeker als je er losse HDD's bij legt en over 30 jaar weinig mensen meer weten hoe je met een schroevedraaier zo'n HDD in een PC zou kunnen plaatsen kan dit een risico zijn - een gemiddelde tiener weet waarschijnlijk ook niet hoe je een tape van een C64 aan de praat krijgt, laat staan een mainframe uit de jaren 70. Al doet een hele goede papieren handleiding dan natuurlijk wel wonderen

Misschien is een vorm van Virtual PC dan handiger; al zal je dan wel elke +- 10 jaar een nieuwe moeten maken (of misschien kan je VMWare 2003 draaien binnen VMWare 2008, etc). Maar als enkel de data van belang is (en niet de applicatie of de processen eromheen) zou een manier om het te exporteren misschien toch het meest veilig zijn.

Zijn er geen bedrijven gespecialiseerd in het lang bewaren van data (en de bijbehorende applicaties?) Ik kan me goed voorstellen dat je niet de eerste bent met dit probleem

[Verwijderd]

Vergeet niet dat sowieso data op HD ook vergaat, het magnetisch veld, zal verminderen in de loop der jaren. Er zal dus wel een procedure opgesteld moeten worden om de data ieder jaar of iedere X jaar , even opnieuw op een nieuwe drager te zetten (of dit nu HD of Tape, CD-R,DVD-R etc. etc. is).

(Ik neem aan dat het om een wettelijke verplichting gaat om de data zolang te bewaren).

[Qwerty-273]

Inderdaad gewoon als platte tekst het liefst de data bewaren. Wel natuurlijk met data schema

Omdat gewoon de verschillende software systemen zo veranderen dat er meestal weinig compatibiliteit is met veel vroegere pakketen. Zeker over een periode van 30 jaar.

Zelfde geld bijvoorbeeld voor de archieven van de politie. Is in beginnen van automatisering ook allemaal opgeslagen en gearciveerd. Alleen nu kunnen ze dat dus niet meer inlezen. Is er wel nog 1 centrum ergens in NL waar allerlei oude apparatuur staat (70 jaren enzo) waar ze deze dus kunnen inlezen. En op hoop van goede zegen er nog iets vanaf kunnen halen.

CD's en DVD's hebben een maximum gegarandeerde houdbaarheid. Let daar wel op. Zelfde gedlt voor tapes en zo meer. Zorg dus voor dubbel of triple uitgevoerde oplossingen en als het kan gewoon een print out van de data. Je zal toch wel verwachten dat over 30 jaar de scanner en OCR sofware zo ver is dat het foutloos gaat

[Crazy D]

Ik zou voor de optie gaan om wat meer druk te zetten op de leverancier van de software. Als jullie die oude data moeten bewaren, zullen meerdere klanten dat moeten. Het is zachtjes uitgedrukt niet echt een handige methode, als je die data incl een pc waar het programma op werkt die die data kan lezen, moet bewaren. Da's net zoiets als een backup systeem waarbij je wekelijks de server vervangt, en de oude server in een kluis zet...
Die import functie hoeft alleen maar het huidige bestandsformaat en het vorige in te kunnen lezen, lijkt me niet echt moeilijk, aangezien ze toch wel zo slim zullen zijn om het bestandsformaat niet 180 graden om te gooien (niet echt gebruiksvriendelijk... alsof photoshop 8 een compleet nieuw bestandsformaat introduceert, en huidige psd's niet meer in te lezen zijn).

[Triple]

Het bestandsformaat is onder druk van diverse overheden en uiteindelijk ook het bedrijfsleven vrij ingrijpend veranderd. Er is een volledige audit-trail bijgevoegd en nog wat parameters om froude met data onmogelijk te maken.

Het is daarom voor mij ook niet geheel ondenkbaar dat de oude data niet in de nieuwe versie kan worden geimporteerd, al zou de leverancier van de software dat wel willen.

In de opslag structuur van de nieuwe versie zal ergens een voorwaarde aanwezig zijn die versiebeheer van de data verplicht, terwijl geen versies zijn bijgehouden in de oude data.

[MissingDog]

Ik zou haast voor een extreme long-term archive oplossing gaan denken aan ponskaarten, dit medium is volgens mij echt het enige wat op lange termijn nog betrouwbaar is...data-format-descriptor + uitleesconstructietekening in document erbij zetten....voordeel van ponskaarten/band boven magnetische en gedrukte media is dat het medium zelf de data bevat ipv een laag die op het medium aangebracht is. En het is over 30-50 jaar makkelijker om 'even' een ponskaart lezer in elkaar te zetten, dan om DLT drives opnieuw uit te vinden zeg maar

[ Voor 5% gewijzigd door MissingDog op 11-08-2003 14:20 ]

[Verwijderd]

MissingDog schreef op 11 augustus 2003 @ 14:19:
Ik zou haast voor een extreme long-term archive oplossing gaan denken aan ponskaarten, dit medium is volgens mij echt het enige wat op lange termijn nog betrouwbaar is...data-format-descriptor + uitleesconstructietekening in document erbij zetten....voordeel van ponskaarten/band boven magnetische en gedrukte media is dat het medium zelf de data bevat ipv een laag die op het medium aangebracht is. En het is over 30-50 jaar makkelijker om 'even' een ponskaart lezer in elkaar te zetten, dan om DLT drives opnieuw uit te vinden zeg maar

Duik 's ff in de geschiedenis, ken je het verhaal uit Amerika, met de resultaten van sommige volkstellingen?? Ponskaarten gaat dus ook niet helemaal op.

[MissingDog]

Verwijderd schreef op 11 August 2003 @ 14:21:
[...]


Duik 's ff in de geschiedenis, ken je het verhaal uit Amerika, met de resultaten van sommige volkstellingen?? Ponskaarten gaat dus ook niet helemaal op.

Moderne ponskaarten worden gefabriceerd van kunststof, niet van papier/karton...dus vergaan doet het niet en het is niet aan slijtage onderhevig. Het systeem zal ook iets anders in elkaar moeten zitten dan toendertijd...denk aan 'optische ponskaarten'...met licht ipv 'aftasttandjes'. Technologie is zo basic als maar kan...en het is praktisch onverwoestbaar -> voor brandbestendigheid desnoods keramiek-composite materialen.
Resolutie kan ook vele malen hoger zijn dan toendertijd...dus meer data op 1 kaart.

[ Voor 9% gewijzigd door MissingDog op 11-08-2003 14:26 ]

[Verwijderd]

Ik zou er gewoon voor gaan om nu alvast de data te converteren naar de nieuwe applicatie en zodat deze ook bruikbaar is als historie.
Het probleem schuift dan door naar de volgende keer van een update.

Daarnaast is de optie zoals genoemd de rauwe data opslaan als csv met bijbehorend schema branden op cd. En zowiezo om de zoveel jaar van het ene medium naar het andere meekopieeren.(cd naar dvd naar blue ray naar......)

[Triple]

Erg originele ideeen komen hier wel naar boven. Of ze allemaal even goed bruikbaar zijn is dan weer een tweede...

Ik zal in het bedrijf een paar van de opties doornemen.
Als er meer bekend wordt over de handelswijze die we gaan toepassen zal ik dat hier eens posten. Tenzij niemand daar behoefte aan heeft natuurlijk

[EXX]

Je probleem is een hele lastige zaak, die op veel gebieden speelt. Hoe bewaar je digitale data over een lange periode. Hele stapels met satalietgegevens uit de jaren 70 zijn tegenwoordig ontoegankelijk omdat de hardware niet meer bestaat.

Een artikel over dit grote probleem stond een tijd geleden ook in het ingenieursblad 'de ingenieur'.

Kijk ook eens hier en hier

Zoek met google maar eens op digitale duurzaamheid

[ Voor 7% gewijzigd door EXX op 11-08-2003 14:45 ]

[Crazy D]

Triple schreef op 11 August 2003 @ 14:12:
Het bestandsformaat is onder druk van diverse overheden en uiteindelijk ook het bedrijfsleven vrij ingrijpend veranderd. Er is een volledige audit-trail bijgevoegd en nog wat parameters om froude met data onmogelijk te maken.

Hebben die overheden niet wat tips dan? Da's misschien wel wat offtopic, maar als bepaalde overheden het formaat willen wijzigen is dat fijn, en er zal vast wel een goede reden voor zijn... maar laat ze dan ook met een oplossing komen om je huidige gegevens te bewaren/later in te kunnen zien. Dat lijkt me niet meer dan terecht om dat te verwachten. Zij willen dat tenslotte...
Heb je contact met anderen die hetzelfde probleem hebben?

[Triple]

Ik ben hier in het bedrijf al aan het zoeken naar mensen die hier al eens over hebben nagedacht, tot op heden nog niet gevonden. Ik hoopte hier mensen aan te treffen die dit al eens hadden meegemaakt.

EXX Ik zal je links eens doorkijken, thanx!