Hoe behandel je data het best

[The Chaser]

Mijn vraag
Ik heb flink wat data. Die data krijg ik in verschillende rar files die indien uitgepakt 1 grote rar file is.
De rar files hebben geen bescherming. Ik versleep de data in mappen naar mijn NAS.

Nu (na een interessante ntfs en hoe een hdd werkt cursus) op elke hdd krijg je bit rot of bit corruptie door slechte sectoren. En met een raid vergroot je dit een klein beetje.


Nu hoe bewaar** ik het best de data in kwestie? Om meer herstelkans te hebben als een bepaalde sector corrupt raakt in het bestand.
1) Versleep ik deze gewoon in zijn geheel naar de nas.
2) Maar ik er een nieuwe grote RAR van met een bescherming (herstelbestand toevoegen x%)
3) Rars uitpakken en nieuwe 1 grote RAR.
4) Nog iets beter

Voorbeeld:
Map1 = 54 bestanden van 700MB
Map2= 273 bestanden van 244MB
Map3= 80 bestanden van 976MB

Bijkomende vraag: wat is de meeste performante oplossing ook (bijkomend).
Ik merk dat ik makkelijker en sneller 4 rar files van 30GB verplaats dan 1.200 files van 100MB.

Relevante software en hardware die ik gebruik
Windows 10 64bit. 24GB RAM DDR3
Winrar
NTFS
RAID 5

Type data: kan beeldmateriaal zijn, foto's, archiefbestanden, backups, games, ..... alles.

Wat ik al gevonden of geprobeerd heb
ik weet niet hoe ik mijn vraag moet formuleren om een deftig antwoord te vinden via google


**ik bedoel niet hoe back up ik dit het beste

[EnerQi]

Lees eens over ZFS en RAIDZ2, de opvolger van NTFS (of varianten zoals btrfs voor linux). Het bitrot gedeelte wordt dan in iedergeval opgevangen.

Om corruptie op je pc te voorkomen, zou je het downloaden van die bestanden moeten laten doen via je (ZFS) NAS met ECC geheugen om alle risico's te minimaliseren.

Ook snap ik het idee van de rar bestanden nog niet, voor mij zijn files, files ;-)

Overigens is Raid of je NAS nog geen backup (gezien het woordje "verslepen"). Dus wat doe je daaraan?

[zetje01]

Maarr... je hèbt toch al RAID 5?

[jeroen3]

Zolang je NTFS gebruikt: Parity files. https://multipar.eu/
Werkt het beste op archieven. Maar de nieuwe multipar gui tool kan ook op hele mappen.

Deze kan je nas ook maken als je een willekeurige NZB downloader hebt geïnstalleerd.

[ Voor 5% gewijzigd door jeroen3 op 22-03-2017 21:02 ]

[The Chaser]

EnerQi
mijn nas is een Zyxel N540 32TB.
Ik denk niet dat die veel specialiteiten heeft, of sla ik de bal mis?
Klopt, mijn NAS is GEEN back up. En ik heb Geen backup van de data. Daar werk ik momenteel aan om dit te bekostigen (tweede NAS mirror).
Ivm winrar, ik weet dat winrar de mogelijkheid heeft om redunancy in te bouwen (je files zijn dan wel % groter). Maar helpt dat bij slechte sectoren.


zetje01
Raid beschermd je niet tegen slechte sectoren
Een voorbeeld (ik weet dat het niet klopt, maar het is een voorbeeld om het eenvoudig uit te leggen don't shoot ))
D1 D2 D3 D4
0 + 1 + 1 = 2 => Bij 1 slechte HDD berekend de raid alles
0 + 0 + 1 = 2 => Een slechte sector veranderde een waarde, weet jij de welke?


MultiPar, hoe werkt dit in de praktijk?
jeroen3


Het komt er op neer hoe ik mijn files het beste bewaar tegen slechte sectoren. En hoe winrar er mee omgaat. 65 rar files die indien uitgepakt 1 bestand zijn. Indien 1 van de bestanden een slechte sector heeft is de hele ketting kapot ja of nee?

Bedankt!