Wekelijks grote hoevelheid bestanden/mappen controleren

[Eric_1993]

Mijn vraag

Ik heb 1 harde schijf waar ik mijn grote projecten op bewaar. Daarnaast heb ik 4 harde schijven waar dagelijks een mirror van de eerste schijf naartoe geschreven wordt. Het gaat om 84 mappen met allerlei bestanden en ook nog mappen in die mappen. Het gaat hier dus om veel mappen en bestanden die ik niet handmatig kan controleren d.m.v. checksums, bovendien worden veel mappen dagelijks gewijzigd en gaat om totaal van 800 GB aan data.

Hoe kan ik ervoor zorgen dat ik wekelijks alle bestanden kan verifiëren, ook de bestanden die tussentijds zijn gewijzigd/toegevoegd?


Relevante software en hardware die ik gebruik

- Windows 10 Pro
- Intel Core i7 4771

Wat ik al gevonden of geprobeerd heb
- Handmatig wekelijks elke mappen checksummen en controleren, is onhandig, en komt vaak voor dat ik mappen oversla.
- RAID-1, maar dit controleert de bestanden niet, dus ook mee gestopt.
- SyncbackPro, het checken duurt hiermee 2x langer dan handmatig controleren!
- ZFS, is helaas niet mogelijk op Windows 10
- ReFS, heeft Microsoft uit de Pro versie gehaald.
- Bij elke wijziging of toevoeging van bestanden checkums draaien en de oude met de nieuwe file vergelijken, bij veel kleine bestanden die zijn gewijzigd of toegevoegd is dit een hoop werk.

[technopeuter]

Robocopy Kan dat, zoek naar eens

[BeepBoop]

Het klinkt alsof je op zoek bent naar een degelijke back-up oplossing, heb je al eens naar https://www.borgbackup.org/ gekeken?

[urf]

Gaat het puur om te controleren dat de bestanden op beide locaties exact gelijk zijn?

Je zou met iets als md5sum dan de hashes kunnen berekenen op beide locaties en met diff kijken of er verschil is. Heb je geen extra software nodig verder.

[Eric_1993]

urf schreef op dinsdag 9 juni 2020 @ 21:04:
Gaat het puur om te controleren dat de bestanden op beide locaties exact gelijk zijn?

Je zou met iets als md5sum dan de hashes kunnen berekenen op beide locaties en met diff kijken of er verschil is. Heb je geen extra software nodig verder.

Ik wil wekelijks controleren of de bestanden nog exact gelijk zijn. Tussentijd worden bestanden dus gewijzigd of er komen nieuwe bestanden bij. Als ik dan zo'n hash laat draaien dan geeft hij foutmeldingen dat een hash van een bestand gewijzigd is omdat md5sum nog uitgaat van de hash voordat het bestand gewijzigd werd.

Ik zou dus een programma moeten hebben die steeds bij wijzigingen de hash berekend en automatisch opslaat in een bestand eventueel. Zo kan ik wekelijks controleren of er corrupte of gewijzigde bestanden zijn die ik niet heb gewijzigd (cryptoware).

[Wim-Bart]

Snap de use case niet. Waarom niet gewoon Robocopy in report mode?

[Microkid]

Goodsync kan dit ook. Stel folders in sync houden.

[Rubencs]

Ik gebruik hier Autover voor. Kan over de hele schrijf of op map specifiek. Kan ook aan versie beheer doen zodat je een x aantal oudere versies van je bestanden houdt. Maakt een kopie na een X aantal seconden na de verandering. Je kan hem volgens mij ook x keer per uur/dag laten werken.

[Jazzy]

@Eric_1993 Vergeet je niet om even terugkoppeling te geven?

Verder verplaats ik je topic even naar Client Software Algemeen, denk niet dat je vraag iets te maken heeft met Privacy & Beveiliging namelijk.

[Eric_1993]

Ik heb nog geen geschikte software gevonden. Autover ben ik sinds gisteren aan het proberen. Ik zal zeker een terugkoppeling geven mocht ik een ander software vinden of als Autover geschikt is voor mij, dan ga ik daarmee verder.

[SadisticPanda]

Snapraid? Alvorens een snapshot te maken kan je via snapraid diff checked welke bestanden die gaat veranderen