Diskspace verschillend tussen FreeBSD & Debian.

[xares]

Afgelopen weekend heb ik een WD MyBook live gekocht (nas).
Deze NAS draait op een kale Debian installatie.

Gisteren heb ik wat bestanden overgezet vanaf mijn pc.
Ook heb ik vannacht rsync geconfigureerd om alles te synchroniseren naar het datacenter.

Nu was de Rsync job vanmorgen klaar, echter is er een verschil van 5 Gb tussen de data op de MyBook NAS en de backup server in het datacenter.


MyBook NAS (Debian): 17 GB
Backup server (FreeBSD): 12 GB (rsync vanaf Mybook live)
Windows share: 11,9 GB

Wat kan dit verschil van 5 Gb "missende data" verklaren?
Of telt de MyBook NAS gewoon verkeerd?


Hoe ik de diskspace opvraag in Linux: du -h data
Windows gewoon de rechtermuisknop op de map in de share.

Rsync commando: rsync -avzH --delete --progress /DataVolume/shares/data rsync://host.nl/thuisnas/rsync

[CAPSLOCK2000]

Dus je data gaat van je PC naar de WD en van de WD weer naar de backupsever?
Backup en PC zijn even groot, dus er lijkt niks verloren te zijn gegaan. Het ligt dus aan hoe het wordt opgeslagen, of hoe het wordt weergegeven.

In theorie kan het nog dat je rsync is mis gegaan, en dat er dus data ontbreekt op je backup.
Draai rsync nog een keer en kijk of er iets veranderd (ik verwacht het eerlijk gezegd niet).

Heb je heel veel kleine files? (iets in de orde van een miljoen files van 100 bytes) Dat kan voor ovehead zorgen.

Misschien zijn er sparse files in het spel.

Probeer de --apparent-size optie van du eens.

[deadinspace]

Het kan per filesystem(-opties) nogal verschillen hoeveel overhead er is. Om welke filesystems gaat het?

[xares]

Als ik du -h --apparent-size gebruik kom ik wel netjes op 12 Gb uit.
Het zijn dus sparse files (echt nog nooit van gehoord).

Nu nog kijken hoe ik dit kan fixen en is het nodig om het te fixen of is het alleen maar zonde van je diskspace?

[webfreakz.nl]

Misschien een verschil in sector sizes op die hardeschijven?

[deadinspace]

xares schreef op dinsdag 27 augustus 2013 @ 22:43:
Als ik du -h --apparent-size gebruik kom ik wel netjes op 12 Gb uit.
Het zijn dus sparse files (echt nog nooit van gehoord).

Nee, het zijn dus geen sparse files, want daarmee zou de apparent size groter zijn.

Het komt hoogstwaarschijnlijk door het filesystem van je Mybook (zeker als het iets als vfat met idioot grote blocks is).

webfreakz.nl schreef op dinsdag 27 augustus 2013 @ 23:00:
Misschien een verschil in sector sizes op die hardeschijven?

blocksizes in de filesystems dan altijd nog.

(sector size is vrijwel altijd 512 bytes, en hoewel het tegenwoordig ook wel 4KB kan zijn maakt dat alsnog niets uit aangezien er vrijwel geen filesystem te vinden is met kleinere blocks dan 4KB)