SD kaart voor opnemen IP cam @ RPi geen goed idee?

[JT]

Ik neem camerabeelden op met de RPi 2 en ZoneMinder. Dat deed ik op een SD kaartje in de veronderstelling dat het wel een jaartje zou draaien ofzo maar na een maand heeft mijn kaartje (die ik eerder al heb gebruikt) bevat mijn SD kaartje ineens bad sectors volgens mij, TestDisk geeft "Warning: number of heads/cylinder mismatches". Booten lukt niet meer en met testdisk kan ik er in ieder geval een aantal files niet meer af halen. Dus het SD kaartje lijkt afgeschreven. Ik had verwacht dat het toch iets langer mee zou gaan en vind het bovendien vreemd dat je wel eea kan vinden over ZoneMinder @ RPi maar je hier niets over leest Wat is jullie ervaring hiermee?

Wat is behalve een HDD/SSD nog meer een duurzame optie om aan te sluiten op de RPi? Een HDD/SSD moet je nog steeds booten vanaf SD maar verder schrijven zal dan op de externe schijf gebeuren. Is alleen een relatief prijzige en energie-verbruikende optie eMMC is niet veel goedkoper dan een 2e hands SSD en ik heb geen idee of dat via een MicroSD adapter gaat werken als bootschijf.

[dcm360]

Ik heb wel een vergelijkbare ervaring, ik had een Pi die iedere paar seconden een foto opsloeg voor een timelapse, en dat heeft in een paar weken tijd een paar SD-kaartjes gekost.

Andere opties die ik me zo snel nog kan bedenken aan externe opslag zijn een fatsoenlijke (niet prutsgoedkope) USB-stick (eigenlijk gewoon hetzelfde als een externe HDD/SSD), of als het mogelijk is de data op een netwerkschijf opslaan. Al is die laatste optie met name interessant als je al de beschikking hebt over netwerkopslag, anders wordt het op de optie simpele netwerkschijf na al snel prijzig.

[Soldaatje]

Een oud laptop schijfje gebruiken, zou ik doen.
Of een nieuwe als het echt zuinig moet zijn.

[JT]

dcm360 schreef op dinsdag 26 januari 2016 @ 12:40:
Andere opties die ik me zo snel nog kan bedenken aan externe opslag zijn een fatsoenlijke (niet prutsgoedkope) USB-stick (eigenlijk gewoon hetzelfde als een externe HDD/SSD),

Is dat niet eerder hetzelfde als een SD kaart? Dan zou je op hetzelfde probleem uit komen...

of als het mogelijk is de data op een netwerkschijf opslaan. Al is die laatste optie met name interessant als je al de beschikking hebt over netwerkopslag, anders wordt het op de optie simpele netwerkschijf na al snel prijzig.

Sterker nog, ik heb een Synology die heel mooi kan opnemen enzo maar:
- Niet kan synchroniseren naar een webdav-mount
- Veel meer stroom verbruikt, al snel een 20w continu.

Ik gebruik de NAS niet zo heel vaak dus dat is een kostenpost om constant aan te laten De uitdaging was dus om iets op te zetten dat met minimaal stroomverbruik en geringe investering de beelden opneemt en naar een cloud synchroniseert.

Soldaatje schreef op dinsdag 26 januari 2016 @ 12:44:
Een oud laptop schijfje gebruiken, zou ik doen.
Of een nieuwe als het echt zuinig moet zijn.

Zat zelf te denken aan een 2e hands SSD'tje als ik niet tot een beter alternatief kan komen Lokaal hoeft er niet heel veel opgeslagen te worden; het meeste zal op de webdav-mount opgeslagen worden. Vervelende is alleen dat Zoneminder het niet aan kan als je de opslaglocatie voor de beelden aanpast dus eigenlijk wil je je Linux-installatie dan op de SSD.

[dcm360]

JT schreef op dinsdag 26 januari 2016 @ 12:49:
[...]

Is dat niet eerder hetzelfde als een SD kaart? Dan zou je op hetzelfde probleem uit komen...

Dat wisselt dus: goedkope USB-sticks zijn inderdaad vergelijkbaar met SD-kaartjes, maar de wat betere modellen gaan meer in de richting van een een SSD (en kunnen doen aan wear leveling, waar het met name om gaat).

[D-Three]

Hoe film je precies? Een continue stream?
Hoeveel MB heb je nodig? Eventueel een ramdrive aanmaken?

[JT]

dcm360 schreef op dinsdag 26 januari 2016 @ 12:53:
[...]

Dat wisselt dus: goedkope USB-sticks zijn inderdaad vergelijkbaar met SD-kaartjes, maar de wat betere modellen gaan meer in de richting van een een SSD (en kunnen doen aan wear leveling, waar het met name om gaat).

Ik heb er net op gezocht met Google en daar vind je inderdaad wel wat informatie maar het is me niet helder hoe ik een goede van een slechte stick kan onderscheiden. Enige wat ik heb gevonden is obv reviews. Zijn er, zoals met SSD's MLC vs SLC nog andere kenmerken op basis waarvan ik bepaal welke stick ik nodig heb?

D-Three schreef op dinsdag 26 januari 2016 @ 12:54:
Hoe film je precies? Een continue stream?
Hoeveel MB heb je nodig? Eventueel een ramdrive aanmaken?

ZoneMinder neemt van een stream jpegs. In mijn geval 3fps. Alles bij elkaar zo een 25-40gb per dag ofzo. ZoneMinder leegt de directory met beelden als deze bijna vol is; vanaf dat moment staan ze alleen nog op de webdavmount.

Een RPi 2 heeft maar 1gb RAM, houdt niet echt over om daar een RAMdrive mee te maken. Daarnaast bestaat het probleem dan nog steeds, al dan niet in mindere mate; ik schrijf het weg naar die webdav-mount en die heeft een lokale cache. Ik doe dat elke minuut met een cronjob, die files worden mar 350mb. Moet kleiner kunnen, daar doe ik onderzoek naar (tar slaat dezelfde files helaas meerdere keren op met update of append) maar voor nu moet je er dan dus vanuit gaan dat 1/3e van het geheugen dan opgeslokt wordt. Daarna zal alsnog naar de webdav-cache geschreven worden die zich doodleuk op de SD kaart bevindt Dus misschien gaat de kaart dan 2 keer zo lang mee; houdt nog niet over.

[Renault]

Ik lees nog nergens dat je het SD-kaartje hebt gecontroleerd: voor hetzelfde geld heb je een goedkoop kaartje wat in werkelijkheid niet de capaciteit heeft van wat het kaartje zelf meldt: dat heb ik zelfs met een in een goede winkel gekochte USB-stick gehad: Op de stick staat dat hij 32 GB is, de stick meldt dat zelf óók, maar bij 8 GB is het echt vol (ik probeerde er een 30 GB aan willekeurige bestanden op te zetten).
Teruggebracht, ander identiek exemplaar hetzelfde: toen hebben ze het in de winkel zelf uitgeprobeerd en hetzelfde gemerkt: de hele partij is toen teruggestuurd en ik heb mijn geld teruggekregen.

Moraal van het verhaal: controleer nieuwe SD-kaartjes en USB-sticks door er bestanden op te zetten tot het beweerde maximum. Als dat zonder fouten gaat en je ziet ook alles staan, is de kaart/stick goed.

Omdat jij het kaartje al eerder hebt gebruikt, zou het in orde kunnen zijn, maar dat lees ik nergens.
Wellicht toch even controleren?

[D-Three]

JT schreef op dinsdag 26 januari 2016 @ 13:42:
[...]

ZoneMinder neemt van een stream jpegs. In mijn geval 3fps. Alles bij elkaar zo een 25-40gb per dag ofzo. ZoneMinder leegt de directory met beelden als deze bijna vol is; vanaf dat moment staan ze alleen nog op de webdavmount.

Een RPi 2 heeft maar 1gb RAM, houdt niet echt over om daar een RAMdrive mee te maken. Daarnaast bestaat het probleem dan nog steeds, al dan niet in mindere mate; ik schrijf het weg naar die webdav-mount en die heeft een lokale cache. Ik doe dat elke minuut met een cronjob, die files worden mar 350mb. Moet kleiner kunnen, daar doe ik onderzoek naar (tar slaat dezelfde files helaas meerdere keren op met update of append) maar voor nu moet je er dan dus vanuit gaan dat 1/3e van het geheugen dan opgeslokt wordt. Daarna zal alsnog naar de webdav-cache geschreven worden die zich doodleuk op de SD kaart bevindt Dus misschien gaat de kaart dan 2 keer zo lang mee; houdt nog niet over.

De originele RPi had maar 256 MB

24h op 24h (= 86400 seconden) met 3 fps en een filesize van 0,5 MB is dat toch 129.600 MB.
Afgerond vul je een kaartje van 32 GB daar 4 keer per dag mee. Als we er van uit gaan dat er wear levelling is en dat een kaartje 100.000 write cycles heeft, dan zou het kaartje 25.000 dagen moet mee gaan?

Maar dit is puur theoretisch. Je zegt zelf dat het eerder 25 GB tot 40 GB is. Een pak lager, volgens mij dus geen wear levelling En misschien is dat het probleem, als je iedere minut die 350 MB wist? Kan je niet zelfs een vorm van wear levelling toepassen door de "oude files" niet te wissen maar dit pas te doen als de SD kaart bijna vol is? En dan de locale cache op een ramdrive te zetten? Daarnaast ook een een kwaliteits sd-kaart te nemen. Industrial grade sd-kaarten bijvoorbeeld, laten bijvoorbeeld 1 of 2 miljoen write-cycles toe. Waarschijnlijk hebben die dus wel een ingebouwde wear-levelling maar ook een ander type geheugen (SLC) ten opzichte van de meeste commerciële kaartjes. Het hoeft natuurlijk geen industrial grade te zijn maar er zit wel degelijks verschil tussen een goedkope noname kaart en een duurdere variant.

[ Voor 4% gewijzigd door D-Three op 26-01-2016 19:56 ]

[SMSfreakie]

goede usb stick.. ( of 2 ) mijn Phison 128GB usb SSD.. heeft last van enorme vertragingen als je hem continu belast met write en delete acties.. heeft die een poosje de tijd gehad om na een delete te "rusten" dan is ze weer op volle snelheid..

mischien dat je dat met 2 goedkope usb sticks ook kan doen? eerst stick A vol schrijven.. dan beginnen op B.. zorgen dat A gesynct is en dan A wissen.. en pas weer vol proppen als B vol is?

[marcop82]

Renault schreef op dinsdag 26 januari 2016 @ 16:18:
Op de stick staat dat hij 32 GB is, de stick meldt dat zelf óók, maar bij 8 GB is het echt vol (ik probeerde er een 30 GB aan willekeurige bestanden op te zetten).

Dit klinkt als namaakkaartjes, niet defecte kaartjes.
Ik ben ook op zoek naar een USB stick met een SSD controller die ook continu belast kan worden, niet tot zijn volle potentieel maar voldoende voor video opname. Als de stick UASP ondersteunt, is de kans groot dat het een SSD achtige stick is.

Een betaalbare variant lijkt de SanDisk Extreme te zijn:
http://www.tweaktown.com/...h-drive-review/index.html
https://tweakers.net/prod...treme-usb-30-flash-drive/

Deze heeft dezelfde controller als de SanDisk ReadyCache SSD, wat zou moeten inhouden dat er garbage collection op zit. Wat je wel zeker wilt doen is onderpartitioneren, eventueel 75 of zelfs 50% zodat de SSD niet snel versleten is.

[jeroen3]

D-Three schreef op dinsdag 26 januari 2016 @ 19:54:
24h op 24h (= 86400 seconden) met 3 fps en een filesize van 0,5 MB is dat toch 129.600 MB.
Afgerond vul je een kaartje van 32 GB daar 4 keer per dag mee. Als we er van uit gaan dat er wear levelling is en dat een kaartje 100.000 write cycles heeft, dan zou het kaartje 25.000 dagen moet mee gaan?

Dan ga je er vanuit dat het kaartje wear-leveling toepast. Dat is zeker niet altijd het geval.

[D-Three]

jeroen3 schreef op woensdag 27 januari 2016 @ 10:26:
[...]

Dan ga je er vanuit dat het kaartje wear-leveling toepast. Dat is zeker niet altijd het geval.

Wel een selectieve quote, graag nog een paar zinnen verder lezen

[JT]

D-Three schreef op dinsdag 26 januari 2016 @ 19:54:
[...]

De originele RPi had maar 256 MB

24h op 24h (= 86400 seconden) met 3 fps en een filesize van 0,5 MB is dat toch 129.600 MB.

Hoe kom je op 0,5mb per pic? Zijn 1280x720 jpegjes. 50-75kb per stuk.

Afgerond vul je een kaartje van 32 GB daar 4 keer per dag mee. Als we er van uit gaan dat er wear levelling is en dat een kaartje 100.000 write cycles heeft, dan zou het kaartje 25.000 dagen moet mee gaan?

Maar dit is puur theoretisch.

Precies

Je zegt zelf dat het eerder 25 GB tot 40 GB is. Een pak lager, volgens mij dus geen wear levelling En misschien is dat het probleem, als je iedere minut die 350 MB wist? Kan je niet zelfs een vorm van wear levelling toepassen door de "oude files" niet te wissen maar dit pas te doen als de SD kaart bijna vol is? En dan de locale cache op een ramdrive te zetten?

Sowieso verwijdert ZoneMinder pas de bestanden als de schijf (de sdkaart dus) 95% vol is. Alles in de cloud zetten wanneer het bijna vol is streeft voor mij het doel voorbij: bij inbraak, wat er ook meegenomen wordt, altijd beelden van de inbrekers.

Daarnaast ook een een kwaliteits sd-kaart te nemen. Industrial grade sd-kaarten bijvoorbeeld, laten bijvoorbeeld 1 of 2 miljoen write-cycles toe. Waarschijnlijk hebben die dus wel een ingebouwde wear-levelling maar ook een ander type geheugen (SLC) ten opzichte van de meeste commerciële kaartjes. Het hoeft natuurlijk geen industrial grade te zijn maar er zit wel degelijks verschil tussen een goedkope noname kaart en een duurdere variant.

Dit was een SanDisk kaartje en niet de goedkoopste Waar zit eigenlijk het verschil in tussen micro sd en USB stick, los van het formaat?

Renault schreef op dinsdag 26 januari 2016 @ 16:18:
Omdat jij het kaartje al eerder hebt gebruikt, zou het in orde kunnen zijn, maar dat lees ik nergens.
Wellicht toch even controleren?

Heb het kaartje voorheen al vol gehad en zonder problemen gebruikt

SMSfreakie schreef op dinsdag 26 januari 2016 @ 20:07:
goede usb stick.. ( of 2 ) mijn Phison 128GB usb SSD.. heeft last van enorme vertragingen als je hem continu belast met write en delete acties.. heeft die een poosje de tijd gehad om na een delete te "rusten" dan is ze weer op volle snelheid..

mischien dat je dat met 2 goedkope usb sticks ook kan doen? eerst stick A vol schrijven.. dan beginnen op B.. zorgen dat A gesynct is en dan A wissen.. en pas weer vol proppen als B vol is?

Deleten gebeurt enkele keren per dag; lijkt me dus niet een heel grote belasting? Of zie ik dat nu verkeerd?

marcop82 schreef op woensdag 27 januari 2016 @ 10:00:
[...]

Dit klinkt als namaakkaartjes, niet defecte kaartjes.
Ik ben ook op zoek naar een USB stick met een SSD controller die ook continu belast kan worden, niet tot zijn volle potentieel maar voldoende voor video opname. Als de stick UASP ondersteunt, is de kans groot dat het een SSD achtige stick is.

Een betaalbare variant lijkt de SanDisk Extreme te zijn:
http://www.tweaktown.com/...h-drive-review/index.html
https://tweakers.net/prod...treme-usb-30-flash-drive/

Deze heeft dezelfde controller als de SanDisk ReadyCache SSD, wat zou moeten inhouden dat er garbage collection op zit. Wat je wel zeker wilt doen is onderpartitioneren, eventueel 75 of zelfs 50% zodat de SSD niet snel versleten is.

Die hou ik in m'n achterhoofd, klinkt interessant.