wat zou de beste manier wezen om data achteraf toe te voegen aan een database ?
ik heb nu bv influx + grafana draaien maar ik wil eigenlijk data die ik verzameld heb (nu allemaal los)
combineren ..
bijvoorbeeld
stats uit RDD (toon) --> influxdb
stats uit nefit (rot interface) --> influxdb
Maar ook papieren data (emails enzo) omzetten naar "statistieken" .. kortom alle "domotica data" (gas/water/stroom verbruik)
ik verwacht niet dat ik alles terug kan halen en missende data tja dat is missend .. maar de puzzel lijkt me op zich wel intressant ..
Het belangrijkste voor mij is dat ik data van 4 jaar "verzamel" maar ook nieuwe data waarmee oude data enigsinds ontleed kan worden en daarbij ik ook nog wat commentaar kan geven .
met compressie bedoel ik data reduceren wat per minuut is gemeten reduceer tot per uur / maand oid ..
Converteren van RDD naar een SQL format is iets wat ik 1maal moet puzzelen maar dat is niet erg ..hierom laat ik ook "voorbeelden" weg .. het gaat me meer .. wat zou ik het beste kunnen doen en vooral waarom die aanpak ?
ik heb nu bv influx + grafana draaien maar ik wil eigenlijk data die ik verzameld heb (nu allemaal los)
combineren ..
bijvoorbeeld
stats uit RDD (toon) --> influxdb
stats uit nefit (rot interface) --> influxdb
Maar ook papieren data (emails enzo) omzetten naar "statistieken" .. kortom alle "domotica data" (gas/water/stroom verbruik)
ik verwacht niet dat ik alles terug kan halen en missende data tja dat is missend .. maar de puzzel lijkt me op zich wel intressant ..
Het belangrijkste voor mij is dat ik data van 4 jaar "verzamel" maar ook nieuwe data waarmee oude data enigsinds ontleed kan worden en daarbij ik ook nog wat commentaar kan geven .
met compressie bedoel ik data reduceren wat per minuut is gemeten reduceer tot per uur / maand oid ..
Converteren van RDD naar een SQL format is iets wat ik 1maal moet puzzelen maar dat is niet erg ..hierom laat ik ook "voorbeelden" weg .. het gaat me meer .. wat zou ik het beste kunnen doen en vooral waarom die aanpak ?
Tja vanalles