Snel veel data uploaden naar Google drive

[Burnd]

Mijn vraag
Is er een manier of een stukje software om heel veel documenten en foto's (ca 400GB in verschillende mappen en veel losse bestanden) in een keer te uploaden naar Google drive, ZONDER 'backup en Sync van Google'?

Ik heb 200mbit up en down glasvezel van KPN, maar als ik alles een nachtje laat draaien, lijkt er maar iets van 5 GB te zijn geupload. Met DU meter zie ik ook echt maar getalletjes van 10-30kbps (idd KBPS!)....Speedtest gedaan, en daar ligt het niet aan.
Ik had al mijn data staan (ca 400GB aan documenten en foto's) op mijn NAS en op STACK. STACK stopt, en mijn NAS is nagenoeg overleden, te oud en te traag geworden (een DS211). Omdat ik toch al aardig wat google apps gebruikte (NAS Is te traag geworden), leek google ONE met 2TB mij handig. En als dat goed werkt, hoef ik ook geen nieuwe nas meer aan te schaffen.


Relevante software en hardware die ik gebruik
Backup en Sync van Google of Google chrome

Wat ik al gevonden of geprobeerd heb
Verschillende manieren om 'Backup en Sync van Google' te versnellen, die instellingen staan allemaal goed.

[MOmax]

Google is qua snelheid mwah.
Heb je (lifetime) Pcloud overwogen?
Dan heb je eventueel WebDAV als optie hoewel de pcloud client sneller is.

[Voor 63% gewijzigd door MOmax op 03-02-2021 20:09]

[Burnd]

Ik heb destijds wat onderzoek gedaan naar verschillende diensten, maar ik heb net voor een heel jaar google ONE betaald. Dus ik wil eigenlijk niet overstappen naar een andere dienst. Ik snap je suggestie hoor, daar niet van.

[MOmax]

Je kan je geld terugvragen.

[Burnd]

Ga ik zeker doen als het niet goed gaat lukken. Maar wil ik wel eerst even proberen

[koentjuh1987]

heb je de maximale snelheid wel beschikbaar? in theorie heb ik bij ziggo ook 250 down maar door de wifi etc haal ik dat ook niet maximaal.. (neemt niet weg dat 30 kpbs wel erg traag is)

[Burnd]

ja speedtesten gedaan. Ik heb sowieso altijd wel 170-175Mbit. Dus de verbinding is het probleem niet.

[Hahn]

Je zegt "lijkt er maar iets van 5 GB te zijn geupload", wat overkomt als een aardige gok.

Test het uit. Pak een bestand waarvan je de grootte weet, en time hoe lang je erover doet om het te uploaden naar Google Drive. Dan kan je berekenen hoe snel je upload naar Google Drive echt is.

[Burnd]

Ik heb voldoende getest, het gaat gewoon te langzaam. Ik zoek naar een betere oplossing....Bovendien heb ik DU meter aan staan en kan ik letterlijk zien hoe snel het gaat.

[zzattack]

Rclone, werkt perfect.

[Hahn]

Je zou kunnen kijken of uploaden via een VPN sneller gaat, omdat je misschien door de locatie gelimiteerd wordt qua upload naar Google Drive.

Maar anders heb je twee opties: accepteren dat het uploaden flink lang zal duren, of een andere oplossing gebruiken waar je sneller naar kan uploaden.

[arvidbeheerder]

Upload is een bestand van 1000mb of zo om te testen hoe snel dat gaat (1000mb.bin even zoeken als testfile). Dan heb je een idee of de vertraging bij google ligt of omdat er zoveel kleine bestanden de lijn over moeten.

[ThinkPad]

arvidbeheerder schreef op woensdag 3 februari 2021 @ 20:41:
Upload is een bestand van 1000mb of zo om te testen hoe snel dat gaat (1000mb.bin even zoeken als testfile). Dan heb je een idee of de vertraging bij google ligt of omdat er zoveel kleine bestanden de lijn over moeten.

Best kans dat Google de hash daar al van kent en hij daardoor veel sneller dan normaal erop staat. Dan kun je beter zelf even een random file maken.

[Burnd]

zzattack schreef op woensdag 3 februari 2021 @ 20:38:
Rclone, werkt perfect.

Las ik ook al ergens, heeft dat wel een GUI?

ik ben kennelijk zo'n noob want ik weet niet hoe ik het moet installeren:

"This is a command line tool.

You need to open cmd.exe and run it from there."

geen idee welke commands ik moet invoeren om dit te installeren

[zzattack]

Geen GUI, maar de command line is vrij gemakkelijk. Je krijgt voor vrijwel iedere stap wat keuzes voorgeschoteld. Eerst een google drive remote aanmaken, en dan gewoon een sync van je lokale folder naar die 'remote' runnen. Ik kan grote files hier op linespeed naar google pompen (>110MB/s), dus dan ben je met een paar uurtjes wel klaar.

[Burnd]

zzattack schreef op woensdag 3 februari 2021 @ 20:47:
Geen GUI, maar de command line is vrij gemakkelijk. Je krijgt voor vrijwel iedere stap wat keuzes voorgeschoteld. Eerst een google drive remote aanmaken, en dan gewoon een sync van je lokale folder naar die 'remote' runnen. Ik kan grote files hier op linespeed naar google pompen (>110MB/s), dus dan ben je met een paar uurtjes wel klaar.

zal vast een goede oplossing zijn (las het ook al ergens), maar snap ik geen pepernoot van

Dat ga ik niet voor elkaar krijgen.

[g0tanks]

Burnd schreef op woensdag 3 februari 2021 @ 20:51:
[...]


zal vast een goede oplossing zijn (las het ook al ergens), maar snap ik geen pepernoot van

Dat ga ik niet voor elkaar krijgen.

Jammer dat je niet de tijd neemt om je te verdiepen in een oplossing die gewoon heel goed werkt. Er zijn zelfs video's op YouTube te vinden die stap voor stap uitleggen hoe je Rclone moet gebruiken:

[tafkaw]

Rclone config. Stappen volgen. Daarna rclone copy /foo/bar mount:dir

Niet heel lastig als je het 1x gedaan hebt. Rclone site helpt ook best goed.

[Burnd]

Toch maar eens proberen. Wel echt raar dat die eigen backup en Sync software van google zo brak is zeg. Had ik echt niet verwacht.

[Luchtbakker]

MOmax schreef op woensdag 3 februari 2021 @ 20:08:
Google is qua snelheid mwah.

Een beetje kort door de bocht. Het is net wat je upload. Ik heb vaak zat 250mbit upload gehaald bij Google. Maar als je +100.000 bestanden hebt verdeeld over 400gb dan zijn er maar weinig diensten die echt snel zijn.

[Burnd]

tafkaw schreef op woensdag 3 februari 2021 @ 21:03:
Rclone config. Stappen volgen. Daarna rclone copy /foo/bar mount:dir

Niet heel lastig als je het 1x gedaan hebt. Rclone site helpt ook best goed.

Ik heb google foto's ingesteld met rclone. Als ik de hele folder met alle foto's van mn externe HD wil uploaden, doe ik denk ik iets fout:

[i]C:\rclone>rclone copy D:\Google Drive\Fotos Google Fotos:/
Usage:
rclone copy source:path dest:path [flags]

Flags:
--create-empty-src-dirs Create empty source dirs on destination after copy
-h, --help help for copy

Use "rclone [command] --help" for more information about a command.
Use "rclone help flags" for to see the global flags.
Use "rclone help backends" for a list of supported services.
Command copy needs 2 arguments maximum: you provided 4 non flag arguments: ["D:\\Google" "Drive\\Fotos" "Google" "Fotos:/"]

C:\rclone>[i]

Google Fotos - zo heb ik google foto's genoemd in de config van rclone
D:\Google Drive\Fotos - is de dir waar alle foto's staan die ik wil uploaden naar google foto's
ik wil alle foto's in de root van google foto's hebben, ze staan nu allemaal in mappen ingedeeld op de externe hd (jaartal - evenement - foto's)

Wat doe ik fout?

[Voor 17% gewijzigd door Burnd op 04-02-2021 11:16]

[Cheesy]

Volgens mij omdat er spaties staan in je dir. Vast wel iemand hier die daar wat meer verstand van heeft dan ik.

[Burnd]

ah, dnek idd spaties in de dir van mijn foto's en in de naam van de dienst...

[Burnd]

Ik ben weer een stapje dichterbij maar ik krijg nu de voglende melding bij alle foto's:

" Failed to copy: can't upload files here"

[Burnd]

Lukt nu wel met een paar folders naar google drive en gaat idd sneller! 8Mbps-100Mbps. Maar dat komt dus ook doordat het veel (kleine) files zijn dat het wat langzamer gaat begrijp ik nu. In elk geval gaat dit vele malen sneller dan met die eigen software!

Naar welke directory moet ik het uploaden als ik foto's wil uploaden naar google foto's? Ik heb nu google drive en google foto's ingesteld met rclone.

[Farabi]

Ik heb hetzelfde probleem nu met 1gbit kpn. Heel trage upload naar google drive. Heeft iemand tips?

[F_J_K]

Farabi schreef op vrijdag 19 november 2021 @ 10:40:
Ik heb hetzelfde probleem nu met 1gbit kpn. Heel trage upload naar google drive. Heeft iemand tips?

Tip: begin met inhoudelijk reageren / ingaan op de tips die je hier en elders zag. En jouw concrete situatie beschrijven.