Samen Tweakblogs archiveren

[Mentalist]

Update:
https://archive.org/details/tweakblogs

Archief met losse HTML van alle blogposts op Tweakblogs.net, blog homepages, blog archiefpagina's, de Tweakblogs.net homepage en de overzichtpagina van alle weblogs. Geen afbeeldingen, smilies, CSS, JS etc. URLs zijn niet herschreven, dus browsen binnen het archief (b.v. van een blog homepage naar een post) werkt niet.

Meer dan 9000 blogposts (en reacties daarop) in 36MB!

Voor Wayback Machine, zie fopjurist in "Samen Tweakblogs archiveren".

---

Originele post:

Tweakblogs gaat verdwijnen, waarschijnlijk binnen 24 uur. Zie We nemen afscheid van Tweakblogs en .plan: We nemen afscheid van Tweakblogs.

Kunnen we op z'n minst iedere /blog/ homepage in de Wikipedia: Wayback Machine stoppen?

Ik ben begonnen aan de eerste 100 maar dit ga ik alleen nooit redden. Vrijwilligers?

Instructies:

1. Volg link
2. Is er een snapshot en is die recenter dan de meest recente post? Sla stap 3 over en ga naar de volgende link.
3. Is er geen snapshot of is de snapshot ouder dan de meest recente post op dat blog? Druk op "Save this URL in the Wayback Machine" en druk op "Save page". Sluit de tab/browser niet tot je ziet "A snapshot was captured"!

Ik heb de lijst opgedeeld in sublijsten van 100 blogs. Als je aan een sublijst werkt, laat het dan weten en zet erbij of je boven- of onderaan de sublijst begint. (zo kunnen twee tweakers aan dezelfde sublijst werken in omgekeerde richting) Als je een kleinere sublijst wil kan dat ook, dan deel ik de lijst gewoon verder op. Geef dan gewoon aan aan welke range je wil werken.

Update: okay, ik denk dat ik alle blog homepages heb. Dat is natuurlijk niet heel Tweakblogs maar iig iets.

• datapoint
• suitit
• itons
• misterr
• weblog
• heli0s
• autopwn
• gamebuster
• 0xfeedface
• 11supplier
• 12345dan
• hahn
• nerd-chan
• lankhoar
• eenblog
• phusebox
• liberque
• virtualite
• anijshagel
• abandoned-xylophone
• fixernl
• little-penguin
• silentsimon
• acm
• adion
• melvinvroomshootz
• aerschtuner
• zpaz
• africa
• afvalzak
• ahrnuld
• airx
• alains
• albantar
• aliexpress-meuk
• alphaw0lph
• milkysways
• skullboy
• ammer
• amplified123
• djoenez
• andernieuws
• andre
• andrieslouw
• anteros
• applemac
• arator
• arl
• arokh
• ashy
• atlex
• atomstar
• auto660
• chariri
• blaz
• axewi
• azbest
• b2blog
• xan52
• bacolan
• balk
• knutselsjoerd
• bamslam
• bananenspin
• endless
• bdk9001
• knutselblog
• bastv
• bat266
• beatboxx
• somerenv
• tomino
• beittil
• janonderwater
• revan-che
• nas-t
• biersteker
• sacrebleu
• lauwai
• blackbirds-blog
• xblackbytesx
• bladeblog
• bliepo
• blizzcon
• gekunsteld
• battler
• mol99
• erwin26
• blogging
• savetheworld
• benbaba
• dhr-soulslayer
• lightmanone
• jj93
• luca
• degrotevriendelijkereus
• mincedmeat
• logistiek
• silent7
• mielemuis
• lip
• nightorius
• blokker
• mark184
• bmwi3
• bobdetweaker
• eljay
• bolk
• bonzo
• bouli
• braveorjuststupid
• kywr
• brent
• brick5492
• technimania
• bubbles
• paulhulsebosch
• businessra
• littlebear
• catch22
• cblog
• cda441
• fjux
• cheatah
• cheesecakenl
• chiefxl
• chiel340
• iwin
• chocoball
• cipher
• awbos
• clblogs
• clementl
• klimaataflaat
• coconutcares
• codebeat-kladblok
• codecaster
• glamour
• confusion
• zeef
• ruudjah
• compuklooien
• mveijden
• concepts
• javascript-devv
• consolefreak
• convirion
• cr35
• crazy-blog
• weejewel
• crisp
• croga
• cruz
• cx12reviews
• cyberstalker
• cyberdrain
• d4ng3r
• daanb14
• daanno
• daemon-angel
• damarcus
• dannyroodbol
• basmusic
• kjweb
• henkie-jan
• mrc4nl
• marabunta2048
• pathogen
• plainside-s
• degebetenfruit
• dead-pixel
• blogvanmarvin
• gotd
• mededeler
• frozen
• discussions
• houtenklaas
• titan-fox
• pclinde
• senaxx
• pprs
• natasdiamon
• mr-eghuizen
• deem
• dekaasboer
• dbee
• dennusb
• dergatsjev
• nhaarman
• flard
• cdiepenheimduursma
• dimens
• omejoyo
• wok
• deneusbeer
• dodgereviews
• dograver
• possible
• dorgaldir
• downstar
• dre
• dreeke-fixed
• dreku88000
• drm
• droefsnoet
• durandal
• eb42
• eaglecreek
• moizie
• sk313t0r
• iplusplus
• cryptocrap
• xtresis
• detmer
• jaapn
• marketingnerd
• cyphax
• jterpstra
• elazz
• electrom
• eeo
• superkris
• elmoxx
• emile
• empy
• en-route
• enfer
• enthusiasm
• enzomatrix
• eosfoto
• equator
• evanraalte
• erikvanpaassen
• erkens
• robinhood
• hippocampus
• rooieduvel
• francoisvdv
• freeaqingme
• exista
• ezblog
• f1k
• falcon10
• faraga
• fateofaercaen
• femme
• filenox
• fixel
• flake
• flextacular
• flimovic
• nitrox-infinity
• fnuikend
• fgj
• dedsec85
• foritain
• lakker
• hackingdutchman
• framaster
• on5sl
• hmail
• devoorkant
• drievandaag
• jaapengel79
• fulltime-nerd
• funk-e
• futurethoughts
• gielus
• gadgetfacts
• qtee
• gaffelmod
• game-insights
• gearbullet
• liefdes-verdriet
• nedra
• fawn
• genetx
• geniusdex
• gerjannn
• gertjuhjan
• nilltris
• metbas
• jorrit91
• cio
• pripyat
• giem
• glaanieboy
• gvanderwindt
• godjira
• gonadan
• gouden
• rokas
• greenbird
• wurst
• grimaceofdespair
• gumball
• gzfan
• haan
• thomasrijkers
• tedades
• hkuit
• havana
• letatcest
• kaesve
• warmaster88
• heintjeput
• hellbeast
• vonhenkel
• duurtlang
• hersenpan
• theo
• boombes
• fdm-hw
• hertog6
• bobthebuilder
• nooblifting
• prutserblog
• supertheiz
• hetnest
• badpunk
• millman
• leeuwendeel
• bazs2000
• redhat
• janjeen
• highguy
• hklm
• hmmbob
• mickshobbyspul
• higaphix
• watdachtjijnou
• hoite
• holygame
• pwigle
• hooglander1
• hopperdepop
• pcdealer
• mumblings
• hupske
• ihatecomputers
• iplaygamesonyoutube
• masthahacker
• yalopa
• hauss
• iisschots
• fundix
• tweakez
• imelon
• imick
• zandkastelen
• infotracer
• keeper
• hnnrgh
• interaction-on-rails
• vistu
• lennyz1988
• ipodkiller
• ik222
• isv
• dcm360
• itstuff
• robtweaks
• against
• dotjack
• keymaker
• jantje2000
• jawsnl
• japaveh
• d-jeff
• jejking
• jeroenert
• jetspiking
• mcaran
• jaysblog
• jism
• joukejanhottenga
• jkratos
• joen
• joep
• joerii
• johan9711
• johnydoe
• jolly-jumper
• joostlek
• jordyvane
• eijsden
• junkie81
• legaltech
• jvann
• k-jay
• kaasplank
• superflipnl
• kami124
• kamikaze
• kaw
• kecin
• ipv6
• kerberos84
• ketho
• kevjoe
• kidjansen
• kipppertje
• kiswum
• kju
• klusthuis
• copywizard
• koewaffle
• koeienstieren
• koffie
• yofresh
• boudewijn
• kosty
• kraz
• krisp
• krvabo
• schizoduckie
• larsg
• lasharor
• lauwsa
• marcpeeters
• lcp
• bene
• leefbare-toekomst
• leendertv
• mrepicostsrecover
• len
• spacenerd
• ram0n
• linksquest
• linuzz
• lordsnow
• loreom
• lswaardtweaks
• luctia
• lukosje
• luuk1983
• luxan
• exphy
• m3taal
• dotmac
• madmark
• mandark
• marcsblog
• marcotm
• deblaauwn
• neothor
• rusman
• mrlammers
• martin149
• martinbeentjes
• martinspire
• marvinjames
• mastadizzy
• mastermaarten
• matroosoft
• mauritso
• maxxie85
• mbb
• mbv
• mcboom
• mcdronkz
• meangry
• csmed
• ultrapc
• segil
• melek-taus
• meltedforest
• m--h
• meukblog
• mexel
• howimetyourmotherboard
• milosonator
• mick1990
• micrographstories
• enduria
• maus
• ikblogop
• emiel1984
• bas80
• infant
• gekei
• elephtera
• ultimo
• ben-jamin
• morgothg
• ps3gamer91
• lethandrill
• trokken
• mijnsmarthome
• dima2005
• neevedr
• jandm
• rrx
• centropy
• mimic
• mindwarp
• minorannoyances
• misterblue
• mittam
• mobileaddiction
• ziezevliegen
• mobyrick
• mojo
• curlymo
• chronoworx
• morax
• mortumxl
• mrfloris
• mrtnptrs
• mrwahloh
• mrwolf
• msd
• mtc
• rhyaehar
• cnrandomblog
• gerco
• ssj3gohan
• getto
• wizzkizz
• whatson
• mylist
• audipower
• naarden4ever
• najgeetsrev
• nanochip
• neowebs
• armageddons-programmeer-hoekje
• niektweak
• niekleair
• tarin
• walteij
• nldr
• blondetux
• nilsepils
• nme
• nnk
• no-wuckas
• tbpnl
• coltrui
• notepad-in-the-cloud
• notes
• notyetbritish
• novux
• e-vix
• metzie
• nutopia
• nutral
• obatblog
• obowe
• oerdond3r
• oizopower
• firefly112
• onlyin-s-pain
• donkere-modus
• onok
• nik
• oostenrijkse-nederlander
• olaf
• op-voorraad
• dezeblog
• optimel-limoen
• yaad
• outerspace
• spongerobie
• teacup
• p-storm
• error404
• pascalandandrea
• patriot
• patrock
• rukapul
• creepy
• swampy
• nympho
• pedorsposts
• martijnpeek
• peetz0r
• perkouw
• paitor
• petervanakelyen
• ghost
• philos31
• time-lapse
• spider007
• pieterkempy
• shockwaveomega
• pinna
• piratepi
• pixellbox
• pixelmagic
• pixeltje
• pjerry
• pkwarts
• veerboot
• llevering
• plasmawolf
• toolskyn
• plofkip
• ploink
• nousewhatsoever
• polopolo
• kidde
• fwest98
• marientjuh
• projecten
• prx
• pven
• peewee
• qwerty-273
• r3m3d7
• r3nc0n
• radiokies
• ragingr2
• zeropatient
• ralpje
• ram-g-man
• mrmrmr
• random-encounters
• gropah
• biosilico
• pwutsblog
• s117
• killzone
• raserian
• pataar
• randomize
• rand-muse
• rannasha
• amanoo
• rapture
• rayhvh
• reb87
• redfox314
• redsandro
• remyblok
• renedis
• renegade
• resin3dprintnpaint
• retrogamingprojects
• whizzi
• retrogamecouch
• oguz286
• return1
• reveller
• reviewblog
• ln-blog
• proace
• rhapsody
• richh
• rightorwrong
• rhynix
• twr
• ro3lie
• road-to-istanbul
• roadrunner84
• rob
• robiii
• robin
• robkazoe
• robobeat
• rod
• roel911
• roelant
• alphyraz
• rohaantje
• rommel
• amdboy1983
• rootgamer
• rubez
• rubinski
• rubmania
• run-climb-hike
• runelaenen
• rupie
• ruthger92
• rvanlaak
• samsungnotes
• sand0rf
• sanderev
• schlumpie
• scorpie
• scythe-maait
• intrepidity
• sfranken
• damanseb
• shellghost
• shadow
• sharvinz
• waldpyk
• remco-k
• sdekraa
• sinergyx
• ske
• slapstick
• whocarez
• slavy
• slc
• altijdslimmer
• smiba
• brilsmurfffje
• chem
• soepblog
• sojournal
• solarteamtwente
• soldaatje
• solved
• stoney3k
• things
• wastedwords
• sorcix
• souheil
• soullessportal
• spockz
• springuin
• startups
• stefan
• stefandeg
• stephs
• stephanvierkant
• stereohead
• stijnos1991
• stin00
• stm
• strykeforce
• blockchainedu
• eagle00789
• stuiterveer
• subbass
• swelson
• swords
• synthetica
• taekevanderkooi
• tech-treasures
• swis
• xzerod
• techrvw
• johnny
• teddy
• 3x3
• telegraphroad
• temp00
• tentimes
• s22ultraladers
• teun-v
• menn
• khaine
• the-acg
• roamingzombie
• kronolith
• thedivision
• flyingbaldman
• eguna
• gurd
• hax0r
• theinternets
• ichat
• stof-tot-nadenken
• arch-it-ect
• zfs
• the-priest-nl
• scenography
• thefal
• thefes
• thelion01
• thijsje66
• thijsmans
• gekbeesje
• bestblogever
• thisworld
• thomashuxley
• thorbe
• iekozz
• thrillseeka
• thy-king
• twilightprince
• ddc
• timonvs
• tweakblog
• xos
• spelvoud77
• joeribijlsma
• titom
• tmdevil
• tokkesuitlaatklep
• tomspreekt
• tomba
• lunatic
• tommasso
• toppe
• torrentus
• trab78
• cppse
• true
• tsurany
• tunderklus
• tunefuldjmike
• muisje901
• atticus182
• anoniem103538
• anoniem110237
• anoniem110497
• anoniem114389
• anoniem134818
• anoniem136863
• anoniem138244
• anoniem16536
• anoniem171072
• anoniem183266
• anoniem183415
• anoniem187577
• anoniem206413
• anoniem233202
• anoniem243511
• anoniem257524
• anoniem260554
• anoniem261163
• anoniem261542
• anoniem278298
• anoniem282840
• anoniem294494
• anoniem303530
• anoniem325463
• anoniem356260
• anoniem368013
• anoniem544923
• anoniem63996
• anoniem64119
• anoniem67950
• 3dprintingfan
• mvds
• vaporized
• xeldiablo690
• witlof
• dylan111111
• elhopo
• markusnl
• maxxi
• existenznl
• afkickkliniek
• s0epkip
• jasperjanssen
• twylight
• typefreak
• tarkinitis
• uitlaatklep
• unglaublich
• uniciteit
• vanaalten
• uruk-hai
• tomatenzijnlekker
• arnoudw
• niekvanprooijen
• twicejr
• spekkie88
• megaflix
• soundsling
• lenwar
• variousity
• venxir
• zuiderzeestraatweg
• ronald8
• smuggler
• dennis1109
• teleurstelling
• grumpyoldman
• vexxonmaakteengame
• victordehollander
• vincentnaarnicaragua
• vdevos
• jerrixbe
• sjaaksken
• briatore
• quad
• mcgryphon
• j03r1v037
• wallie
• wannabe-nerd
• warcow
• watdehack
• thedon46
• iichel
• toppertje
• weareborg
• alon
• purplemadness
• jaaap
• webventures
• webgnome
• marzman
• roundlet
• icter-tje
• piebas
• quindor
• widodh
• wiethoofd
• wijnands
• darkasantion
• wildewouter
• godofal
• wimmel
• stijnb
• witeken
• wistjedat
• omgwtfbbq11einz
• woekele
• wom
• gsx-man
• world-citizen
• danfoss
• worstenfabriek
• woutf
• pcprutser
• woutervoorschot
• woutifier
• dex
• martijnabel
• xepos
• xfeverr
• xleeuwx
• xmega
• xnpu
• xp7amrkr
• yalden
• yellowcube
• yero
• denson
• yoeri
• yousql
• ydjager
• vinnux
• zenety
• zepman
• zerfox
• zeurblog
• zflash
• zinofonzin
• zippernyan
• znorkus
• snuffel
• zoepersooi
• metrostuff
• alucardu
• zekerpixels
• zte-blade
• home

[Blokker_1999]

Grote probleem lijkt mij de rate limiting te zijn. Als die er niet was, dan was die lijst relatief snel af te werken.

[Mentalist]

Blokker_1999 schreef op zaterdag 31 december 2022 @ 17:49:
Grote probleem lijkt mij de rate limiting te zijn. Als die er niet was, dan was die lijst relatief snel af te werken.

Daarom zoek ik vrijwilligers.

Ik heb het idee dat inloggen op archive.org de ratelimit verhoogt.

Eerste 100 blog homepages zijn gedaan.

[skimine]

Misschien dat iets als dit een mogelijkheid is: Archive Web Pages and Websites in Bulk with Python.

[Mentalist]

skimine schreef op zaterdag 31 december 2022 @ 17:59:
Misschien dat iets als dit een mogelijkheid is: Archive Web Pages and Websites in Bulk with Python.

Botweg alles saven kan wel, maar een deel is al aanwezig. En https://archive.org/wayba...ovic.tweakblogs.net/blog/ lijkt onbetrouwbaar om dat te checken. (op https://web.archive.org/w...ovic.tweakblogs.net/blog/ is te zien dat flimovic wèl beschikbaar is)

Ben nu halverwege. Redelijk geestdodend dit.

[Marco-Peters]

Ik snap het doel eigenlijk niet? Als de desbetreffende Tweakers zo graag de inhoud van hun Tweakblog hadden willen behouden, dan hadden ze allang Ctrl+C kunnen doen en (handmatig) overzetten op WordPress. Wellicht willen sommige ook gewoon vergeten worden?

[SomerenV]

Marco-Peters schreef op zaterdag 31 december 2022 @ 23:50:
Ik snap het doel eigenlijk niet? Als de desbetreffende Tweakers zo graag de inhoud van hun Tweakblog hadden willen behouden, dan hadden ze allang Ctrl+C kunnen doen en (handmatig) overzetten op WordPress. Wellicht willen sommige ook gewoon vergeten worden?

Mijn blog hoef ik niet perse bewaard te houden, al ga ik de inhoud wel downloaden. Zitten misschien toch wat dingetjes tussen die wel het bewaren waard zijn. Overigens ben ik wel een eigen blog gestart, voortbordurend op mijn laatste paar blogs op Tweakblogs.

Wel chapeau voor de inspanning de blogs te bewaren aan @Mentalist, en ik snap jou Marco, maar ik denk dat veel bloggers (vooral de oudere garde) niet de moeite gaan of willen nemen hun spul te archiveren en opnieuw ergens openbaar te maken. Er zit echter best wat nuttig spul tussen waarbij het zonde is als het ophoudt te bestaan. Ik weet ook wel dat het meeste van mijn blogs prima voor altijd vergeten kan worden, maar misschien vinden sommigen het alsnog van waarde om bepaalde content terug te kunnen vinden. Da's niet aan mij om dat te beoordelen denk ik. Lastige kwestie in ieder geval.

[Mentalist]

Marco-Peters schreef op zaterdag 31 december 2022 @ 23:50:
Ik snap het doel eigenlijk niet? Als de desbetreffende Tweakers zo graag de inhoud van hun Tweakblog hadden willen behouden, dan hadden ze allang Ctrl+C kunnen doen en (handmatig) overzetten op WordPress. Wellicht willen sommige ook gewoon vergeten worden?

De eigenaren kunnen hun data als JSON downloaden daarvoor. Maar dat helpt niet tegen link rot.

Wikipedia: Archive Team

According to Jason Scott, "Archive Team was started out of anger and a feeling of powerlessness, this feeling that we were letting companies decide for us what was going to survive and what was going to die." Scott continues, "it's not our job to figure out what's valuable, to figure out what's meaningful. We work by three virtues: rage, paranoia and kleptomania."

Tweakblogs zie ik wel als een stukje historie van Tweakers, en de kwaliteit is relatief hoog. En hoe kijk je daar over 20 jaar op terug? Dat weet je gewoon nog niet. Ik doorzoek soms oude computer/gametijdschriften op archive.org, vaak een bron van informatie die nergens anders meer te vinden is. En de papieren tijdschriften heeft bijna iedereen natuurlijk allang weggemikt.

Het is ook niet achterlijk veel data, alleen de ratelimits maken het moeilijk.

[ Voor 11% gewijzigd door Mentalist op 01-01-2023 03:37 ]

[Marco-Peters]

Mentalist schreef op zondag 1 januari 2023 @ 03:32:
[...]

De eigenaren kunnen hun data als JSON downloaden daarvoor. Maar dat helpt niet tegen link rot.

Dat valt toch niet te voorkomen? Als ik straks in Google een Tweakblog vindt, dan beland ik toch op een pagina met een afbeelding van een serverrack

Het is vrij normaal dat na verloop van tijd pagina's offline gehaald worden, kost ja allemaal ruimte op een server. Dus waarom moet het over 50 jaar dan nog steeds online staan? Tegen die tijd is de kennis die werd gedeeld op Tweakblogs sowieso ver verouderd: wellicht dat de Europese Unie dan ook al uit elkaar gevallen is? Wie zal het weten?

Daarom is het prima dat oude content op de eeuwige jachtvelden verdwijnt: de wereld veranderd immer. Misschien bestaat Tweakers.net over 50 jaar ook niet meer?

[Blokker_1999]

Marco-Peters schreef op zaterdag 31 december 2022 @ 23:50:
Ik snap het doel eigenlijk niet? Als de desbetreffende Tweakers zo graag de inhoud van hun Tweakblog hadden willen behouden, dan hadden ze allang Ctrl+C kunnen doen en (handmatig) overzetten op WordPress. Wellicht willen sommige ook gewoon vergeten worden?

Ik begrijp waarom Tweakers onze blogs heeft geelimineerd hoewel ik zelf liever gezien had dat ze hadden blijven bestaan, al is het maar read-only. Er stonden enkele blogposts van mij op waar ik wel wat tijd in gestoken heb en de juweeltjes van bijvoorbeeld Mux zijn nu ook niet meer leesbaar. Maar ik ga ze niet overzetten naar een andere bloggingsite. Niemand zal mijn blog kennen, weinigen zullen hem ontdekken en je weet niet wat voor publiek je daar gaat tegenkomen.

[Marco-Peters]

Blokker_1999 schreef op zondag 1 januari 2023 @ 11:19:
[...]
Niemand zal mijn blog kennen, weinigen zullen hem ontdekken en je weet niet wat voor publiek je daar gaat tegenkomen.

Daarmee geef je indirect aan, dat het schrijven van een weblog puur voor de aandacht is? Want als iets oprecht leuk vind, dan zou het weinig moeten uitmaken of je 10 views krijgt of 1000 views. Je zou je weblog trouwens wel in je signature kunnen zetten

Al staat Tweakers het niet toe om hier je eigen weblog te promoten, aangezien het als concurrent gezien wordt voor hun eigen platform.

[Hahn]

Marco-Peters schreef op zondag 1 januari 2023 @ 12:01:
[...]

Al staat Tweakers het niet toe om hier je eigen weblog te promoten, aangezien het als concurrent gezien wordt voor hun eigen platform.

Als het relevant is, mag je best iemand verwijzen naar een blogpost die je hebt geschreven die iemand leuk en/of behulpzaam kan vinden.

[ Voor 29% gewijzigd door Hahn op 01-01-2023 12:08 ]

[Blokker_1999]

Marco-Peters schreef op zondag 1 januari 2023 @ 12:01:
[...]

Daarmee geef je indirect aan, dat het schrijven van een weblog puur voor de aandacht is? Want als iets oprecht leuk vind, dan zou het weinig moeten uitmaken of je 10 views krijgt of 1000 views. Je zou je weblog trouwens wel in je signature kunnen zetten

Al staat Tweakers het niet toe om hier je eigen weblog te promoten, aangezien het als concurrent gezien wordt voor hun eigen platform.

De interactie met anderen is een deel van wat het leuk maakt. De tijd investeren kon omdat je wist dat er een publiek aanwezig is waarvan je wist dat een deel interesse heeft in die materie. Als er amper iemand is om enige interactie mee te hebben, als het amper gelezen wordt, waarom dan tijd steken in het uitschrijven en publiceren? Het opzoekwerk voor de eigen kennis te verruimen verbeter je niet met de samenvatting nog eens neer te schrijven, ik toch niet.

[Freeaqingme]

@Mentalist goed bezig! Is er een reden dat je het niet meer uitgesplitst hebt? Ik zou er ook met alle plezier wat archiveren. Bij voorkeur dan wel de hele blogs, en niet alleen de homepage.

[Puch-Maxi]

@Mentalist Thanks! Heb nog een dode link gefixt in mijn tweakblogje. Mag ik vragen hoe je alle bestaande tweakblogs hebt gevonden? Ik ben namelijk geen sitemap tegengekomen .

[Mentalist]

Puch-Maxi schreef op maandag 2 januari 2023 @ 16:09:
@Mentalist Thanks! Heb nog even dode link gefixt in mijn tweakblogje. Mag ik vragen hoe je alle bestaande tweakblogs hebt gevonden? Ik ben namelijk geen sitemap tegengekomen .

https://tweakblogs.net/?allWeblogs=1

Freeaqingme schreef op maandag 2 januari 2023 @ 10:56:
@Mentalist goed bezig! Is er een reden dat je het niet meer uitgesplitst hebt?

Omdat 100 stuks al redelijk snel gaat. Ik open 20 tabs (open één link met de middelste muisknop, tab ctrl+enter tab ctrl+enter tab ctrl+enter) en dan ga ik door de tabs heen, opslaan waar geen snapshot aanwezig is, meest recente post controleren bij een oudere snapshot en overslaan bij een recente snapshot. 5x herhalen en je hebt er 100 gedaan.

Ik zou er ook met alle plezier wat archiveren. Bij voorkeur dan wel de hele blogs, en niet alleen de homepage.

Is er een UBB-code om content op te klappen? Die lijst is namelijk nogal lang, 9250 links, 1,4MB aan UBB code.

[AW_Bos]

Gewoon de quote-tag gebruiken?

[Mentalist]

AW_Bos schreef op maandag 2 januari 2023 @ 16:53:
Gewoon de quote-tag gebruiken?

De inhoud is te lang na conversie: 1,735,824 karakters na conversie, 1,670,289 karakters meer dan mogelijk

[RobIII]

Zet 't even op pastebin / als gist op github ofzo dan

Overigens (en op persoonlijke titel): goed bezig!
Het zo zo veel makkelijker zijn als iedereen z'n tweakblog-export.json ergens kon uploaden (en nog beter als daar alle comments bij hadden gezeten, maarja, stomme AVG enzo). Ik had eigenlijk gehoopt in m'n kerstvakantie een systeempje op te kunnen zetten waar je deze json kon uploaden en er een read-only versie online kwam te staan, maar daar ben ik niet aan toegekomen.

Maar ik wil iig iedereen adviseren zijn/haar export bestand goed te bewaren / backuppen. Wie weet maak ik er ooit nog iets voor.

[ Voor 82% gewijzigd door RobIII op 02-01-2023 17:15 ]

[Mentalist]

RobIII schreef op maandag 2 januari 2023 @ 16:58:
Zet 't even op pastebin / als gist op github ofzo dan

(Overigens: goed bezig!)

Op pastebin tript direct het abuse filter. Zal wel komen doordat sommige titels het woord "fuck" bevatten.

Dit lijkt te werken: https://www95.zippyshare.com/v/x9FVLTQI/file.html

[RobIII]

Mentalist schreef op maandag 2 januari 2023 @ 17:03:
[...]

Op pastebin tript direct het abuse filter. Zal wel komen doordat sommige titels het woord "fuck" bevatten.

Dit lijkt te werken: https://www95.zippyshare.com/v/x9FVLTQI/file.html

https://gist.githubuserco...30240d4f40/tweakblogs.txt
Beter dan zo'n gare filesharing site

Ik heb zelf overigens een CTRL+S gedaan op elke pagina van mijn blog en dat in een mapje gegooid; dat was met 31 pagina's nog wel te doen en dus moet dat voor het gros ook wel te doen zijn. Even 50 als "geestdodende beginiknietaan irritatiefactor" genomen zijn er dan nog 37 personen die iets beters moeten verzinnen; als je die grens op 100 legt blijven er nog iets meer dan een dozijn over.

Aantal blogs per user (gedestilleerd uit bovenstaande file):

1 adion
1 afkickkliniek
1 airx
1 albantar
1 alphyraz
1 andre
1 anoniem67950
1 anoniem110237
1 anoniem110497
1 anoniem138244
1 anoniem183266
1 anoniem183415
1 anoniem261542
1 anoniem278298
1 arator
1 ashy
1 axewi
1 azbest
1 b2blog
1 bastv
1 ben-jamin
1 blaz
1 bliepo
1 blizzcon
1 blockchainedu
1 bmwi3
1 bobdetweaker
1 bobthebuilder
1 brent
1 briatore
1 chariri
1 cheatah
1 cheesecakenl
1 coconutcares
1 consolefreak
1 cppse
1 cr35
1 crazy-blog
1 creepy
1 croga
1 curlymo
1 cyphax
1 damanseb
1 danfoss
1 datapoint
1 deem
1 deneusbeer
1 denson
1 detmer
1 dex
1 dimens
1 djoenez
1 donkere-modus
1 dotjack
1 dre
1 droefsnoet
1 durandal
1 dylan111111
1 e-vix
1 eaglecreek
1 eb42
1 electrom
1 en-route
1 enduria
1 enthusiasm
1 exista
1 ezblog
1 f1k
1 fawn
1 fixernl
1 flimovic
1 flyingbaldman
1 fulltime-nerd
1 futurethoughts
1 gekei
1 getto
1 giem
1 gonadan
1 gotd
1 gropah
1 gurd
1 gzfan
1 heintjeput
1 hellbeast
1 higaphix
1 hmail
1 hnnrgh
1 hoite
1 hooglander1
1 hopperdepop
1 houtenklaas
1 howimetyourmotherboard
1 hupske
1 iekozz
1 ihatecomputers
1 iichel
1 ik222
1 imelon
1 imick
1 interaction-on-rails
1 iplusplus
1 ipodkiller
1 j03r1v037
1 jandm
1 jawsnl
1 jeroenert
1 jerrixbe
1 joep
1 joeribijlsma
1 johnydoe
1 jolly-jumper
1 jorrit91
1 jterpstra
1 jvann
1 kaesve
1 kami124
1 kamikaze
1 kaw
1 khaine
1 kidjansen
1 kipppertje
1 kju
1 kjweb
1 koeienstieren
1 kraz
1 kronolith
1 krvabo
1 lauwsa
1 lennyz1988
1 lethandrill
1 linuzz
1 luxan
1 madmark
1 marketingnerd
1 martijnabel
1 martin149
1 marvinjames
1 mastermaarten
1 mauritso
1 maus
1 maxxi
1 maxxie85
1 mbv
1 meangry
1 meukblog
1 mielemuis
1 milkysways
1 mimic
1 mincedmeat
1 mindwarp
1 mol99
1 morax
1 mr-eghuizen
1 mrfloris
1 mrwolf
1 mtc
1 mumblings
1 nanochip
1 natasdiamon
1 neevedr
1 neowebs
1 nhaarman
1 nik
1 nilsepils
1 nnk
1 nutopia
1 nympho
1 oerdond3r
1 paitor
1 patrock
1 petervanakelyen
1 piebas
1 pieterkempy
1 pixellbox
1 ploink
1 polopolo
1 pprs
1 prx
1 purplemadness
1 pwigle
1 pwutsblog
1 r3nc0n
1 random-encounters
1 rapture
1 rayhvh
1 redhat
1 resin3dprintnpaint
1 rhynix
1 richh
1 ro3lie
1 roamingzombie
1 robtweaks
1 rokas
1 ronald8
1 rooieduvel
1 rubez
1 rubmania
1 run-climb-hike
1 ruthger92
1 rvanlaak
1 s0epkip
1 s22ultraladers
1 s117
1 samsungnotes
1 senaxx
1 shadow
1 ske
1 skullboy
1 smiba
1 smuggler
1 solved
1 sorcix
1 souheil
1 spelvoud77
1 spongerobie
1 stefan
1 stuiterveer
1 subbass
1 superflipnl
1 swords
1 synthetica
1 teleurstelling
1 temp00
1 tentimes
1 the-priest-nl
1 thedon46
1 thisworld
1 thrillseeka
1 titom
1 tomino
1 tomspreekt
1 trab78
1 trokken
1 true
1 tsurany
1 tweakez
1 twylight
1 uitlaatklep
1 ultimo
1 vanaalten
1 venxir
1 vexxonmaakteengame
1 victordehollander
1 virtualite
1 vonhenkel
1 wannabe-nerd
1 watdehack
1 whatson
1 widodh
1 wistjedat
1 witlof
1 woekele
1 woutf
1 woutifier
1 wurst
1 xblackbytesx
1 xeldiablo690
1 xepos
1 xnpu
1 yofresh
1 zeef
1 zenety
1 zerfox
1 zflash
1 znorkus
1 zte-blade
2 abandoned-xylophone
2 africa
2 afvalzak
2 alphaw0lph
2 anijshagel
2 anoniem103538
2 anoniem136863
2 anoniem171072
2 anoniem187577
2 anoniem257524
2 anoniem260554
2 anoniem294494
2 arokh
2 bene
2 blogvanmarvin
2 boombes
2 cblog
2 cda441
2 clementl
2 cnrandomblog
2 cryptocrap
2 cx12reviews
2 cyberdrain
2 d4ng3r
2 d-jeff
2 dannyroodbol
2 darkasantion
2 degebetenfruit
2 dezeblog
2 discussions
2 dograver
2 dreku88000
2 drievandaag
2 emile
2 empy
2 erwin26
2 evanraalte
2 faraga
2 fateofaercaen
2 fixel
2 fjux
2 framaster
2 francoisvdv
2 gekbeesje
2 gerjannn
2 godjira
2 grumpyoldman
2 gumball
2 haan
2 hersenpan
2 hmmbob
2 infotracer
2 iplaygamesonyoutube
2 itons
2 iwin
2 jantje2000
2 japaveh
2 joerii
2 joostlek
2 jordyvane
2 junkie81
2 kaasplank
2 ketho
2 kevjoe
2 klimaataflaat
2 kywr
2 lankhoar
2 leendertv
2 lenwar
2 lip
2 llevering
2 marcsblog
2 mastadizzy
2 mcboom
2 melvinvroomshootz
2 metbas
2 mexel
2 mick1990
2 mickshobbyspul
2 minorannoyances
2 mobileaddiction
2 moizie
2 najgeetsrev
2 nedra
2 nerd-chan
2 notyetbritish
2 oguz286
2 olaf
2 omgwtfbbq11einz
2 onlyin-s-pain
2 op-voorraad
2 pataar
2 paulhulsebosch
2 perkouw
2 pripyat
2 ram0n
2 ram-g-man
2 reb87
2 redfox314
2 remco-k
2 renedis
2 revan-che
2 road-to-istanbul
2 roel911
2 rrx
2 schizoduckie
2 segil
2 shockwaveomega
2 sinergyx
2 solarteamtwente
2 soullessportal
2 stijnos1991
2 taekevanderkooi
2 tarkinitis
2 tech-treasures
2 thomasrijkers
2 thorbe
2 titan-fox
2 tomatenzijnlekker
2 tweakblog
2 twicejr
2 unglaublich
2 vaporized
2 vdevos
2 vinnux
2 worstenfabriek
2 xfeverr
2 xmega
2 xos
2 xzerod
2 yero
2 zeurblog
2 zinofonzin
2 zippernyan
2 zoepersooi
3 3x3
3 against
3 ahrnuld
3 alon
3 andrieslouw
3 anoniem282840
3 anoniem356260
3 anteros
3 audipower
3 bananenspin
3 bas80
3 benbaba
3 bouli
3 catch22
3 centropy
3 chronoworx
3 cio
3 cyberstalker
3 daanb14
3 daanno
3 damarcus
3 dima2005
3 eagle00789
3 eljay
3 emiel1984
3 endless
3 enfer
3 gekunsteld
3 genetx
3 geniusdex
3 godofal
3 gvanderwindt
3 hauss
3 hippocampus
3 holygame
3 ichat
3 icter-tje
3 intrepidity
3 ipv6
3 isv
3 janjeen
3 jj93
3 keeper
3 lakker
3 lightmanone
3 lordsnow
3 luctia
3 lukosje
3 marzman
3 masthahacker
3 melek-taus
3 mittam
3 mojo
3 mortumxl
3 mrepicostsrecover
3 mrwahloh
3 nightorius
3 obatblog
3 oizopower
3 pathogen
3 pcprutser
3 peetz0r
3 peewee
3 phusebox
3 pixelmagic
3 pkwarts
3 plainside-s
3 possible
3 proace
3 ps3gamer91
3 quindor
3 r3m3d7
3 radiokies
3 raserian
3 reveller
3 rommel
3 roundlet
3 rubinski
3 silentsimon
3 sjaaksken
3 sk313t0r
3 spacenerd
3 stijnb
3 stm
3 superkris
3 swis
3 tarin
3 technimania
3 tedades
3 tokkesuitlaatklep
3 tommasso
3 toolskyn
3 toppertje
3 typefreak
3 uniciteit
3 vincentnaarnicaragua
3 vistu
3 wallie
3 warcow
3 warmaster88
3 wildewouter
3 xtresis
3 yaad
3 yalopa
4 12345dan
4 altijdslimmer
4 anoniem261163
4 bacolan
4 bamslam
4 bazs2000
4 beittil
4 biersteker
4 biosilico
4 bladeblog
4 braveorjuststupid
4 cdiepenheimduursma
4 chem
4 chiel340
4 cipher
4 compuklooien
4 copywizard
4 dennis1109
4 dorgaldir
4 falcon10
4 firefly112
4 flard
4 fnuikend
4 gaffelmod
4 gouden
4 gsx-man
4 henkie-jan
4 itstuff
4 jaapengel79
4 jaapn
4 jaysblog
4 joukejanhottenga
4 kerberos84
4 lasharor
4 lauwai
4 littlebear
4 loreom
4 lswaardtweaks
4 marabunta2048
4 mbb
4 meltedforest
4 metrostuff
4 mvds
4 mylist
4 nas-t
4 niekvanprooijen
4 nldr
4 no-wuckas
4 nooblifting
4 omejoyo
4 p-storm
4 pixeltje
4 qtee
4 quad
4 rannasha
4 retrogamingprojects
4 return1
4 rightorwrong
4 robkazoe
4 soundsling
4 stefandeg
4 stoney3k
4 supertheiz
4 tbpnl
4 the-acg
4 things
4 tmdevil
4 torrentus
4 tunefuldjmike
4 walteij
4 weblog
4 zekerpixels
4 zpaz
5 0xfeedface
5 anoniem16536
5 anoniem64119
5 anoniem325463
5 anoniem544923
5 badpunk
5 blogging
5 clblogs
5 concepts
5 convirion
5 ddc
5 elhopo
5 exphy
5 flextacular
5 fundix
5 gadgetfacts
5 hax0r
5 hertog6
5 jaaap
5 jasperjanssen
5 jetspiking
5 jism
5 johan9711
5 klusthuis
5 kosty
5 lcp
5 leeuwendeel
5 len
5 marientjuh
5 mcdronkz
5 menn
5 mrmrmr
5 mrtnptrs
5 muisje901
5 naarden4ever
5 notepad-in-the-cloud
5 piratepi
5 prutserblog
5 pven
5 rukapul
5 slapstick
5 slc
5 springuin
5 stereohead
5 suitit
5 teun-v
5 thedivision
5 thefes
5 theinternets
5 theo
5 ultrapc
5 wastedwords
5 watdachtjijnou
6 alains
6 anoniem134818
6 anoniem303530
6 applemac
6 armageddons-programmeer-hoekje
6 atticus182
6 balk
6 blondetux
6 bonzo
6 brick5492
6 cruz
6 csmed
6 deblaauwn
6 dotmac
6 dreeke-fixed
6 eosfoto
6 flake
6 freeaqingme
6 heli0s
6 hkuit
6 javascript-devv
6 jkratos
6 koewaffle
6 leefbare-toekomst
6 little-penguin
6 marcpeeters
6 martinspire
6 misterr
6 nme
6 novux
6 nutral
6 patriot
6 philos31
6 pjerry
6 schlumpie
6 sharvinz
6 spekkie88
6 techrvw
6 thefal
6 twilightprince
6 uruk-hai
6 whocarez
6 wizzkizz
7 anoniem368013
7 autopwn
7 degrotevriendelijkereus
7 grimaceofdespair
7 iisschots
7 kidde
7 lunatic
7 mveijden
7 outerspace
7 projecten
7 ralpje
7 robobeat
7 sacrebleu
7 soldaatje
7 telegraphroad
7 thelion01
7 waldpyk
7 webventures
7 yousql
7 zfs
8 11supplier
8 amplified123
8 anoniem206413
8 anoniem243511
8 auto660
8 bolk
8 dedsec85
8 eijsden
8 elephtera
8 erikvanpaassen
8 gertjuhjan
8 glaanieboy
8 hetnest
8 hklm
8 liefdes-verdriet
8 mandark
8 obowe
8 rand-muse
8 remyblok
8 sand0rf
8 scenography
8 sojournal
8 spockz
8 strykeforce
8 woutervoorschot
8 xleeuwx
8 ziezevliegen
9 amanoo
9 bestblogever
9 blackbirds-blog
9 equator
9 home
9 johnny
9 killzone
9 knutselsjoerd
9 larsg
9 logistiek
9 martijnpeek
9 mcgryphon
9 mobyrick
9 mrlammers
9 on5sl
9 pcdealer
9 pedorsposts
9 sdekraa
9 slavy
9 stof-tot-nadenken
9 thijsmans
9 timonvs
9 wijnands
9 wimmel
10 3dprintingfan
10 dergatsjev
10 eenblog
10 existenznl
10 gearbullet
10 gielus
10 ikblogop
10 keymaker
10 legaltech
10 liberque
10 ln-blog
10 markusnl
10 millman
10 misterblue
10 nousewhatsoever
10 plofkip
10 roadrunner84
10 sfranken
10 thomashuxley
10 webgnome
10 zuiderzeestraatweg
11 basmusic
11 dhr-soulslayer
11 fdm-hw
11 gerco
11 janonderwater
11 kecin
11 luca
11 scorpie
11 spider007
11 teacup
11 witeken
11 zandkastelen
12 aerschtuner
12 anoniem233202
12 brilsmurfffje
12 businessra
12 chocoball
12 daemon-angel
12 devoorkant
12 downstar
12 eguna
12 error404
12 micrographstories
12 milosonator
12 morgothg
12 roelant
12 stephs
13 dcm360
13 fgj
13 m--h
13 mark184
13 megaflix
13 notes
13 pinna
13 snuffel
13 tunderklus
13 twr
14 bat266
14 greenbird
14 linksquest
14 matroosoft
14 rhyaehar
14 runelaenen
14 rusman
14 yellowcube
15 ammer
15 dekaasboer
15 elmoxx
15 k-jay
15 neothor
15 niekleair
15 rupie
15 scythe-maait
15 swampy
15 world-citizen
15 xan52
16 qwerty-273
16 tomba
17 femme
17 pclinde
17 savetheworld
18 elazz
18 rob
19 alucardu
19 anoniem114389
19 beatboxx
19 game-insights
19 martinbeentjes
19 mededeler
19 oostenrijkse-nederlander
20 eeo
20 highguy
20 rohaantje
20 stephanvierkant
20 teddy
20 toppe
21 arl
21 battler
21 havana
21 niektweak
21 ruudjah
22 acm
22 funk-e
22 koffie
22 metzie
22 msd
22 onok
23 codebeat-kladblok
23 mcaran
23 robinhood
24 dennusb
24 ghost
24 infant
25 erkens
25 m3taal
25 mijnsmarthome
25 rhapsody
25 rod
26 amdboy1983
26 andernieuws
26 fwest98
27 bdk9001
27 dead-pixel
27 veerboot
28 dbee
28 nilltris
28 weareborg
29 atomstar
30 aliexpress-meuk
31 redsandro
31 renegade
31 robiii
31 xp7amrkr
32 swelson
34 awbos
34 duurtlang
35 boudewijn
35 thy-king
36 mrc4nl
36 silent7
36 soepblog
37 ragingr2
37 wok
38 randomize
40 hackingdutchman
40 krisp
42 glamour
42 pascalandandrea
43 drm
43 thijsje66
43 time-lapse
43 zepman
44 jejking
45 whizzi
45 wom
46 hahn
46 variousity
46 yalden
46 ydjager
48 luuk1983
49 startups
50 confusion
50 filenox
51 atlex
52 arch-it-ect
52 joen
55 coltrui
57 arnoudw
57 nitrox-infinity
59 weejewel
59 yoeri
60 reviewblog
64 shellghost
67 enzomatrix
68 letatcest
70 rootgamer
71 crisp
71 plasmawolf
76 anoniem63996
83 blokker
90 codecaster
93 marcotm
94 wiethoofd
98 sanderev
100 retrogamecouch
101 robin
111 frozen
111 kiswum
113 gamebuster
132 bubbles
147 chiefxl
149 knutselblog
154 foritain
155 dodgereviews
164 somerenv
173 optimel-limoen
212 ssj3gohan
275 zeropatient

[ Voor 103% gewijzigd door RobIII op 02-01-2023 18:07 ]

[Mentalist]

https://archive.org/details/tweakblogs

Archief met losse HTML van alle blogposts op Tweakblogs.net, blog homepages, blog archiefpagina's, de Tweakblogs.net homepage en de overzichtpagina van alle weblogs. Geen afbeeldingen, smilies, CSS, JS etc. URLs zijn niet herschreven, dus browsen binnen het archief (b.v. van een blog homepage naar een post) werkt niet.

Meer dan 9000 blogposts (en reacties daarop) in 36MB!

edit:
En ja ik weet dat httrack de aangewezen tool hiervoor is, dat was het eerste wat ik probeerde. Httrack bleef zich misdragen, crawlen ging eindeloos door en het sloeg talloze HTTP 429 pagina's op. Schoot niet op. Dus ik heb een halfautomatische custom crawler gemaakt om iig de HTML binnen te hengelen.

[ Voor 29% gewijzigd door Mentalist op 03-01-2023 22:40 ]

[fopjurist]

Ik moet terugdenken aan Hyves, die website is via een groot project gescraped en toegevoegd, en de pagina's kun je nu opvragen op web.archive.org. Dat scrapen kun je zelf doen maar dan komt de content niet op web.archive.org tussen de andere content. In de FAQ van het ArchiveTeam staan instructies over het archiveren van een kleine site (tot een paar honderdduizend pagina's) via een IRC bot. Ik heb daar een verzoek tot archiveren neergelegd en ze zijn ermee bezig.

Op http://archivebot.com/3 kun je de voortgang momenteel zien (filter op 'tweakblogs')

[ Voor 12% gewijzigd door fopjurist op 03-01-2023 20:54 ]