[Linux] Mirror website dmv http protocol

Pagina: 1
Acties:

  • capedro
  • Registratie: Oktober 2000
  • Laatst online: 20-05 09:15
Ik moet een website gaan mirror-en.... echter de sitebeheerder kan mij geen ftp access geven... :(

Er zijn programmaatjes (zoals Webwhacker) die dmv het HTTP Protocol een site naar binnen trekken. Echter zijn er onder linux ook van dat soort programmaatjes... het is de bedoeling dat ik um dan in een crontabje 1 keer in de 24u mirrort.

Heb al wel op freshmeat gekeken!

My weblog


  • Creepy
  • Registratie: Juni 2001
  • Laatst online: 14-08 23:03

Creepy

Tactical Espionage Splatterer

kijk eens naar wget.. Deze kan "recursief" URLs binnen halen.

"I had a problem, I solved it with regular expressions. Now I have two problems". That's shows a lack of appreciation for regular expressions: "I know have _star_ problems" --Kevlin Henney


  • capedro
  • Registratie: Oktober 2000
  • Laatst online: 20-05 09:15
Op donderdag 27 juni 2002 16:59 schreef Creepy het volgende:
kijk eens naar wget.. Deze kan "recursief" URLs binnen halen.
Sorry... daar had ik niet aangedacht.... ik gebruik meestal sitecopy ;)

Thnx hij werkt!

My weblog


  • balk
  • Registratie: Januari 2000
  • Laatst online: 19:55
pas wel op met wget, voor je het weet heb je een backup van het hele internet lokaal staan :P
vrij krachtige recurse optie....