robots.txt, voor de zekerheid?

[Verwijderd]

Hey GoT'ers

Ik heb vanmiddag hier op GoT in de search gezocht voor antwoorden op gebruik van een robots.txt en ik heb er dankbaar gebruik van gemaakt maar ik vraag mij nog één ding af:

moet ik in de tag: <META NAME="robots" CONTENT="robots.txt">
de verwijzing naar die robots.txt invullen (zie het vetgedrukte) of kijkt zo'n zoekmachine automatisch in de root-dir van de webserver of er een robots.txt staat?

Tevens, is de de tag <meta name="revisit-after" content="14"> in orde of moet het woordje 'days' achter de 14 gezet worden?

Alvast bedankt!

[Verwijderd]

Zoeken met Google naar 'robots.txt tutorial'

Eerste link: http://www.searchengineworld.com/robots/robots_tutorial.htm

En de robots meta tag hoeft niet te verwijzen naar de robots.txt file, je moet in de meta tag alleen aangeven of de pagina wel of niet geindexeerd moet worden, en of er wel of niet naar de links in de pagina moet worden gekeken voor verdere indexing.

Verder is er echt genoeg informatie over meta tags en robots.txt te vinden.

Verder is het <meta name="revisit-after" content="14 days"/>