Graag wil ik dat alleen index.php van mijn website in de zoekmachines terug te vinden is. Dus niet de subdirectories of /stylesheet.css.
Hoe kan ik dat het beste doen? Ik heb de volgende robots.txt op mijn domein geplaatst:
Hoe kan ik dat het beste doen? Ik heb de volgende robots.txt op mijn domein geplaatst:
Of kan ik beter de volgende META tag gebruiken?User-agent: *
Disallow: /afbeeldingen/
Disallow: /download/
(...)
Disallow: /stylesheet.css
<META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW">