[msnbot]gevaarlijk op forum???

[Paultje3181]

Bij ons op het forum zit soms een gast met het ip-adres 65.xxx.xxx.xxx Ik heb zojuist een tracert hierop uitgevoerd en het bleek dat deze hoorde bij msnbot.msn.com. Kan het zijn dat een bot aan het zoeken is op email-adressen? Of is dit een service van msn die onze pagina's aan het indexeren is? Oftewel, kan dit kwaad dat deze bot aanwezig is op ons forum?

[Rowanov]

Nee, die bot indexeert gewoon voor de searchenige.

[RM-rf]

MSN search, heeft zeer actieve bots ...

verder, als je spiders niet op je forum wilt hebben, moet je gewoon een robot.txt file op je server zetten..
http://www.searchengineworld.com/robots/robots_tutorial.htm
http://www.robotstxt.org/wc/robots.html

spambots houd je er niet mee tegen, maar de officiele spiders houden zich er wel aan ...
je kunt de crawl-delay van msnbot ook wat ager zetten

code:

User-Agent: msnbot 
Crawl-Delay: 60

(60 seconden vertraging bij het fetchen van een andere pagina ...)


echter ik mag hopen dat je mensen hun emailadres niet in ascii-text afbeeld op je site, anders maak je hen wel erg kwetsbaar voor misbruik door harvesters...

[ Voor 20% gewijzigd door RM-rf op 15-02-2005 15:14 ]

[Thijsmans]

Denk je dat MS zich bezighoudt met het harvesten van emailadressen? Zou ze niet goed staan als dat openbaar zou worden gemaakt. Bovendien, MS heeft genoeg geld om geharveste adressen te kopen, als ze dat zouden willen. Neen, ik gok op de MS-veriant van de Google-bot.

_{/edit: spuit 11}

[ Voor 5% gewijzigd door Thijsmans op 15-02-2005 15:12 ]

[XangadiX]

ja, het kreng zit op mijn sites en leeched iedere week wel een keer de site leeg; stom ding. Je zou denken dat ie zo langzamerhand de boel wel kent

[NoFearWizz]

XangadiX schreef op dinsdag 15 februari 2005 @ 15:13:
ja, het kreng zit op mijn sites en leeched iedere week wel een keer de site leeg; stom ding. Je zou denken dat ie zo langzamerhand de boel wel kent

onze site: http://www.spam.com

word elke dag bezocht door meer dan 3 of 4 verschillende bots

dus wees blij met 1x per week 1 bot

[ Voor 5% gewijzigd door Pelle op 16-02-2005 10:50 ]

[Pelle]

Niks om je druk om te maken dus