Websites overspoeld door bots

[Frogmen]

Zijn er meer mensen hier die websites beheren en het bezoek door bots heel erg ziet stijgen, het is niet dat je website plat gaat of zo maar er wordt wel heel veel gekeken.

Ik vraag het omdat ik eigenlijk de laatste maand heel veel activiteit zie en dan vooral vanuit China US en Duitsland. Maar ook vanuit heel veel andere random landen. Het zijn wel foto sites dus misschien extra interessant voor AI maar toch.

Vraag mij eigenlijk af kan je er iets tegen doen of is het een moment en laat maar even gaan. Wat zijn anderen hun ervaring?

[418O2]

Bots zorgen voor trage of niet bereikbare website

in dit topic staan wel goede tips

[Frogmen]

Ben met de robots.txt aan de gang gegaan maar het lijkt alsof die lijst steeds verder groeit. Persoonlijk zie ik de toegevoegde waarde er niet van, krijg ook het gevoel dat ze vooral informatie ook weer verkopen.

[418O2]

Frogmen schreef op dinsdag 11 augustus 2026 @ 13:55:
Ben met de robots.txt aan de gang gegaan maar het lijkt alsof die lijst steeds verder groeit. Persoonlijk zie ik de toegevoegde waarde er niet van, krijg ook het gevoel dat ze vooral informatie ook weer verkopen.

Ja, robots.txt is een aanwijzing voor partijen die respectvol willen zijn. Voor ai bots die maar gewoon hammeren heeft dat weinig zin. Beste is iets ervoor te zetten (Cloudflare bijvoorbeeld)

[Dracoz]

Heb dit opgelost door de website zelf achter Cloudflare te zetten, de WAF goed in te regelen en gebruik te maken van Crowdsec.

[Jazzy]

418O2 schreef op dinsdag 11 augustus 2026 @ 12:47:
Bots zorgen voor trage of niet bereikbare website

in dit topic staan wel goede tips

Modbreak:

Qua onderwerp kan dit zowel in SSC als IH, maar aangezien dat onderwerp recent is en precies over dit onderwerp gaat lijkt het me handiger om daar gewoon verder te gaan. Doen we deze even op slot.