Op deze website gebruiken we cookies om content en advertenties te personaliseren, om functies voor social media te bieden en om ons websiteverkeer te analyseren. Ook delen we informatie over uw gebruik van onze site met onze partners voor social media, adverteren en analyse. Deze partners kunnen deze gegevens combineren met andere informatie die u aan ze heeft verstrekt of die ze hebben verzameld op basis van uw gebruik van hun services. Meer informatie.

Akkoord

Vraag & Antwoord

Beveiliging & privacy

zoekrobots

Anoniem
generaal
2 antwoorden
  • Hoi!
    Sinds enkele weken wordt mijn site geteisterd door zoekrobots, o.a. van Google, MSN en nog enkele die mij weinig zeggen. Die zijn er mede verantwoordelijk voor dat halverwege de maand mijn gehuurde bandbreedte grotendeels op is. Ik heb een aantal maatregelen genomen; o.a. het opnemen van het wellicht bekende bestand robots.txt. Het lijkt erop dat de robots hier grotendeels lak aan hebben.
    Ik heb twee vragen:
    1. Heeft iemand een succesvolle remedie hiertegen?
    2. Is een ISP verantwoordelijk te stellen om oplossingen hiervoor te creeeren?

    Hopenlijk heeft iemand een oplossing!
  • Ja gewoon inderdaad de robot.txt goed maken en daarna afwachten tot ze een request ernaar doen. dan gaat het goed zelfs het KRENG van MSNBot luistert.
    Verder ben je in mijn inziens zelf verantwoordelijk voor het bezoek, dus ook van de bots (ik hoor graag van anderen als dat niet zo is)

Beantwoord deze vraag

Dit is een gearchiveerde pagina. Antwoorden is niet meer mogelijk.