Vraag & Antwoord

Beveiliging & privacy

zoekrobots

2 antwoorden
  • Hoi! Sinds enkele weken wordt mijn site geteisterd door zoekrobots, o.a. van Google, MSN en nog enkele die mij weinig zeggen. Die zijn er mede verantwoordelijk voor dat halverwege de maand mijn gehuurde bandbreedte grotendeels op is. Ik heb een aantal maatregelen genomen; o.a. het opnemen van het wellicht bekende bestand robots.txt. Het lijkt erop dat de robots hier grotendeels lak aan hebben. Ik heb twee vragen: 1. Heeft iemand een succesvolle remedie hiertegen? 2. Is een ISP verantwoordelijk te stellen om oplossingen hiervoor te creeeren? Hopenlijk heeft iemand een oplossing!
  • Ja gewoon inderdaad de robot.txt goed maken en daarna afwachten tot ze een request ernaar doen. dan gaat het goed zelfs het KRENG van MSNBot luistert. Verder ben je in mijn inziens zelf verantwoordelijk voor het bezoek, dus ook van de bots (ik hoor graag van anderen als dat niet zo is)

Beantwoord deze vraag

Weet jij het antwoord op deze vraag? Registreer of meld je aan met je account

Dit is een gearchiveerde pagina. Antwoorden is niet meer mogelijk.