Googlebot eet bandwith forum

[HCForums]

• Adres van je forum: http://www.pimteuns.nl/phpBB2/index.php
  Wanneer ontstond het probleem? Vorige maand
  phpBB versie: 2.0.22
  
  Heb je onlangs iets verandert aan je forum? Ik heb een gastboek verwijderd ongeveer een maand geleden.
  Wat is het probleem?

Sinds vorige maand eet Googlebot veel bandwith van mijn forum. Ik heb op dit adres http://www.pimteuns.nl/phpBB2/index.php een forum geinstalleerd. Voor de rest staat er niks op de server, ik heb daaroom ook http://www.pimteuns.nl/ geforward naar mijn forum. In Augustus stond dit in mijn stats.

Googlebot 48+3 691.84 KB 31 Aug 2007 - 22:49

Hier is September.

Googlebot 16418+40 799.43 MB 30 Sep 2007 - 23:59

En dan nu twee dagen into Oktober.

Googlebot 3037+2 163.96 MB 02 Oct 2007 - 21:52

Ik zal zo dadelijk ook wel even mijn robots.txt plaatsen, maar die is gewoon standaard. Hopelijk kan iemand me helpen want mijn forum gaat zo niet lang overeind blijven met maar 1000mb bandwith.

Edit: Lijkt niet dat ik kan ontkomen aan Googlebot.

Gebruikers op dit forum: Google [Bot], HCForums en 0 gasten

[HCForums]

Ik heb van mijn provider een public_html map waarin ik alles kan plaatsen, daarin zit dus ook mijn phpBB2 map. Maar daar zit ook mijn robots.txt file, misschien dat ik die ook in de phpBB2 map moet plaatsen, daar heb ik geen verstand van.

Zo ziet ie uit.

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /editor/

Disallow: /help/

Disallow: /images/

Disallow: /includes/

Disallow: /language/

Disallow: /mambots/

Disallow: /media/

Disallow: /modules/

Disallow: /templates/

Disallow: /installation/

[svenn]

Ik zou eerst zelf met google gaan praten maak een google account aan, en zoek vervolgens naar "Webmasterhulpprogramma's" hier kun je zorgen dat google bot rustigger je site doorzoekt, werkt dat niet moet je idd google afhouden :'(

[HCForums]

Ik heb um op rustiger gezet, lijkt niet zoveel te helpen maar we zullen afwachten.

Wat hebben jullie eigenlijk in je robots.txt staan ten opzichte van Googlebot.

[Jan]

User-agent: * wil zeggen dat alle bots geblokkeerd worden.

Je kan dit uiteraard wel nog verfijnen voor enkel Google Bot

[special18]

Je hebt veel meer opties met robots.txt bestanden, waaronder ook de dagen wanneer hij moet terugkomen tot hoelang hij moet doen om per bestande naar de volgende mag gaan.

google is your frend