Pagina 1 van 1

Googlebot eet bandwith forum

Geplaatst: 03 okt 2007, 10:44
door HCForums
  • Adres van je forum: http://www.pimteuns.nl/phpBB2/index.php
    Wanneer ontstond het probleem? Vorige maand
    phpBB versie: 2.0.22

    Heb je onlangs iets verandert aan je forum? Ik heb een gastboek verwijderd ongeveer een maand geleden.
    Wat is het probleem?
Sinds vorige maand eet Googlebot veel bandwith van mijn forum. Ik heb op dit adres http://www.pimteuns.nl/phpBB2/index.php een forum geinstalleerd. Voor de rest staat er niks op de server, ik heb daaroom ook http://www.pimteuns.nl/ geforward naar mijn forum. In Augustus stond dit in mijn stats.

Googlebot 48+3 691.84 KB 31 Aug 2007 - 22:49

Hier is September.

Googlebot 16418+40 799.43 MB 30 Sep 2007 - 23:59

En dan nu twee dagen into Oktober.

Googlebot 3037+2 163.96 MB 02 Oct 2007 - 21:52

Ik zal zo dadelijk ook wel even mijn robots.txt plaatsen, maar die is gewoon standaard. Hopelijk kan iemand me helpen want mijn forum gaat zo niet lang overeind blijven met maar 1000mb bandwith.

Edit: Lijkt niet dat ik kan ontkomen aan Googlebot.

Gebruikers op dit forum: Google [Bot], HCForums en 0 gasten :roll: :P

Re: Googlebot eet bandwith forum

Geplaatst: 03 okt 2007, 10:58
door HCForums
Ik heb van mijn provider een public_html map waarin ik alles kan plaatsen, daarin zit dus ook mijn phpBB2 map. Maar daar zit ook mijn robots.txt file, misschien dat ik die ook in de phpBB2 map moet plaatsen, daar heb ik geen verstand van.

Zo ziet ie uit.

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /editor/

Disallow: /help/

Disallow: /images/

Disallow: /includes/

Disallow: /language/

Disallow: /mambots/

Disallow: /media/

Disallow: /modules/

Disallow: /templates/

Disallow: /installation/

Re: Googlebot eet bandwith forum

Geplaatst: 03 okt 2007, 11:37
door svenn
Ik zou eerst zelf met google gaan praten :) maak een google account aan, en zoek vervolgens naar "Webmasterhulpprogramma's" hier kun je zorgen dat google bot rustigger je site doorzoekt, werkt dat niet moet je idd google afhouden :'(

Re: Googlebot eet bandwith forum

Geplaatst: 03 okt 2007, 17:41
door HCForums
Ik heb um op rustiger gezet, lijkt niet zoveel te helpen maar we zullen afwachten.

Wat hebben jullie eigenlijk in je robots.txt staan ten opzichte van Googlebot.

Re: Googlebot eet bandwith forum

Geplaatst: 03 okt 2007, 19:16
door Jan
User-agent: * wil zeggen dat alle bots geblokkeerd worden.

Je kan dit uiteraard wel nog verfijnen voor enkel Google Bot

Re: Googlebot eet bandwith forum

Geplaatst: 04 okt 2007, 04:55
door special18
Je hebt veel meer opties met robots.txt bestanden, waaronder ook de dagen wanneer hij moet terugkomen tot hoelang hij moet doen om per bestande naar de volgende mag gaan.

google is your frend :)