Enorme datatraffic toename

jzn · Bericht door **jzn** » 27 mar 2007, 13:26

Support Template

Wat is het probleem?
Traffic toename
Wanneer ontstond het probleem?
Sinds een maand
Adres van je forum:
http://www.psycholoog.net/forum
phpBB versie:
2.0.22

Overige opmerkingen:

De data traffic van het forum is van 0,5 GB in een maand tijd toegenomen tot 2,5 GB per dag:
http://psycholoog.net/plesk-stat/webstat/

In de admin gedeelte zie ik telkens één IP:
66.249.65.108 wat overeenkomt met Crawl-66-249-65-108.googlebot.com in webalizer.

Er staat ook een enorme traffic hoeveelheid achter, ik zie heel veel google bots. Het kost me handen vol geld die google bot, als dat het al is.

Gzip staat trouwens uit, wat wil dat precies zeggen?

Salomon · Bericht door **Salomon** » 27 mar 2007, 13:55

Gzip helpt niet zoveel, dat is voor database.
Maak eens een robots.txt aan, en zet ook dit in de overall_header.tpl boven de andere meta's:

Code: Selecteer alles

<meta name="robots" content="index,nofollow" />

je site wordt dan helaas niet meer geïndexeerd door google...

Bas · Bericht door **Bas** » 27 mar 2007, 15:32

Salomon schreef:Gzip helpt niet zoveel, dat is voor database.

Nee, dat is voor bandbreedtebesparing.

Je database heeft er niks mee te maken.

svenn · Bericht door **svenn** » 27 mar 2007, 15:39

Salomon schreef:Gzip helpt niet zoveel, dat is voor database.
Maak eens een robots.txt aan, en zet ook dit in de overall_header.tpl boven de andere meta's:
Code: Selecteer alles
<meta name="robots" content="index,nofollow" />
je site wordt dan helaas niet meer geïndexeerd door google...

Dit vind ik nu niet zo'n goede raad. Ga daarintegen een acount aanmaken op google new dan zet je optie : Webmasterhulpprogramma's aan, en dan kun je Crawlsnelheid bepalen dus : Langzamer Met een lagere crawlsnelheid neemt het verkeer van de Googlebot op uw server af, maar kunnen we uw site mogelijk minder vaak crawlen.

Dat zal al helpen, mocht het dan niet gaan, dan kun je verder bekijken om in te perken. nofollow is niet een goede optie vind ik.

jzn · Bericht door **jzn** » 27 mar 2007, 16:38

TNX ik heb een webmaster hulpprogramma aangezet en die crawler de mond gesnoerd, maar hoe kan het zijn dat die google bot deze site richting een faillisement duwt?
Ik noem 10 GB traffic door de Google bot niet gezond hoor.

jzn · Bericht door **jzn** » 27 mar 2007, 17:17

Zo ik ben een stap dichter bij het antwoord:

Thank you for your reply. From the log snippet you provided, we can see that your
site is using session IDs. As you've observed, session IDs can cause problems for
our robots. Please disable session IDs for Googlebot so that our robots may crawl
your site more efficiently.

Regards,
The Google Team

Hoe zet ik session ID uit?

Is dit wat:
[BETA] Guest Sessions MOD
De mod is wel al wat ouder, is hier niks anders op te verzinnen?

Ramon Fincken · Bericht door **Ramon Fincken** » 27 mar 2007, 23:44

revisit meta ?

Code: Selecteer alles

<META NAME="revisit-after" CONTENT="8 Days">

special18 · Bericht door **special18** » 31 mar 2007, 03:41

google indexeert das waar, maar google gebruikt niet 10gig hij laat je ook in dat webmaster programma zien hoeveel hij precies gebruikt heeft. Zou je statement daar nog maaris nakijken.