phpBB.nl

Ik heb ons forum , op de voorstel-rubriek na, geheel beveiligd. Dus alleen geregistreerde leden kunnen topics bekijken en plaatsen. Ook de gebruikerslijst en profielen zijn alleen toegankelijk voor leden.

De laatste dagen echter, zitten er een drietal gasten, met bijna identiek ip-adres, omstebeurt bijna een hele dag constant op het forum. Ze hebben alledrie dezelfde werkwijze:

Zoals het eruit ziet in het adm.paneel klikken ze alle topics in het openbare gedeelte, dus het voorsteltopic aan, klikken dan op bericht plaatsen maar vervolgens wordt er niks geplaatst.

Dit gaat bijna een hele dag zo door, en vervolgens, een dag later, is er weer een ander met een bijna gelijk ip-adres.

Als we die adressen proberen te traceren, komen we uit op http://www.googlebot.com.

We vragen ons toch wel af wat dat allemaal te betekenen heeft. Komt dit iemand bekend voor, of ?

Is gewoon een crawler van google die je forum indexeert kan op zich geen kwaad.
je zou wel een robots.txt in je root kunnen plaatsen zodat ze alleen hetgeen crawlen waar jij dat wilt.

Oke thx! :thumb:

Maar wat doet zo'n "crawler"dan precies ?

Het gaat je site na om te kijken of het interessant is en neemt de informatie die op je website staat mee om voor een ander het zoeken naar je website makkelijker te maken. O.a. Google, Yahoo! etc. maken allemaal gebruik van bots.

Deze hebben rechten zoals elke gast je forum kan bekijken en indexeert jouw website op de inhoud. Zodat als je genoeg bezoekers trekt een hogere positie hebt in de zoeklijst van de zoekmachine. Alleen maar voordelen zou ik haast zeggen

Hopelijk is het een beetje duidelijk

aahhh! Ja nu is het helemaal duidelijk :thumb:

Dank jullie wel, we hoeven ons dus geen zorgen te maken verder, en eigenlijk is het alleen maar positief 8)

Voor een robots.txt bestand kijk dan even naar -> http://www.phpbb.nl/viewtopic.php?p=282 ... ht=#282267

de inhoud in een txt bestand gooien, opslaan als robots.txt en in de root van je phpbb installatie zetten op je server.

Oke, bedankt

Hou rekening mee dat een bot je datagebruik giganties omhoog trekt, aangezien google bij mij om het uur bezoekt, zuigt dat bandwith. Als je wat meer beheersing over google wilt hebben ze hier een programma voor.

link: https://www.google.com/accounts/Service ... 3Dnl&hl=nl

special18 schreef:Hou rekening mee dat een bot je datagebruik giganties omhoog trekt, aangezien google bij mij om het uur bezoekt, zuigt dat bandwith. Als je wat meer beheersing over google wilt hebben ze hier een programma voor.

Je kan het ook simpel met een META-regel bepalen (revisit after). Dat werkt op mijn sites prima...

Ja maar dat programma kun je ook meerder dingen doen he bijv gelijk je site toevoegen aan google index

Fridge schreef:Voor een robots.txt bestand kijk dan even naar -> http://www.phpbb.nl/viewtopic.php?p=282 ... ht=#282267

de inhoud in een txt bestand gooien, opslaan als robots.txt en in de root van je phpbb installatie zetten op je server.

Uh kijk hier eens... http://www.phpbb.nl/viewtopic.php?p=282417#282417

Derky schreef:

Fridge schreef:Voor een robots.txt bestand kijk dan even naar -> http://www.phpbb.nl/viewtopic.php?p=282 ... ht=#282267

de inhoud in een txt bestand gooien, opslaan als robots.txt en in de root van je phpbb installatie zetten op je server.

Uh kijk hier eens... http://www.phpbb.nl/viewtopic.php?p=282417#282417

Wat moet ik daar precies zien dan volgens jou ?

Derky schreef:

special18 schreef:Hey, ik zou graag een robot.txt voor me forum willen, met alle zoekmachines erin en alle directories toegelaten. Kan iemand er zo1 voor mij snel in mekaar zetten.
Heb al gegoogled maarum das tikje onduidelijk allemaal plz help me:)

Toegelaten staat er, met al die oplossingen die jullie geven wordt alles juist geblokkeerd.
Als je alles wil toelaten heb je geen robots.txt nodig.

Dat je dan juist alles blokkeerd. :p

Maar ik wil niet alles toelaten

Maar de topic starter wel.

Was toch alleen een voorbeeld

\en als je de lijst eens goed bekijkt hebben de meeste van die bots niets te zoeken op je phpbb board :p

Fridge schreef:Was toch alleen een voorbeeld

\en als je de lijst eens goed bekijkt hebben de meeste van die bots niets te zoeken op je phpbb board :p

Moet je er effe bij zeggen dan hè.

wordt een beetje slow-chat hiero