Help met goede basis robots.txt file

Hulp nodig bij je installatie of kom je ergens niet uit? Probeer phpBB3! Problemen lossen we samen met je op.
phpBB 3.0 is End of support per 1 januari 2017. Dit forum is hier enkel ter archief. Het wordt aangeraden te upgraden naar phpBB 3.2
Forumregels
phpBB 3.0 is End of support per 1 januari 2017. Dit forum is hier enkel ter archief. Het wordt aangeraden te upgraden naar phpBB 3.2
Gesloten
Xorta
Berichten: 11
Lid geworden op: 15 mar 2009, 15:57
Contacteer:

Help met goede basis robots.txt file

Bericht door Xorta » 15 mar 2009, 16:18

  • Adres van je forum: http://www.teamreflex.com/
    Event. modificaties op je forum: AntiBotQuestion, meer niet
    Wanneer ontstond het probleem? Aanmaak van robots.txt
    phpBB versie: 3.0.4

    Heb je onlangs iets veranderd aan je forum? Nee
    Wat is het probleem?
Wat ik wil: robots.txt op die manier gebruiken dat spiders alleen zien wat een normale forum gebruiker ook ziet. Het probleem: ik heb me rot gezocht naar een goede standaard robots.txt voor een phpbb3 forum, maar alles wat ik vind is verschillend van elkaar, onduidelijk, niet kloppend, of bedoeld voor phpbb2.

Wat geen opties zijn:
- Zelf uitzoeken wat wel en wat niet te Disallowen in de robots.txt. Ik kan goed met HTML overweg, slecht met php. Ben bang dat ik dan verkeerde maps/bestanden ga disallowen.
- Complete SEO mods (ofzo) installeren. Zo 'professioneel' hoef ik het niet, met een goede robots.txt bestand ben ik tevreden.

Heeft iemand dus een goede basis robots.txt voor een standaard phpbb3 root folder voor mij?

Voor de duidelijkheid, dit staat er nu in mijn root folder:

adm
cache
docs
download
files
images
includes
language
store
styles
common.php
congif.php
cron.php
faq.php
index.php
mcp.php
memberlist.php
posting.php
report.php
search.php
style.php
ucp.php
viewforum.php
viewonline.php
viewtopic.php
en natuurlijk robots.txt


Alvast hartelijk bedankt voor het helpen van deze newb op dit forum ;) !

Gebruikersavatar
Paul
Beheerder
Beheerder
Berichten: 20316
Lid geworden op: 23 okt 2003, 11:38
Locatie: Utrecht
Contacteer:

Re: Help met goede basis robots.txt file

Bericht door Paul » 15 mar 2009, 16:55

ik zou zeggen alle mappen behalve styles/, daarnaast mcp, ucp, search, posting, report, cron, config, common

Xorta
Berichten: 11
Lid geworden op: 15 mar 2009, 15:57
Contacteer:

Re: Help met goede basis robots.txt file

Bericht door Xorta » 15 mar 2009, 23:21

Duidelijk. Bedankt. :)

Gesloten