Pagina 1 van 1

Help met goede basis robots.txt file

Geplaatst: 15 mar 2009, 16:18
door Xorta
  • Adres van je forum: http://www.teamreflex.com/
    Event. modificaties op je forum: AntiBotQuestion, meer niet
    Wanneer ontstond het probleem? Aanmaak van robots.txt
    phpBB versie: 3.0.4

    Heb je onlangs iets veranderd aan je forum? Nee
    Wat is het probleem?
Wat ik wil: robots.txt op die manier gebruiken dat spiders alleen zien wat een normale forum gebruiker ook ziet. Het probleem: ik heb me rot gezocht naar een goede standaard robots.txt voor een phpbb3 forum, maar alles wat ik vind is verschillend van elkaar, onduidelijk, niet kloppend, of bedoeld voor phpbb2.

Wat geen opties zijn:
- Zelf uitzoeken wat wel en wat niet te Disallowen in de robots.txt. Ik kan goed met HTML overweg, slecht met php. Ben bang dat ik dan verkeerde maps/bestanden ga disallowen.
- Complete SEO mods (ofzo) installeren. Zo 'professioneel' hoef ik het niet, met een goede robots.txt bestand ben ik tevreden.

Heeft iemand dus een goede basis robots.txt voor een standaard phpbb3 root folder voor mij?

Voor de duidelijkheid, dit staat er nu in mijn root folder:

adm
cache
docs
download
files
images
includes
language
store
styles
common.php
congif.php
cron.php
faq.php
index.php
mcp.php
memberlist.php
posting.php
report.php
search.php
style.php
ucp.php
viewforum.php
viewonline.php
viewtopic.php
en natuurlijk robots.txt


Alvast hartelijk bedankt voor het helpen van deze newb op dit forum ;) !

Re: Help met goede basis robots.txt file

Geplaatst: 15 mar 2009, 16:55
door Paul
ik zou zeggen alle mappen behalve styles/, daarnaast mcp, ucp, search, posting, report, cron, config, common

Re: Help met goede basis robots.txt file

Geplaatst: 15 mar 2009, 23:21
door Xorta
Duidelijk. Bedankt. :)