BotsMod 1.31

Praat mee over van alles en nog wat!
Forumregels
Dit forum is voor alle zinnige gesprekken buiten phpBB om. Discussies en gesprekken over interessante onderwerpen.

Een nieuw onderwerp moet..:
  • uiteraard voldoen aan de algemene voorwaarden
  • niet passen in de gewone supportfora
  • interessante zijn voor het overgrote deel van onze gebruikers
  • een neutrale of positieve ondertoon hebben
  • anders zijn dan bestaande onderwerpen
Plaats reactie
Gebruikersavatar
special18
Berichten: 700
Lid geworden op: 29 jan 2007, 16:31
Locatie: Lelystad
Contacteer:

BotsMod 1.31

Bericht door special18 » 25 aug 2007, 16:36

Hallo mensen,

Deze mod voor phpbb 2.xx zorgt ervoor dat je ziet wanneer bots je indexeren en hoeveel en hoevaak hoelaat etc. Maar nu is deze data beperkt tot de meest bekende internationaal. En nergens is een goeie lijst te vinden met meer bots en ip adressen die iederene met de tijd verzameld heeft.

Nu zou ik graag van iedereen ip adressen en namen krijgen van bots die voor deze lijst gebruikt kunnen worden en zodoende voor andere mensen ook nuttig te zijn. Ik denk dat phpbb3 in dat aspect ook een uitgebreider lijst heeft.

Alvast bedankt en als verkeerd staat excuses.
http://www.animeresource.org Free Anime downloading and streaming, community forums and Anime Radio.

Coen
Berichten: 5387
Lid geworden op: 03 aug 2004, 10:25

Re: BotsMod 1.31

Bericht door Coen » 26 aug 2007, 13:45

Worden de bots via die MOD 'gevonden' worden, herkent op basis van een ip adres, of op de manier waarop phpBB 3.x het doet, via de 'user-agent'? :)

Gebruikersavatar
special18
Berichten: 700
Lid geworden op: 29 jan 2007, 16:31
Locatie: Lelystad
Contacteer:

Re: BotsMod 1.31

Bericht door special18 » 26 aug 2007, 16:32

De gene die al ingevuld zijn erkent hij dan op de bots user agent, maar non toegevoegde zowaar weer niet. Dan zul je eerste 1 handmatig moeten toevoegen en dan mis je nogal wat info dus leek het mij handig om dit te delen :)

Ik zal even 1 geven die ik heb aangevraagt.

Our crawler always identifies itself - you should see something like
this in your logs:

"GET /SomeFileName HTTP/1.0" 403 210 "-" "Mozilla/5.0 (Twiceler-0.9
http://www.cuill.com/twiceler/robot.html)"

The User-agent for robots.txt is "Twiceler", case-insensitive. Our
crawler names and IP addresses are as follows:

crawl-0.cuill.com 38.99.13.121
crawl-1.cuill.com 38.99.13.122
crawl-2.cuill.com 38.99.13.123
crawl-3.cuill.com 38.99.13.124
crawl-4.cuill.com 38.99.13.125
crawl-5.cuill.com 38.99.13.126
crawl-6.cuill.com 64.1.215.162
crawl-7.cuill.com 64.1.215.163
crawl-8.cuill.com 64.1.215.164
crawl-9.cuill.com 64.1.215.165
crawl-10.cuill.com 38.99.44.101
crawl-11.cuill.com 38.99.44.102
crawl-12.cuill.com 38.99.44.103
crawl-13.cuill.com 38.99.44.104
crawl-14.cuill.com 38.99.44.105
crawl-15.cuill.com 38.99.44.106
crawl-16.cuill.com 208.36.144.7
crawl-17.cuill.com 208.36.144.8
crawl-18.cuill.com 208.36.144.9
crawl-19.cuill.com 208.36.144.10
http://www.animeresource.org Free Anime downloading and streaming, community forums and Anime Radio.

Raimon
Berichten: 4397
Lid geworden op: 27 aug 2005, 12:59
Contacteer:

Re: BotsMod 1.31

Bericht door Raimon » 31 aug 2007, 19:10

Er is een lijst, als je nou eens de vraag stelde bij de mod auteur zou je zeker een antwoord met een sql file gekregen hebben.

de twickler doe je omslachtig een user agent is genoeg om toe te kunnen voegen.
De ipnummers is een pre.
Ga je dan niet met een berg ipnummers werken, word mysql alleen maar ziek van, en denk bertie ook.

Plaats reactie