Liste des IPs des moteurs de recherche

[chan]

Bonjour,

Je cherche une liste des IPs des Spiders des différents moteurs de recherche,
j ai trouvé ce lien http://www.searchengineworld.com/spiders/spider_ips.htm

Mais j aurais bien aimé avoir les moteurs français, Voila, Wanadoo, etc...

Merci pour votre aide,

Bonne journée,

Chan

 

[Oncle Tom]

Robotstats n'a pas ces infos là dans sa base se données ?

 

[ybet]

Justement, j'ai déjà également posé la question, sans utiliser robostats.

correspondance adresses IP -> nom robots.

Juste pour analyser les adresses des visiteurs sur mon forum et en virer quelques uns qui bouffent de la bande passante sans rien apporter.

 

[Suede]

Dans le script d'installation de Robotstats, tu as la liste (pour créer la base)

François

 

[bihou]

bonjour,
j'ai constaté le passage régulier de ce qui semble être un spider, avec l'adresse 66.194.6.*, dns = 66-194-6-*.gen.twtelecom.net

qlqn a des infos ?
merci

 

[spidetra]

Tu trouveras une liste d'identifiant de robot sur cette page :
http://www.robotstxt.org/wc/active.html

Je ne sais pas si elle est à jour. Tu pourras détecter les IP's en analysant les fichiers de logs de ton serveur web.

 

[bihou]

bjr,
n'ai pas trouvé l'info dans le lien ci-dessus :-(
est-ce que gen.twtelecom.net est un spider ?