Crawl36.googlebot.com C'est quoi ça ?

WRInaute accro
Depuis quelques jours, j'ai systématiquement un truc google dans les hotes qui vistent le site :

crawl36.googlebot.com

Auparavant je n'avais jamais ça. Les visiteurs Robots étant bien distingués au niveau de awstats.
 
WRInaute accro
Bonjour,

Je ne connais pas crawl36.googlebot.com, mais je reçois la visite de crawl31.googlebot.com sur mes pages avec des AdSense et il s'agit du robot d'inspection des pages AdSense de Google. Il s'identifie comme Mediapartners-Google/2.1.

J'utilise AWStats et, en standard, ce crawler n'est pas reconnu comme un robot, mais comme un visiteur normal. Comme on peut ajouter ses propres définitions de robots dans robot.pm, je viens de l'ajouter pour qu'il soit reconnu correctement à sa prochaine visite!

Jean-Luc
 
Discussions similaires
Haut