J'ai l'impression de louper Googlebot

WRInaute impliqué
Bonjour tout le monde,

Ce matin, je regarde ma position sur une requête que je vise, et à côté de l'url je vois "27 jan 2005". Jusque là rien d'étonnant.

Par curiosité, je vais voir sur Robotstats les pages crawlées ce jour-là...et je constate que l'index ne fait pas partie de la liste.

D'où l'idée que je manque certains passages de Googlebot !
Ceux qui sont bcp crawlés en ce moment, pouvez me donner les IPs des bots, et comment vous les détecter dans la config robotstats ?

Merci bien
 
WRInaute impliqué
Oui, toutes les visites de Googlebot en janvier ont cette IP.
Je comprend rien ! Comment a-t-il fait pour crawlée ma page le 27 sans que je le vois ? 8O
 
Nouveau WRInaute
Bonjour,

J'ai également ce même problème....

J'ai un marqueur de stats qui s'appellehttp://www.php-stats.com qui lui détecte le passage du robot (Googlebot 2.1) sur l'ip 66.249.71.7 et ce depuis le 25 janvier.

Il n'y aurait pas une nouvelle IP?


Olivier
 
WRInaute accro
Je confirme, suite au poste de bobez j'ai regardé mes stats en détails en effectivement j'ai des googlebot qui passe avec 66.249.71.***, il semble bien que google utilise aussi cette ip en ce moment.
 
WRInaute impliqué
Merci squawk :wink: Si vous voyez encore d'autres IPs, n'hésitez pas à les donner !
À quand une màj de robotstats permettant de mettre plus que deux IPs pour détecter un bot ?
 
WRInaute impliqué
Arf, ça fait trop d'IPs :? Et je préfère éviter de détecter par le nom d'agent, car il y a risque de capter des Googlebot qui n'en sont pas et d'en louper d'autres :wink:
 
WRInaute impliqué
Je suis exactement dans le même cas.
J'ai cependant rajouté l'IP : 66.249. afin d'être sur de pas le louper...
J'ai cependant aucune visite de GoogleBot ni même des autres bots.

Quelqu'un peut t'il m'aider ? Sa me semble louche.
 
WRInaute impliqué
Voici les ip que j'ai detecté :
crawl-66-249-64-10.googlebot.com : 4
crawl-66-249-64-13.googlebot.com : 2
crawl-66-249-64-14.googlebot.com : 5
crawl-66-249-64-15.googlebot.com : 6
crawl-66-249-64-16.googlebot.com : 4
crawl-66-249-64-18.googlebot.com : 13
crawl-66-249-64-25.googlebot.com : 6
crawl-66-249-64-28.googlebot.com : 10
crawl-66-249-64-33.googlebot.com : 6
crawl-66-249-64-35.googlebot.com : 6
crawl-66-249-64-36.googlebot.com : 4
crawl-66-249-64-37.googlebot.com : 10
crawl-66-249-64-39.googlebot.com : 6
crawl-66-249-64-4.googlebot.com : 5
crawl-66-249-64-44.googlebot.com : 5
crawl-66-249-64-47.googlebot.com : 7
crawl-66-249-64-49.googlebot.com : 10
crawl-66-249-64-50.googlebot.com : 6
crawl-66-249-64-54.googlebot.com : 6
crawl-66-249-64-55.googlebot.com : 10
crawl-66-249-64-58.googlebot.com : 12
crawl-66-249-64-6.googlebot.com : 2
crawl-66-249-64-66.googlebot.com : 7
crawl-66-249-64-68.googlebot.com : 3
crawl-66-249-64-7.googlebot.com : 5
crawl-66-249-64-77.googlebot.com : 1
crawl-66-249-64-79.googlebot.com : 6
crawl-66-249-65-8.googlebot.com : 268
crawl-66-249-66-79.googlebot.com : 164
crawl-66-249-71-1.googlebot.com : 1
crawl-66-249-71-10.googlebot.com : 2
crawl-66-249-71-13.googlebot.com : 5
crawl-66-249-71-14.googlebot.com : 5
crawl-66-249-71-15.googlebot.com : 5
crawl-66-249-71-17.googlebot.com : 7
crawl-66-249-71-28.googlebot.com : 5
crawl-66-249-71-3.googlebot.com : 4
crawl-66-249-71-32.googlebot.com : 11
crawl-66-249-71-39.googlebot.com : 6
crawl-66-249-71-40.googlebot.com : 7
crawl-66-249-71-42.googlebot.com : 3
crawl-66-249-71-47.googlebot.com : 5
crawl-66-249-71-50.googlebot.com : 5
crawl-66-249-71-54.googlebot.com : 4
crawl-66-249-71-55.googlebot.com : 2
crawl-66-249-71-56.googlebot.com : 2
crawl-66-249-71-57.googlebot.com : 7
crawl-66-249-71-61.googlebot.com : 12
crawl-66-249-71-67.googlebot.com : 5
crawl-66-249-71-69.googlebot.com : 6
crawl-66-249-71-7.googlebot.com : 6
crawl-66-249-71-70.googlebot.com : 6
crawl-66-249-71-72.googlebot.com : 2
crawl-66-249-71-73.googlebot.com : 9
crawl-66-249-71-9.googlebot.com : 4
 
WRInaute impliqué
Surement le nombre de page visité.
Quelqu'un pourrai t'il m'envoyer son fichier SQL par message privé avec les IP de tous les bots svp ?
J'ai entré ces IPs mais je constate cependant aucune visite.

Le robot de test de RobotStats fonctionne cependant, je comprend strictement rien !
 
Discussions similaires
Haut