Différencier les googlebots?

[Shogoki]

Bonjour

Comment puis-je différencier les bots de google?

Je m'explique, j'ai installé adsense sur mon site et son bot mange tout le camamber de robotstats :lol:

Voici les stats du jour
[__1] 66.249.64.10
[__5] 66.249.65.108
[__3] 66.249.65.115
[__3] 66.249.65.116
[__1] 66.249.65.161
[__3] 66.249.65.169
[__3] 66.249.65.98
[733] 66.249.66.133 -> Adsense
[__6] 66.249.66.175
[__6] 66.249.66.35
[__1] 66.249.71.10


J'aimerais savoir "qui" sont les autres?!

Ah oui me dites pas ne pas référencer le ....133 parce qu'il y a 4 jours il avait une autre ip le bot adsense (66.249.65.47)

Une idée?
le lien de mon robotstats
*http://www.foudeconcours.com/robotstats/*

 

[anguenot.com]

Salut,
A priori pour différencier le VRAI googlebot de son petit frère d'AdSense, l'IP ne suffit pas. Les 2 partagent les mêmes "ranges" d'IP.
En plus de l'ip, il faut donc tester l'user agent:
Le vrai ggbot:
Googlebot/2.1 (+https://www.google.com/bot.html)
ou
Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)

Le robot Adsense:
Mediapartners-Google/2.1

 

[Shogoki]

Donc il suffit de ne plus reconnaître par ip mais par nom d'agent?

Parce que je ne vois pas comment tester les 2 dans robotstats (ip et nom)?
Je peux choisir tester ip ou tester nom!

 

[Suede]

Tu créés un robot et tu bases la détection sur le nom. Regarde le forum robotstats, il y a des messages à ce sujet.

François

 

[Shogoki]

merci j'ai mis à jour
On verra demain si je vois le vrai bot

 

[Shogoki]

Bon j'ai mis dans Robotstats reco par le nom de l'agent
Comme ceci

Googlebot =
Googlebot/2.1 (+https://www.google.com/bot.html)

GoogleBot2 =
Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)

Et Googlebot Adsense =
Mediapartners-Google/2.1

Tout "marchait bien"

Mais aujourd'hui (et je viens de remarque que hier soir aussi)
GoogleBot 2 a la même IP que Adsense et se comporte comme lui! => visite de toutes les pages, ...

C'est vraiment un google bot ou c'est mediapartner qui se déguise? :lol:

 

[nycius]

je me suis permis de regarder les IP de tes bots

javais pas du tout ca moi !
halucinant jetais completement a coté de la plaque niveau IP
c galere

 

[slender]

Apparemment je trouve le médiapartners avec les ip suivantes (chopées au niveau des fichiers logs):
66 249 65 112
66 249 65 233

 

[Shogoki]

je me suis permis de regarder les IP de tes bots

javais pas du tout ca moi !
halucinant jetais completement a coté de la plaque niveau IP
c galere

J'ai mis les ip à jour grâce au site de qqun du forum qui référence les passages des "gros" bots

Si je retrouve le lien je te le passe!

Mais pour l'instant je "travaille" avec le nom de l'agent mais dingue le mediapartner a changé de nom 8O

J'avais installé le concurrent à robotstats (un cgi) il marche pas top avec phpnuke donc retiré et pour le googblebot 2 (voir légende au dessus) il mettait => FAKE Googlebot