Quels sont les Googlebots les plus actifs chez vous ?

WRInaute impliqué
Exemple sur les 15 derniers jours sur un de mes sites :

27608 crawl22.googlebot.com
24369 crawl23.googlebot.com
12662 crawl24.googlebot.com
687 crawler11.googlebot.com
519 crawler14.googlebot.com
409 crawler10.googlebot.com
361 crawler13.googlebot.com
237 crawler15.googlebot.com
107 crawler12.googlebot.com

grosse différence entre les bots de type crawl2.. et crawler1..
les crawler1.. donnent le fresh content, puisque le lendemain de leurs passages, les pages "crawlées" ont une date de fraîcheur.
par contre les crawl2... ressemble à des deep crawlers même si je ne vois pas d'effets sur l'index (même après cette google dance).

Est-ce le même type d'activités sur vos sites ?

@+
Loïc
 
WRInaute accro
Les crawlers 10 11 12 13 14 15 : 78
Le crawler 22 : 3
Le crawler 23 : 6
Le crawler 24 : 2

Sur 3 jours environ

Et 6 msnbots qui s'engouffre dans mes trappes à robots indérirables mais ne se fait pas pieger

et 1 robot/0.3 qui m'a aspiré une image php
 
Discussions similaires
Haut