Les vrais/faux deepbots ne passent plus depuis Dominic

[cariboo]

J'avais observé, comme un certain nombre de webmasters, qu'un nouveau style de robots avait fait son apparition en février/mars 2003 (tiens ! février/mars 2003...)

Ces "Googlebots" avaient une IP commençant par 64, comme un freshbot, mais au lieu de s'appeler "crawler", étaient dénommés crawlXX.googlebot.com, comme les deepbots...

La fréquence de passage de ces "hybrides" avait augmenté, pour devenir quasi quotidienne juste avant Dominic.

Mais depuis la "stabilisation" de l'index, plus rien...

Le dernier passage date du 23 mai, une heure avant la fin de la phase 1...

Avez-vous constaté le même phénomène ?

 

[Mirgolth]

Salut,

Avec Robotstats ce type de question ne nescessite plus d'avoir une bonne mémoire, juste de connaitre un peu SQL:

SELECT `id` , `robot` , `url` , `date` , `ip` , `dns` , `code` 
FROM `rs_log` 
WHERE `robot` = 1 
AND `ip`LIKE '64.%' 
AND `dns` NOT LIKE 'crawler%'

Donc, chez moi, la date de la première apparition d'un crawler hybride est le 2003-04-29 15:19:00 et le dernier est passé le 2003-05-25 20:52:00

Plus d'info sur les volumes au jour le jour:

2003-04-29 14 
2003-04-30 79 
2003-05-02 24
2003-05-03 176 
2003-05-04 32 
2003-05-06 5 
2003-05-07 128
2003-05-08 5 
2003-05-09 48 
2003-05-10 2 
2003-05-12 11 
2003-05-13 169 
2003-05-14 155 
2003-05-15 127 
2003-05-16 144 
2003-05-20 128 
2003-05-21 106
2003-05-22 18 
2003-05-23 1 
2003-05-24 3 
2003-05-25 34

Edit : J'ai viré le couleurs

Mirgolth

 

[hetzeld]

Salut,

Chez moi, le dernier passage de ce type de bot remonte au 28 mai ... mais il est venu 2550 fois ce jour là !


Dan

[ 98]  64.68.84.131
[109]  64.68.84.132
[133]  64.68.84.134
[128]  64.68.84.137
[ 86]  64.68.84.143
[118]  64.68.84.144
[ 86]  64.68.84.147
[ 81]  64.68.84.149
[ 89]  64.68.84.15
[ 98]  64.68.84.152
[ 99]  64.68.84.153
[108]  64.68.84.16
[108]  64.68.84.160
[ 81]  64.68.84.31
[ 85]  64.68.84.39
[ 80]  64.68.84.42
[ 81]  64.68.84.43
[ 75]  64.68.84.46
[ 87]  64.68.84.49
[ 85]  64.68.84.51
[106]  64.68.84.52
[ 98]  64.68.84.6
[ 73]  64.68.84.76
[152]  64.68.85.13
[101]  64.68.85.6
[105]  64.68.85.9

 

[indl56]

Message supprimé.

 

[hetzeld]

Indl56,

Non, ce ne sont pas ces bots là... celui qui est passé te voir est crawler10.googlebot.com

Dan

 

[Sh@rdar]

perso j'ai des visites régulières de crawler 10 11 et 12 (entre 100 & 500 visites / jour) depuis que j'ai passé le site avec mod_rewrite

par contre, il n'a toujours pas "tapé" dans mes pages us (j'utilise un système de pseudos répertoires fr/xxx us/xxx)

vivement que ces pages apparaissent dans le moteur

 

[zehunter]

perso plus de google depuis le 22 mai .....