Depuis ce matin j'ai une activité frénétique des bots d'Inktomi (66.196.72.43 et en fait 66.196.72.*). Vous aussi ?
Ce que je pige pas c'est qu'il crawl comme un barbare mes forums depuis plusieurs heures donc s'il met autant de tps, ptete que contraitement à Google il ne se limite pas aux 2 variables classiques dans l'URL.
Voilou alors ptete du 2 crawl en 1 ?
Ce que je pige pas c'est qu'il crawl comme un barbare mes forums depuis plusieurs heures donc s'il met autant de tps, ptete que contraitement à Google il ne se limite pas aux 2 variables classiques dans l'URL.
Voilou alors ptete du 2 crawl en 1 ?
