Yahoo Comment détecter le robot Yahoo! Slurp

Avec RobotStats, il suffit de changer la configuration du robot Slurp (Inktomi) pour indiquer uniquement comme nom d'agent
en activant la détection par le nom d'agent.
Depuis hier il a visité 600 pages de WRI...
 
je l'ai meme vu visiter des pages avec des horribles identifiants de session. je me demande s'il va les indexer ?
 
à mon avis s'il visite la page c'est qu'il va l'indexer, mais peut être avec le numéro de session dans l'url...
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut