Aide pour réalisation d'un robots.txt restrictif

milkiway

WRInaute accro
Bonjour,

Dans un fichier robots.txt, si on définit la règle suivante :
User-agent: *
Disallow: /

User-agent: Googlebot-Image
Allow: /
Me confirmez vous que cette règle interdit l'accès à tous les robots sauf au robot Google Image ?
La seconde consigne n'est pas courcircuitée par la première (disallow global tout moteur) ?

Merci
 

milkiway

WRInaute accro
Re: Ordre des consignes robots.txt

A moins qu'il ne faille faire :
Code:
User-agent: *
Disallow: /

User-agent: Googlebot-Image
Disallow: /
Allow: /*.jpg$
Allow: /*.jpeg$
Allow: /*.gif$
Allow: /*.png$
?
 

UsagiYojimbo

WRInaute accro
Dans le premier exemple, j'aurai plutôt fait l'inverse. Par contre, tu peux tester la manière dont le bot va analyser le robots.txt directement sous GWT maintenant.
 

milkiway

WRInaute accro
Merci. Oui j'ai bien testé dans WMT mais les infos sont tellement vagues que ça n'aide pas vraiment.
En gros il me dit pour le bot image qu'il est bloqué, mais qu'il ai possible qu'il ne le soit pas ...
 

Discussions similaires

Haut