Robots.txt, exclure un mot en fin d'url

[PierreToo]

Bonjour,

Je n'arrive pas à trouvé une info clairement expliqué sur ce problème :

Voila j'ai des url du type :
mon-site/informations/add.html
mon-site/decouvrir/add.html

Est ce que je peux exclure toutes les url contenant le mot "add" avec le robots.txt ?

Avec cette commande : Disallow:/add/

Ou est que l'on ne peut exclure uniquement des paramètres se trouvant en début d'url ?

 

[1eB]

Bonjour,

Disallow:/add/ indique que le répertoire /add/ et tout ce qu'il y a en dessous doit être ignoré.

Pour votre exemple Il faut utiliser :

Disallow: /*add.html$

 

[WebRankInfo]

je précise un détail : si ces URL sont déjà indexées, les bloquer dans le robots.txt ne suffira pas à les faire désindexer : il faudra aussi en faire la demande dans GWT
ne pas confondre avec la balise meta robots noindex qui sert à interdire l'indexation d'une page

 

[PierreToo]

Merci à vous pour vos réponses clairs et précises !