Bloquer le crawl de la navigation à facettes

[pp51]

Bonjour,

Depuis quelques jours, Google crawle beaucoup (trop!) des pages de ma navigation à facettes (filtres).

Toutes les pages de la navigation à facettes sont en NOINDEX, mais j'aimerai plutôt bloquer le crawl via le robots.txt.

Il me faudrait donc bloquer toutes les pages du dossier "filtre".

Le dossier filtre est toujours accessible par le chemin d'url, à savoir

-http://www.test.fr/categorie/sous-categorie/filtre/

Sauriez-vous comment faire via le robots.txt ?

Merci.

Bon dimanche !

 

[pprem]

en plus du NOINDEX, as-tu mis NOFOLLOW ?
tu peux aussi jouer sur GWT pour faire du tri et le calmer ou le bloquer dans ROBOTS.TXT

 

[pp51]

Bonjour,

Aujourd'hui c'est en NOINDEX, FOLLOW.

Je préfèrerai le bloquer dans le robots.txt, mais je ne sais pas trop comment le faire avec l'usage des wild cards.

Sais-tu comment faire ?

Merci

 

[baud74]

/*/*/filtre
à tester dans la page adéquate de GWT.

 

[sr]

Attention à une erreur fréquente.

Si tu bloques le crawl avec le robots.txt, il ne verras pas que tes pages sont en noindex puisqu'il n'y aura pas accès, et du coup, pour peu qu'elles aient des liens internes ou externes, elles seront indexées.