Nouveau WRInaute
Bonjour à tous,
Voici l’url de mon site : https://www.planhub.ca
J’ai un problème d’indexation sur un type de page (l’url est la suivante : mondomaine.com/en/go?xxxxx) que je ne souhaite pas faire indexer par les robots.
J’ai bien mis en place les processus habituels pour éviter ça :
Pourtant google, ahref etc la crawl et je ne comprends pas pourquoi.
Sur la partie coverage de la search console je vois toutes ces url avec un “coverage indexed thought blocked by robots.txt”
Et même si elle n’est pas présente dans les résultats de recherche sur google je la retrouve dans les premiers résultats sur certains moteurs de recherche comme AOL par exemple ce qui prouve bien qu’elle est indexée et crawlée.
Est ce qu’il y a un moyen supplémentaire pour interdire complètement l’indexation et le crawl de ce type de page?
Je vous remercie par avance pour votre aide, bonne journée à toute la communauté.
Voici l’url de mon site : https://www.planhub.ca
J’ai un problème d’indexation sur un type de page (l’url est la suivante : mondomaine.com/en/go?xxxxx) que je ne souhaite pas faire indexer par les robots.
J’ai bien mis en place les processus habituels pour éviter ça :
- J’ai indiqué dans le robot.txt un : Disallow: /*?
- Il y a bien une balise meta : <meta name="robots" content="noindex,nofollow" /> présente sur la page
Pourtant google, ahref etc la crawl et je ne comprends pas pourquoi.
Sur la partie coverage de la search console je vois toutes ces url avec un “coverage indexed thought blocked by robots.txt”
Et même si elle n’est pas présente dans les résultats de recherche sur google je la retrouve dans les premiers résultats sur certains moteurs de recherche comme AOL par exemple ce qui prouve bien qu’elle est indexée et crawlée.
Est ce qu’il y a un moyen supplémentaire pour interdire complètement l’indexation et le crawl de ce type de page?
Je vous remercie par avance pour votre aide, bonne journée à toute la communauté.