Comment trouver les pages avec meta robots noindex

Discussion dans 'Crawl et indexation Google, sitemaps' créé par WebRankInfo, 22 Juin 2015.

  1. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 316
    J'aime reçus:
    388
    Vous pensez sûrement qu'une balise meta robots ça ne se met que dans l'entête HTML d'une page (<head>).
    Vous êtes encore plus certain que vous n'avez certainement aucune page de votre site avec une meta robots noindex cachée à l'intérieur du corps de la page (<body>).

    Pourtant... l'erreur est humaine ! Et comme Google tient compte de cette meta robots noindex même ailleurs que dans l'entête HTML, les pages concernées sont sans doute désindexées...

    C'est d'ailleurs ce qui est arrivé à un propriétaire de site ecommerce qui a trouvé le problème en lançant un audit RMTech.

    Lisez les détails de cette histoire de noindex placée dans <body>
     
  2. indigene
    indigene WRInaute accro
    Inscrit:
    7 Septembre 2003
    Messages:
    3 953
    J'aime reçus:
    120
    Et on peut également avoir du noindex via le htaccess

    Code:
    <filesMatch "robots\.txt$">
      Header set X-Robots-Tag "noindex"
    </filesMatch>
    Une erreur de codif dans la commande filesMatch et on peut exclure des répertoires entiers
     
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 316
    J'aime reçus:
    388
    oui bien entendu, on peut envoyer du noindex dans l'entête HTTP. ça aussi faut penser à le vérifier, pour 100% des URL.
     
Chargement...
Similar Threads - trouver meta robots Forum Date
Je n'arrive pas à trouver la balise h1 sur mon Blogger. Problèmes de référencement spécifiques à vos sites 5 Février 2020
Tester les pubs ADS - Ou trouver des coupons ? e-commerce 12 Novembre 2019
Comment trouver un nom d’entreprise qui fera gagner des parts de marché Noms de domaine et référencement 11 Novembre 2019
WordPress Trouver toutes les R301 existantes URL Rewriting et .htaccess 25 Octobre 2019
Comment retrouver tous les backlinks de mon site ? Netlinking, backlinks, liens et redirections 21 Octobre 2019
Utilisation de Adwords pour trouver des mots clés Débuter en référencement 23 Août 2019
Position 0 : comment trouver celles où son site sort ? Référencement Google 18 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019
Où trouver des icônes pour mon site ? Demandes d'avis et de conseils sur vos sites 19 Janvier 2019
Trouver des forums en relation avec mon site Netlinking, backlinks, liens et redirections 2 Janvier 2019
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice