Comment trouver les pages avec meta robots noindex

Discussion dans 'Crawl et indexation Google, sitemaps' créé par WebRankInfo, 22 Juin 2015.

  1. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 048
    J'aime reçus:
    325
    Vous pensez sûrement qu'une balise meta robots ça ne se met que dans l'entête HTML d'une page (<head>).
    Vous êtes encore plus certain que vous n'avez certainement aucune page de votre site avec une meta robots noindex cachée à l'intérieur du corps de la page (<body>).

    Pourtant... l'erreur est humaine ! Et comme Google tient compte de cette meta robots noindex même ailleurs que dans l'entête HTML, les pages concernées sont sans doute désindexées...

    C'est d'ailleurs ce qui est arrivé à un propriétaire de site ecommerce qui a trouvé le problème en lançant un audit RMTech.

    Lisez les détails de cette histoire de noindex placée dans <body>
     
  2. indigene
    indigene WRInaute accro
    Inscrit:
    7 Septembre 2003
    Messages:
    3 697
    J'aime reçus:
    78
    Et on peut également avoir du noindex via le htaccess

    Code:
    <filesMatch "robots\.txt$">
      Header set X-Robots-Tag "noindex"
    </filesMatch>
    Une erreur de codif dans la commande filesMatch et on peut exclure des répertoires entiers
     
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 048
    J'aime reçus:
    325
    oui bien entendu, on peut envoyer du noindex dans l'entête HTTP. ça aussi faut penser à le vérifier, pour 100% des URL.
     
Chargement...
Similar Threads - trouver meta robots Forum Date
Tester les pubs ADS - Ou trouver des coupons ? e-commerce Mardi à 14:44
Comment trouver un nom d’entreprise qui fera gagner des parts de marché Noms de domaine et référencement Lundi à 09:00
WordPress Trouver toutes les R301 existantes URL Rewriting et .htaccess 25 Octobre 2019
Comment retrouver tous les backlinks de mon site ? Netlinking, backlinks, liens et redirections 21 Octobre 2019
Utilisation de Adwords pour trouver des mots clés Débuter en référencement 23 Août 2019
Position 0 : comment trouver celles où son site sort ? Référencement Google 18 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019
Où trouver des icônes pour mon site ? Demandes d'avis et de conseils sur vos sites 19 Janvier 2019
Trouver des forums en relation avec mon site Netlinking, backlinks, liens et redirections 2 Janvier 2019
Est-il normal de ne pas trouver de travail avec la licence pro référenceur et rédacteur web ? Référencement Google 21 Décembre 2018
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice