Noindex+disallow, Google m'indexe coûte que coûte !

Discussion dans 'Problèmes de référencement spécifiques à vos sites' créé par milkiway, 25 Mai 2010.

  1. milkiway
    milkiway WRInaute accro
    Inscrit:
    3 Février 2004
    Messages:
    4 197
    J'aime reçus:
    0
    Bonjour,

    Il suffit que je parte en vacances pour revenir et constater que Google fait de la résistance à mes tentatives de non indexation.

    Cas clinique :
    Code:
    <meta name="robots" content="noindex,nofollow" />
    sur chaque pages + la ligne disallow qui va bien dans le robots.txt confirmé par Google WT (comme non indexable).

    Et la commande site:URL_du_site_non_indexable ... me renvoie 533 résultats sur ce site que je ne veux pas indexer :D
    Merveilleux non ?

    Dès lors, comment vérifier si cette indexation non désirée provoque du DC sur mon site ? Une commande spécifique ?

    Pour rappel, il s'agit des versions classiques et mobiles du site. D'ailleurs quel est le DOCTYPE xHTML mobile ?

    Merci, en tout cas c'est intéressant de constater que noindex seul n'avait servi à rien, que la ligne disallow dans le robots.txt avait éradiqué toute trace du site pendant trois semaines et que deux semaines plus tard tout est indexé :mrgreen:
     
  2. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 654
    J'aime reçus:
    747
    je n'ai pas trop le temps de lire les détails tout de suite, mais si tu interdis le crawl via le robots.txt, le robot ne peut pas constater que tu interdis l'indexation.
    il suffit alors qu'il ait indexé préalablement tes pages pour arriver dans ce genre de situation paradoxale

    au fait, tu peux aussi tester d'aiguiller chaque type de crawler (mobile ou pas) vers la bonne version du site (mobile ou pas)
     
  3. milkiway
    milkiway WRInaute accro
    Inscrit:
    3 Février 2004
    Messages:
    4 197
    J'aime reçus:
    0
    Ah! Ce serait là l'explication. Je vais creuser ça je mettrai ici le résultat.

    Oui mais voyant que l'index m.google.fr et la version normale ne diffère pas, est-ce vraiment utile ?

    Merci pour ton intervention.
     
  4. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 654
    J'aime reçus:
    747
    Il y a bien un index différent constitué par le crawl de Googlebot-mobile. Cela dit, si la plupart des sites laissent crawler leur version "classique" par Googlebot mobile, il est clair que l'index mobile peut être proche de l'index "classique".
    Enfin je ne m'aventure pas plus loin car je n'ai pas assez testé.
     
  5. milkiway
    milkiway WRInaute accro
    Inscrit:
    3 Février 2004
    Messages:
    4 197
    J'aime reçus:
    0
    D'après mes recherches et tests, il y a bien un bot Google Mobile, il y a bien un index Google Mobile mais dans les deux cas, sauf erreur de ma part, "Mobile" renvoie aux vieux GSM avec mini écran et navigation au clavier téléphonique. Tout sauf un Smartphone.

    PC : https://www.google.fr/search?q=r%C3%A9f%C3%A9rencement&ie=utf-8&oe=utf- ... =firefox-a
    Smartphone : https://www.google.fr/m/search?q=r%C3%A9f%C3%A9rencement&aq=f&oq=&aqi=g ... 2a1f91602c

    Après tout c'est logique.
    Indexer mon site Smartphone par un bot qui recueille des données pour des téléphones archaïques incapables de l'afficher me parait contre productif.
     
Chargement...
Similar Threads - Noindex+disallow Google indexe Forum Date
Mon site n’est pas indexé sur Google Débuter en référencement 10 Mai 2022
Connexion au compte Google Search Console d'un client Google : l'entreprise, les sites web, les services 28 Avril 2022
Problème d'affichage des campagnes Google Ads dans un tableau de bord Data Studio AdWords 26 Avril 2022
Problème : Google Crawl et Index des pages en No Index et bloqué par le robot.txt Crawl et indexation Google, sitemaps 26 Avril 2022
Quels changements pour le local avec Google Business Profile Google : l'entreprise, les sites web, les services 14 Avril 2022
Deux propriétés dans Google Analytics Google Analytics 13 Avril 2022
Google Keyword Planner: que signifie volume de recherche '0'? AdWords 31 Mars 2022
Données Google analytics vs Cloudflare Google Analytics 29 Mars 2022
Comment puis-je obtenir l'indexation instantanée de Google ? Débuter en référencement 28 Mars 2022
Google indexe le dossier /wp-includes/ Crawl et indexation Google, sitemaps 27 Mars 2022
Search Console Cette URL n'a pas été indexée par Google Crawl et indexation Google, sitemaps 27 Mars 2022
Update Google sur les avis produits (mars 2022) Référencement Google 23 Mars 2022
Erreur liée à des redirections sur Google Search Console Problèmes de référencement spécifiques à vos sites 23 Mars 2022
Google Ads et Consentement AdWords 18 Mars 2022
Indexation de mon site dans Google Problèmes de référencement spécifiques à vos sites 13 Mars 2022
Avis inconnus récupérés par google sur GMB YouTube, Google Images et Google Maps 10 Mars 2022
Site vitrine Google business.site Google : l'entreprise, les sites web, les services 10 Mars 2022
SEO et backlink https://www.google.com/search?q=site:mon-nouveau-s ite.com Netlinking, backlinks, liens et redirections 24 Février 2022
NDD disparu de l'index Google ! Problèmes de référencement spécifiques à vos sites 23 Février 2022
En prison pour avoir utilisé Google Analytics !!! Google Analytics 10 Février 2022