Demande d'indexation refusée

Discussion dans 'Crawl et indexation Google, sitemaps' créé par Hyuuga, 30 Septembre 2021.

  1. Hyuuga
    Hyuuga Nouveau WRInaute
    Inscrit:
    21 Octobre 2013
    Messages:
    7
    J'aime reçus:
    1
    Bonjour à tous,

    Après avoir recherché la cause de mon problème et avoir trouvé plusieurs pistes qui ne semblent pas s'appliquer à mon problème je me tourne vers la communauté.

    En voulant inspecter les URL sous la Google Search Console pour m'assurer que les Url éatient indexables, il m'est apparu le message suivant ;

    [​IMG]

    Il n'y a pas réellement de précision quant au problème rencontré, voici le descriptif proposé par Google ;

    [​IMG]

    Je suis également passé par le test d'optimisation mobile qui parfois donne plus d'informations sur les problèmes rencontrés... Voici le message qui est déjà légèrement plus clair.

    [​IMG]

    Finalement, j'ai effectué, une vérification du HTACCESS qui semble ok.
    Mon fichier Robots a été vérifié, il est très simple le voici ;

    User-agent: *
    Allow: /
    Disallow: /wp-login.php
    Disallow: /wp-admin/

    J'ai également désactivé le firewall côté serveur OVH pour être sur que ça ne venait pas de la.

    C'est la première fois que je fais face à ce problème. Je tiens à préciser que c'est un nouveau site internet. Je gère une dizaine de site web, dont certains que j'ai suivi depuis leur création, et c'est la première fois que je vois ça.

    Avez-vous une idée, une piste éventuelle ?

    Merci à vous.
     
  2. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    11 939
    J'aime reçus:
    80
    Sans url, impossible de dire quoi que ce soit.
     
  3. Hyuuga
    Hyuuga Nouveau WRInaute
    Inscrit:
    21 Octobre 2013
    Messages:
    7
    J'aime reçus:
    1
    En effet,
    Voici : Url
     
  4. kristel
    kristel WRInaute impliqué
    Inscrit:
    24 Août 2005
    Messages:
    615
    J'aime reçus:
    33
    Cette page est indexée par Google. Le cache date du 1er octobre à 11h28 GMT.

    Demander une indexation est bien, mais avoir des backlinks est encore mieux, surtout si on est impatient.

    Hors-sujet:
    Personnellement, je n'aime pas le Allow: / dans le fichier robots.txt
     
    Marie-Aude apprécie ceci.
  5. Hyuuga
    Hyuuga Nouveau WRInaute
    Inscrit:
    21 Octobre 2013
    Messages:
    7
    J'aime reçus:
    1
    Merci pour la réponse.

    J'ai réussi à régler le problème. Est-ce grâce à mes manipulations, je ne sais pas, mais je vais décrire ce que j'ai fait dans le cas ou d'autres personnes auraient ce soucis spécifique.

    Dans l'ordre,

    - J'ai vérifié le HTACCESS, en général les problèmes viennent de lui.
    - J'ai ajouté vérifié le fichier robot en y mettant les réglages ci-dessus.
    - J'ai supprimé (provisoirement) le pare-feu côté serveur.
    - J'ai réinitialisé les DNS. ( Le NDD est resté longtemps en mode "non indexable" côté réglage wordpress... Peut être une incidence)
    - J'ai désactivé et supprimé les plugin non utilisés et non indispensable côté wordpress. ( Les plugins qui génèrent une page offline etc. )
    - Et enfin, j'ai attendu 24h avant de réessayer la vérification.

    Bizarrement, (ou logiquement?) cela a fonctionné après les 24h.. Environ au bout d'une trentaine d'heures.

    Voilà pour le retour d'expérience.

    Concernant les backlinks tu as tout à fait raison. Mais le problème se situait surtout sur le blocage du crawl de la page par les robots..

    Sinon tu as raison concernant le... "temps". Patienter une ou deux journées pour vérifier est indispensable.

    Pourquoi n'aimes tu pas le Allow ? Une préconisation particulière à suggérer ?

    Merci :)
     
  6. passion
    passion WRInaute accro
    Inscrit:
    6 Janvier 2006
    Messages:
    3 963
    J'aime reçus:
    190
    Le fichier robot est à utiliser avec précaution.
    Pour rappel, Google peut décider d'indexer une page où répertoire disallow simplement parce qu'au moins un backlink pointe dessus.
    Mettre un noindex est plus efficace.
    C'est plus difficile de desindexer une page disallow
     
  7. kristel
    kristel WRInaute impliqué
    Inscrit:
    24 Août 2005
    Messages:
    615
    J'aime reçus:
    33
    Dans ce cas-ci, le problème - si problème, il y avait - ne concernait pas le fichier robots.txt. Et quantité de webmasters font comme tu l'as fait pour ton robots.txt.

    Mais, "allow: Cette instruction est utilisée pour .... autoriser l'exploration d'un sous-répertoire ou d'une page dans un répertoire non autorisé."

    https://developers.google.com/search/docs/advanced/robots/create-robots-txt
     
  8. Sébastien321
    Sébastien321 Nouveau WRInaute
    Inscrit:
    13 Septembre 2021
    Messages:
    13
    J'aime reçus:
    0
    Jusqu’à maintenant, on ne sait pas encore quelles techniques Google utilise avec ce nouveau changement. Perso, je suis un peu perdu sur ce sujet.
     
Chargement...
Similar Threads - Demande indexation refusée Forum Date
Search Console Demander une indexation : Quota dépassé Crawl et indexation Google, sitemaps 9 Janvier 2021
Search Console Demander une indexation revient ! Crawl et indexation Google, sitemaps 24 Décembre 2020
Peut-on demander l'indexation de plusieurs pages dans la search console ? Problèmes de référencement spécifiques à vos sites 18 Avril 2020
demande d'indexation google - Cette URL n'a pas été indexée par Google Référencement Google 12 Mai 2019
Droit a l'oubli et demande de désindexation ? Référencement Google 19 Avril 2018
Demande automatique d'indexation dans google Référencement Google 26 Mai 2015
Demander la désindexation de 5000 url d'un seul coup, plutôt qu'une par une ? Débuter en référencement 17 Juillet 2014
Comment avec GWT, demander une réindexation de son site ? Crawl et indexation Google, sitemaps 25 Juin 2014
Impossible de décocher la case de demander aux moteurs de recherche Problèmes de référencement spécifiques à vos sites 29 Octobre 2021
Demande d'avis - Petites phrases Présidentielle 2022 Demandes d'avis et de conseils sur vos sites 24 Octobre 2021