1. ✅ Apprenez une METHODE qui marche pour votre SEO ! Formation à distance avec Olivier Duffez et Fabien Facériès + aide pour prise en charge du financement
    Rejeter la notice

Délai de mise à jour du fichier robots.txt

Discussion dans 'Crawl et indexation Google, sitemaps' créé par Boutique 350Z, 10 Février 2013.

  1. Boutique 350Z
    Boutique 350Z Nouveau WRInaute
    Inscrit:
    8 Février 2013
    Messages:
    1
    J'aime reçus:
    0
    Bonjour à tous! Je compte sur les experts de ce forum pour me sortir du pétrin...

    Il y a environ 1 semaine j'ai mis en ligne mon site e-commerce http://www.boutique350z.fr/ développé à partir de la solution française Prestashop 1.5.
    Afin de mieux "appréhender" l'indexation de ma boutique j'utilise depuis ce jour l'outil Webmasters Tools de Google.

    J'ai généré mon sitemap.xml et mon fichier robots.txt à partir des modules natifs du Back Office de Prestashop afin de les soumettre à Google.

    2 jours plus tard un message m'indiquait de nombreuses erreurs de récupération du fichier robots.txt (47%) bloquant l'accès aux Googlebots.
    J'ai alors décidé de simplifier au maximum le fameux fichier en y intégrant les instructions suivantes et en le plaçant à la racine de mon site via FTP ce qui revient presque à s'en passer et ne devrait pas être restrictif:

    User-agent: *
    Disallow:
    Sitemap: http://www.boutique350z.fr/sitemap.xml

    Robots.txt est bien visible: http://www.boutique350z.fr/robots.txt

    Cependant malgré la nouvelle soumission de mon sitemap et la soumission de http://www.boutique350z.fr/robots.txt via le module "Explorer comme Google" la date de téléchargement du robots.txt dans la rubrique "URL bloquées" ne change pas et la fenêtre permettant de tester de nouvelles configurations (Contenu http://www.boutique350z.fr/robots.txt – Modifier pour tester les changements) affiche toujours l'ancien robots.txt

    Que dois-je faire? Y a t-il un délais et si oui lequel avant que Goggle prenne en compte mon nouveau robots.txt? Dans l'état actuel des choses les Googlebots diffèrent l'exploration et l'indexation de mes pages...

    Merci pour vos précieux éclairages.
     
  2. Neoxy
    Neoxy WRInaute occasionnel
    Inscrit:
    19 Avril 2006
    Messages:
    450
    J'aime reçus:
    0
    Bonjour,

    Google visite régulièrement le fichier robots.txt...

    Donc il faut patienter ...
     
Chargement...
Similar Threads - Délai fichier robots Forum Date
Délais mise à jour du fichier robots.txt Crawl et indexation Google, sitemaps 8 Mars 2012
modification Favicon : délai de mise à jour Google Développement d'un site Web ou d'une appli mobile 23 Janvier 2020
Playstore : délai de publication allongé Développement d'un site Web ou d'une appli mobile 29 Août 2019
Délai de prise en compte changement robots.txt plus long Crawl et indexation Google, sitemaps 18 Mai 2019
Délai avant (re)référencement après changements ? Problèmes de référencement spécifiques à vos sites 30 Avril 2019
Optimisation du délai d'indexation de pages Crawl et indexation Google, sitemaps 12 Janvier 2019
Délai rétractation internet Droit du web (juridique, fiscalité...) 4 Septembre 2018
Amélioration du site et SEO : délai effets Google Référencement Google 4 Août 2018
RGPD : délai de conservation des données (de connexion) Droit du web (juridique, fiscalité...) 30 Avril 2018
Message aux parisiens et bordelais qui sortent Demandes d'avis et de conseils sur vos sites 14 Mars 2018