Robots.txt ---> Je calle ! Help ;)

Discussion dans 'Problèmes de référencement spécifiques à vos sites' créé par toutatix, 25 Octobre 2012.

  1. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    C'est la première fois que cela m'arrive...

    J'installe pour un site: http://www.massiliavet.fr un robots.txt ( http://massiliavet.fr/robots.txt )
    Je soumets un sitemap à google: ( http://www.massiliavet.fr/sitemap.xml )

    Et google depuis 24 heures malgré plusieurs essais s'obstine à me dire que mon robots.txt bloque 32 pages en donnant des exemples de pages absolument pas concernées par le robots.txt directement ou indirectement (ce qui pourrait etre le cas si Disallow /page pour page/souspage)

    Le site est resté 6 mois en noindex avant que je soumette le sitemap débloque l indexation et mette un robots.txt.

    Alors ai-je oublié une erreur grossière dans mon robots.txt? Google est-il devenu fou?

    Cela fait un peu plus de 24 heures que je bataille.

    Vos avis sont les bienvenus !

    MERCI :)
     
  2. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    Bon après un test simple, tout permettre:

    User-agent: *
    Disallow:


    GWT m'indique toujours 32 erreurs...avec robots.txt vous avez dit bizarre?
     
  3. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    11 967
    J'aime reçus:
    120
    Il y a parfois de la latence au niveau de ce qui remonte dans GWT.
     
  4. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    Merci pour ta réponse....Je vais prendre mon mal en patience...

    J'ai remis l'ancien robots.txt du coup...
     
Chargement...
Similar Threads - Robots calle Forum Date
Pourquoi ne pas utiliser le robots.txt pour interdire l'indexation ? Débuter en référencement 14 Avril 2022
canonical et robots=index sur une même page Débuter en référencement 7 Décembre 2021
le noindex dans le robots.txt Débuter en référencement 19 Novembre 2021
suppression des pages bloquées par robots.txt Débuter en référencement 18 Octobre 2021
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 14 Juillet 2021
Les mots-clés de mon site ne sont pas détectés par les robots de référencement Problèmes de référencement spécifiques à vos sites 7 Juillet 2021
Wordpress et le robots.txt Débuter en référencement 21 Juin 2021
Search Console noindex détecté dans la balise Meta robots Débuter en référencement 21 Mai 2021
Urls filtrées indexées et crawl robots.txt Crawl et indexation Google, sitemaps 19 Mai 2021
Robots : n'autoriser que les 4 ou 5 moteurs de recherche principaux Crawl et indexation Google, sitemaps 15 Janvier 2021
erreurs robots.txt Crawl et indexation Google, sitemaps 23 Décembre 2020
Google me dit que ma page est bien indexée mais bloquée par robots.txt Crawl et indexation Google, sitemaps 25 Novembre 2020
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 17 Octobre 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Robots.txt du site Kayak Débuter en référencement 11 Mars 2020
Search Console Indexée malgré le blocage dans robots.txt Crawl et indexation Google, sitemaps 26 Février 2020
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019
Search Console Images bloquées ... malgré absence de robots.txt Crawl et indexation Google, sitemaps 31 Octobre 2019
Aide sur le format de mon fichier robots.txt Crawl et indexation Google, sitemaps 25 Octobre 2019
Problèmes d'indexation et robots.txt Crawl et indexation Google, sitemaps 14 Octobre 2019