Bloquer des urls via un robots.txt . est ce un problème ?

Discussion dans 'Référencement Google' créé par webmaster87, 8 Juin 2009.

Tags:
  1. webmaster87
    webmaster87 WRInaute discret
    Inscrit:
    5 Septembre 2006
    Messages:
    94
    J'aime reçus:
    0
    Bonjour,

    Je bloque plusieurs centaines de pages de mon site a l'aide d'un fichier robots.txt, j'ai mis cela en place afin de lutter contre le duplicate content.

    Dans mon Google Wemaster Tools, cela apparait comme un problème ...

    Exploration du Web
    URL à accès restreint par un fichier robots.txt
    J'ai un panneau "Attention" 1243 détails


    Diagnostic > Exploration du Web > j'ai le détail plus "Problème détecté le ..."

    Donc cela apparait comme un Problème...

    Pensez vous qu'il faut que je trouve une solution contre ca ?
     
    #1 webmaster87, 8 Juin 2009
  2. jeanluc
    jeanluc WRInaute accro
    Inscrit:
    3 Mai 2004
    Messages:
    2 875
    J'aime reçus:
    0
    Google n'explique pas clairement les choses. Il ne s'agit pas d'un problème puisque c'est en connaissance de cause que tu interdis l'accès à Googlebot. Ce n'est donc pas un message d'erreur, tout au plus un avertissement pour le cas où tu ne serais pas au courant que Google n'a pas accès à ces pages.

    Jean-Luc
     
    #2 jeanluc, 8 Juin 2009
  3. Leonick
    Leonick WRInaute accro
    Inscrit:
    8 Août 2004
    Messages:
    19 274
    J'aime reçus:
    0
    Ca peut être un problème si tu as, dans ton sitemap, des liens qui sont bloqués par robots.txt et c'est pourquoi gg t'affiche cette info
     
    #3 Leonick, 8 Juin 2009
  4. webmaster87
    webmaster87 WRInaute discret
    Inscrit:
    5 Septembre 2006
    Messages:
    94
    J'aime reçus:
    0
    Merci pour vos réponses.

    Je n'ai pas d'erreur ou de problème dans la ligne :

    "Erreurs rencontrées pour les URL répertoriées dans les sitemaps"

    Il faut que je trouve ou Google accède a ces urls et si le nombre augmente.
     
    #4 webmaster87, 8 Juin 2009
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - Bloquer urls robots Forum Date
Comment bloquer des URLs externes Crawl et indexation Google, sitemaps 4 Novembre 2017
Bloquer l'indexation https, urls avec variables, etc, Débuter en référencement 12 Août 2009
Bots scrapers et impact SEO : comment les bloquer ? Crawl et indexation Google, sitemaps 21 Mai 2022
Bloquer les IP d'un pays Administration d'un site Web 4 Mars 2022
Comment bloquer à coup sûr l'indexation par les moteurs de recherche Crawl et indexation Google, sitemaps 7 Décembre 2020
Chrome va bloquer les ressources HTTP sur pages HTTPS Référencement Google 5 Octobre 2019
Bloquer accès admin Google Analytics par adresse IP Google Analytics 19 Septembre 2019
Comment bloquer les vidéos automatiques ? Facebook 28 Juillet 2019
Réseau de site backlinks : comment bloquer par htaccess ? Tests et études de cas 6 Juin 2019
Bloquer une section dans mon fichier robots.txt Débuter en référencement 9 Novembre 2018
Chrome 70 va bloquer de nombreux sites web Google : l'entreprise, les sites web, les services 10 Octobre 2018
WordPress Bloquer ou non WP include dans le robots.txt ? Référencement Google 5 Septembre 2018
fichier robots.txt bloquer paramètre p= Crawl et indexation Google, sitemaps 4 Septembre 2018
Adsense - Impossible de bloquer des annonceurs ! AdSense 19 Avril 2018
bloquer l'accès au site à certains "mauvais'bots Administration d'un site Web 26 Mars 2018
Débloquer un modem, légal ou interdit ? Le café de WebRankInfo 6 Février 2018
Comment bloquer les voleurs de contenu ? Débuter en référencement 7 Juin 2017
Bloquer l'indexation de la recherche Débuter en référencement 18 Janvier 2017
bloquer un spammeur ( boston ) que je vois sur analytics ? Crawl et indexation Google, sitemaps 16 Janvier 2017
Débloquer ressources dans Search Console Débuter en référencement 14 Mai 2016