Bloqué par le fichier robots.txt

Discussion dans 'Référencement Google' créé par bg62, 3 Juillet 2007.

  1. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    :( google me refuse l'indexation d'un sous-domaine à cause du fichier robots.txt qui contiendrait (selon leur test) une interdiction pour ce répertoire précis .... après vérification elle existait bien, tant que cela était en 'travail' mais elle a été supprimée et continue d' apparaître dans la vérificaton et de poser problème ...
    :oops: à quand la solution ?
    @mitiés
    b g
     
  2. titifrim
    titifrim WRInaute occasionnel
    Inscrit:
    21 Mars 2006
    Messages:
    267
    J'aime reçus:
    0
    Je te conseille d'aller faire un tour dans le compte webmaster si tu n'es pas passé par là et de faire une vérification de ton site, ensuite tu verras apparaître ce que Google voit dans ton fichier .txt si ça ne correspond pas fichier en ligne ça te permettra de t'aiguiller sur les manoeuvres à entreprendre... Sache aussi que certaines redirections 404 empêchent la vérification des sites par google et perturbe sa lecture du fichier robots.txt...
     
  3. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    :cry: ben c'est justement ce que j'ai fait ! et google conserve dans "sa" vue du fichier une interdiction qui n'existe plus !!!
    là je coince ...
    @mitiés
    b g
     
  4. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    complément

    j'ai ceci dans mon compte google:

    http://blog.unesourisetmoi.info/robots.txt
    Dernier téléchargement 3 juillet 2007 02:15:04 PDT
    État 404 (Introuvable)
    et il suffit de ckiquer sur ce lien et j'obtiens bien la page voulue avec ceci:
    User-agent: *
    disallow: /logs/

    donc normalement ce devrait être bon ...
    mais si ici j'essaie d'ouvrir le même lien pour voir s'il existe et sans erreur !!!
    http://blog.unesourisetmoi.info/robots.txt/
    le message d'erreur 404 y est !!!!!!!!

    :?: je craque !
     
  5. titifrim
    titifrim WRInaute occasionnel
    Inscrit:
    21 Mars 2006
    Messages:
    267
    J'aime reçus:
    0
    As-tu la main sur les erreurs 404, ça passe par un fichier .htaccess ? a mon avis le problème se situe plus au niveau du .htaccess...
     
  6. HawkEye
    HawkEye WRInaute accro
    Inscrit:
    23 Février 2004
    Messages:
    13 857
    J'aime reçus:
    5
    Ajoute un retour charriot (touche [ENTEE] si tu préfères...) à la dernière ligne "non vide".

    Au lieu de ceci:

    Code:
    User-agent: *
    disallow: /logs/
    ça fera ceci:

    Code:
    User-agent: *
    disallow: /logs/
    
    
    Ca devrait règler le problème ;)
     
  7. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    :evil: ben je n'ai pas de fichier de ce genre à la racine de ce lien !?!
    @+
    b g
     
  8. HawkEye
    HawkEye WRInaute accro
    Inscrit:
    23 Février 2004
    Messages:
    13 857
    J'aime reçus:
    5
  9. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    merci j'ai fait la manip (en plus aussi sur le fichier à la racine du site principal ... au cas où !) j'ai raffraichi la page de google et j'ai toujours ceci:
    comprends raiment pas !
    @+
    b g
     
  10. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    Re: complément

    :wink: merci ... petite erreur ! mais si l'on clique sur le lien (corrigé) il est bien valable ... :twisted: alors là !
    @+
    b g
     
  11. f_trt
    f_trt WRInaute impliqué
    Inscrit:
    17 Septembre 2005
    Messages:
    953
    J'aime reçus:
    0
    Attendre un peu peut-être,
    s'assurer aussi de la date du fichier robot.txt faire un touch si necessaire.
     
  12. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    je tourne bourrique

    je viens de lancer la vérification de nouveau, voici ce que j'ai eu:
    et pourtant en haut de page j'ai toujours ceci:
    :? je commence vraiment à me poser des questions ....
    @mitiés
    b g
     
  13. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    qu'appelles-tu " faire un touch " stpl ?
    @+
    b g
     
  14. f_trt
    f_trt WRInaute impliqué
    Inscrit:
    17 Septembre 2005
    Messages:
    953
    J'aime reçus:
    0
    C'est la commande linux pour modifier la date d'un fichier je lance cette piste au cas ou car ce qui t'arrive est bizarre cela forcera peut-être google à une nouvelle fraicheur...
     
  15. Leonick
    Leonick WRInaute accro
    Inscrit:
    8 Août 2004
    Messages:
    19 274
    J'aime reçus:
    0
    tu n'as qu'à créer un robots.txt vide, ça devrait le faire.
    J'avais eu un problème comme cela avec la console et 2 jours après c'était résolu, même s'il me marquait encore des fichiers bloqués par le robots.txt ce qui n'était plus vrai.
     
  16. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    :wink: merci je vais essayer !
    mais s'il y a toujours un signalement d'erreurs ... comment savoir si cela a une incidence ou pas ?
    @+
    b g
     
  17. bg62
    bg62 WRInaute impliqué
    Inscrit:
    25 Mai 2006
    Messages:
    676
    J'aime reçus:
    1
    patience ...

    :? apparemment c'est la solution de 'patience' qui devait être la bonne, car aujourd'hui, j'ai ceci:
    avec:
    détecté dans le fichier robots.txt ce qui est bon ...
    il y a trois pages indexées dans google, pour l'instant, mais sans "google preview" ....
    @ suivre ...
    @mitiés
    b g
     
Chargement...
Similar Threads - Bloqué fichier robots Forum Date
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019
Search Console bloquée par le fichier robots.txt Crawl et indexation Google, sitemaps 25 Juin 2019
Bloquer une section dans mon fichier robots.txt Débuter en référencement 9 Novembre 2018
Mon site est bloqué par le fichier robots.txt Crawl et indexation Google, sitemaps 12 Septembre 2018
fichier robots.txt bloquer paramètre p= Crawl et indexation Google, sitemaps 4 Septembre 2018
Résolu Toutes les URL bloquées par le fichier robots.txt Crawl et indexation Google, sitemaps 28 Mars 2018
Photos bloquées par le fichier robots.txt selon GWT Crawl et indexation Google, sitemaps 18 Décembre 2013
Prb avec le fichier robots.txt bloqué alors que tout semble ok Crawl et indexation Google, sitemaps 19 Octobre 2012
Les pages bloqués par le fichier robots.txt Débuter en référencement 7 Juillet 2009
Probleme avec fichier robots.txt fichier bloquer Crawl et indexation Google, sitemaps 4 Septembre 2007
Robots.txt Le fichier bloque l'accès à mon site Administration d'un site Web 22 Juin 2006
Ras le bol ! Bloquer le crawling des fichiers Css et Javascript à Google Crawl et indexation Google, sitemaps 12 Septembre 2015
pourquoi un fichier robot txt bloque mes images? Problèmes de référencement spécifiques à vos sites 12 Février 2013
Google Chrome bloque les téléchargements des fichier executable Problèmes de référencement spécifiques à vos sites 22 Septembre 2012
Message d'alerte google : le fichier robot txt bloque une page importante Crawl et indexation Google, sitemaps 19 Décembre 2011
Comment bloquer l'accès aux pages sans extensions de fichiers ? URL Rewriting et .htaccess 19 Novembre 2010
Bloquez l'accès à certains fichiers URL Rewriting et .htaccess 31 Juillet 2006
Mon forum se bloque a cause de la surcharge du CPU qui m'est alloué chez mon hébergeur URL Rewriting et .htaccess 13 Novembre 2022
Bloqués sur notre Stratégie de SEO Demandes d'avis et de conseils sur vos sites 30 Octobre 2022
Astuce Bloquer ip utilisateur actions étranges sur mon site Le café de WebRankInfo 13 Août 2022