Google ne respecte pas mon robots.txt!

Discussion dans 'Débuter en référencement' créé par zimounet, 19 Décembre 2005.

  1. zimounet
    zimounet WRInaute passionné
    Inscrit:
    8 Novembre 2004
    Messages:
    1 374
    J'aime reçus:
    0
  2. spidetra
    spidetra WRInaute passionné
    Inscrit:
    7 Juillet 2003
    Messages:
    1 215
    J'aime reçus:
    0
    La syntaxe du robots.txt à l'air correcte.

    J'ai l'impression que Google n'indexe pas la page viewtopic.php, mais les pages viewtopic.php?id=xx

    Il me semble que les expressions régulières ne sont pas autorisées dans un fichier robots.txt. A faire confirmer par le forum.
     
  3. amokk
    amokk WRInaute occasionnel
    Inscrit:
    9 Mai 2005
    Messages:
    491
    J'aime reçus:
    0
    Bah elle ne sont pas indexés pour le moment, vu qu'il n'y a que l'url de pris en compte ! Maintenant a savoir s'il s'agit d'une desindexation de ces pages, ou un debut d'indexation ! Je ne peut pas confirmer...

    Patience ;)
     
  4. jeanluc
    jeanluc WRInaute accro
    Inscrit:
    3 Mai 2004
    Messages:
    2 875
    J'aime reçus:
    0
  5. TOMHTML
    TOMHTML WRInaute accro
    Inscrit:
    25 Août 2004
    Messages:
    2 502
    J'aime reçus:
    0
    regarde ton interface Sitemaps sur google, tu verra la rubrique "URL restreintes par le fichier robots.txt" et au bout d'un moment les pages indexées disparaitront de l'index et apparaitront dans cette rubrique.
     
  6. jerome347
    jerome347 WRInaute occasionnel
    Inscrit:
    19 Mars 2004
    Messages:
    468
    J'aime reçus:
    0
    Voir dans les "autres sujets de discussion", j'y ai trouvé ce lien :
    http://googleguy-fr.blogspot.com/2004/0 ... e-msn.html

     
  7. zimounet
    zimounet WRInaute passionné
    Inscrit:
    8 Novembre 2004
    Messages:
    1 374
    J'aime reçus:
    0
    ouais bah je le merde Mister google!

    J'ai rewrité mes pages, et depuis le début je lui dis de pas les crawler!

    Alors non seulement il me les crawl, et en plus il me les ajoute a son index!!!

    Et apres il va pas etre content car il va dire que je fais du "duplicate content" naméo

    En fait les pages qu'il m'index alors qu'il devrais pas si il suivait mon robots.txt sont en lien sur la page d'accueil (j'ai la fleme de rewriter les liens vers les last poste du forum)...

    Bref, méchant le google, je boude!
     
  8. jeanluc
    jeanluc WRInaute accro
    Inscrit:
    3 Mai 2004
    Messages:
    2 875
    J'aime reçus:
    0
    Je crois que tu n'as pas lu la réponse que jerome347 a donnée à ta question et qui confirmait ma réponse... :wink:

    Jean-Luc
     
Chargement...
Similar Threads - Google respecte robots Forum Date
Les robots ne respectent plus le fichier robots.txt, google, bing, voilà Problèmes de référencement spécifiques à vos sites 11 Janvier 2013
Google Image ne respecte pas mon robots.txt Problèmes de référencement spécifiques à vos sites 11 Juillet 2006
Google ne respecte pas les robots.txt ? Problèmes de référencement spécifiques à vos sites 8 Septembre 2003
Logo Google+ : attention de respecter le design! Google+ 6 Octobre 2014
Votre site ne respecte pas les consignes Google relatives à la qualité Problèmes de référencement spécifiques à vos sites 1 Avril 2014
Duplicate dû à antériorité non respectée par Google Référencement Google 19 Novembre 2012
Les liens nofollow internes sont respectés par Google Netlinking, backlinks, liens et redirections 30 Septembre 2008
Google ne respecte pas noindex et les consignes du robot.txt Référencement Google 8 Septembre 2005
Google respecte les copyrights! Crawl et indexation Google, sitemaps 25 Mars 2005
Comment faire respecter mon nom de domaine chez google? Référencement Google 31 Juillet 2002
Miniature SERP Google (ou Bing) Référencement Google Hier à 06:04
Page signalée bloquée par ma Console Google Search Débuter en référencement Dimanche à 18:29
Probleme tag sur Google tag manager Demandes d'avis et de conseils sur vos sites 24 Novembre 2022
Indexer mon site dans google Problèmes de référencement spécifiques à vos sites 24 Novembre 2022
Probleme Tag sur Google Tag Manager Google Analytics 18 Novembre 2022
Search Console Temps de prise en compte par Google de la disparition de liens Netlinking, backlinks, liens et redirections 9 Novembre 2022
Google API Translation - Billing Bug !! Droit du web (juridique, fiscalité...) 31 Octobre 2022
Mise à jour de l’algorithme Google Spam d’octobre 2022 Référencement Google 22 Octobre 2022
Google confond site officiel et site copie fake : comment faire ? Référencement Google 16 Octobre 2022
Astuce Comment indexer un site créé par Google site ? Rédaction web et référencement 13 Octobre 2022