Indexation du robots.txt! bizzare

Discussion dans 'Crawl et indexation Google, sitemaps' créé par soccarfr, 28 Décembre 2004.

  1. soccarfr
    soccarfr Nouveau WRInaute
    Inscrit:
    1 Septembre 2004
    Messages:
    43
    J'aime reçus:
    0
    Bonsoir à tous,

    je viens de remarquer un truc bizzare. Parmi les pages indexés que je trouve avec la commande site, se trouve mon robots.txt!!!

    c'est complétement débiles de l'afficher parmi les résultats!!! 8O

    ça vous est déjà arrivé??
     
  2. Erazor
    Erazor WRInaute accro
    Inscrit:
    14 Février 2004
    Messages:
    3 858
    J'aime reçus:
    0
    oui et il y a peu comme toi je pense
     
  3. soccarfr
    soccarfr Nouveau WRInaute
    Inscrit:
    1 Septembre 2004
    Messages:
    43
    J'aime reçus:
    0
    oui je viens de m'en apercevoir aujourd'hui. il pete un cable GG des fois!!!
     
  4. ~hcplayer~{feh}~
    ~hcplayer~{feh}~ WRInaute discret
    Inscrit:
    21 Février 2004
    Messages:
    139
    J'aime reçus:
    0
    le mien aussi, ça fait 1 mois :p
     
  5. Erazor
    Erazor WRInaute accro
    Inscrit:
    14 Février 2004
    Messages:
    3 858
    J'aime reçus:
    0
  6. jeromax
    jeromax WRInaute impliqué
    Inscrit:
    12 Novembre 2003
    Messages:
    898
    J'aime reçus:
    0
    8O 8O 8O 8O
    z'avez vu celui là ????
    -http://www.whitehouse.gov/robots.txt
    12km de long....
    2183 lignes.... pfiouuuu....
     
  7. Machin
    Machin WRInaute occasionnel
    Inscrit:
    31 Mars 2004
    Messages:
    289
    J'aime reçus:
    0
    Pot de miel pour pirates du dimanche. Il vaut mieux ne pas aller promener son IP dans ce genre de répertoires.
     
  8. vin-moi
    vin-moi WRInaute occasionnel
    Inscrit:
    22 Novembre 2004
    Messages:
    348
    J'aime reçus:
    0
    tu veut dire quoi par là ? :? j'ai cliqué :cry:
     
  9. Zirone
    Zirone WRInaute occasionnel
    Inscrit:
    6 Octobre 2004
    Messages:
    304
    J'aime reçus:
    0
    qu'il doive reperer et garder les ip ..
     
  10. Blaze_Heatnix
    Blaze_Heatnix WRInaute occasionnel
    Inscrit:
    31 Décembre 2003
    Messages:
    277
    J'aime reçus:
    0
    Oups... [​IMG]

    Enfin bon, c'est pas si dramatique que cela... Je vois mal débarquer des agents du fbi , chez toutes les personnes qui auront eu le "malheur" de cliquer sur leur fichier robots.txt ...[​IMG]
     
  11. JeunZ
    JeunZ WRInaute accro
    Inscrit:
    18 Février 2004
    Messages:
    3 971
    J'aime reçus:
    0
    mdr je suis fiché aussi alors car dés que j'ai vu ça j'ai pas pu m'en empecher lol.
     
Chargement...
Similar Threads - Indexation robots bizzare Forum Date
Problèmes d'indexation et robots.txt Crawl et indexation Google, sitemaps 14 Octobre 2019
Indexation malgré le robots.txt Problèmes de référencement spécifiques à vos sites 23 Septembre 2019
Problèmes d'indexation à cause de ressources bloquées (robots.xt) Crawl et indexation Google, sitemaps 22 Novembre 2018
Empêcher l'indexation des fichier .pdf et du robots.txt Crawl et indexation Google, sitemaps 28 Octobre 2014
[PB Indexation] Robots.txt et sitemap.xml Crawl et indexation Google, sitemaps 5 Février 2014
Robots.txt et indexation Problèmes de référencement spécifiques à vos sites 24 Octobre 2013
Désindexation de la pagination via le robots.txt Crawl et indexation Google, sitemaps 23 Septembre 2013
Crawl, indexation, robots.txt : les mystères de Google expliqués Crawl et indexation Google, sitemaps 10 Juin 2013
Robots.txt indexation Débuter en référencement 5 Avril 2013
Empêcher l'indexation avec robots.txt d'un sous domaine (version mobile) Administration d'un site Web 6 Mars 2013
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice