Robots je vous aime, c'est juré

Discussion dans 'Crawl et indexation Google, sitemaps' créé par Chris V, 25 Janvier 2005.

  1. Chris V
    Chris V Nouveau WRInaute
    Inscrit:
    21 Janvier 2005
    Messages:
    10
    J'aime reçus:
    0
    Salut à tous,

    J'ai toujours été tres bien referencé sur Google via club-internet depuis 5 ans.
    Depuis la mi-decembre googlebot n'est plus passé alors que je n'ai fait aucune modif sur mon site. CI a modifié les redirections des pages persos.
    Mais pour d'autres ça n'a posé aucun probleme.
    Sur validator.w3.org ont me dit ceci !!! :
    "The link was not checked due to robots exclusion rules. Check the link manually, and see also the link checker documentation on robots exclusion."

    JE N'AI JAMAiS DEMANDÉ A EXCLURE LES ROBOTS!!!!
    D'ou peux venir le probleme d'apres vous?

    Chris un humain qui aime les robots
    :wink: :wink:
     
  2. Americas
    Americas WRInaute accro
    Inscrit:
    24 Septembre 2003
    Messages:
    2 586
    J'aime reçus:
    0
    Je crois que tu le dis toi même : Si Club Internet a changé les redirections des sites perso... ils ont peut être également influencé le passage des robots avec un fichier robots.txt

    vérifie que tu n'as pas ce fichier à la racine de ton site et dis-nous comment ce font les redirections sur club intenet
     
  3. Chris V
    Chris V Nouveau WRInaute
    Inscrit:
    21 Janvier 2005
    Messages:
    10
    J'aime reçus:
    0
    je n'ai pas vu ce fichier sur mon ftp et
    lorsque je fais login.club.fr/robots.txt il y a une erreur 404

    Les redirections sont de type 301 et 302:
    HTTP/1.0 301 Moved Permanently pour l'ancienne url
    HTTP/1.0 302 Found pour la nouvelle qui est dirigée elle meme vers index.html !!!
     
Chargement...
Similar Threads - Robots aime juré Forum Date
Robots : n'autoriser que les 4 ou 5 moteurs de recherche principaux Crawl et indexation Google, sitemaps 15 Janvier 2021
erreurs robots.txt Crawl et indexation Google, sitemaps 23 Décembre 2020
Google me dit que ma page est bien indexée mais bloquée par robots.txt Crawl et indexation Google, sitemaps 25 Novembre 2020
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 17 Octobre 2020
lien variable à bloquer sur robots Développement d'un site Web ou d'une appli mobile 3 Mai 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Robots.txt du site Kayak Débuter en référencement 11 Mars 2020
Search Console Indexée malgré le blocage dans robots.txt Crawl et indexation Google, sitemaps 26 Février 2020
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019
Search Console Images bloquées ... malgré absence de robots.txt Crawl et indexation Google, sitemaps 31 Octobre 2019