La balise meta robots est-elle vraiment reconnue ?

Discussion dans 'Débuter en référencement' créé par fbparis, 4 Février 2005.

  1. fbparis
    fbparis WRInaute impliqué
    Inscrit:
    1 Février 2005
    Messages:
    520
    J'aime reçus:
    0
    bonjour,

    j'ai une balise <meta name="robots" content="index,follow"> dans la section head de chacune de mes pages et j'ai aussi codé un script php qui me permet de suivre le parcours des robots qui visitent mon site.

    et je me suis apercu que googlebot et slurp ne visitaient que la page index.php sans suivre les liens.

    comment peut on expliquer ca ?

    d'avance je precise qu'il n'y a pas d'identifiant de session collé pour chaque lien (j'ai entendu dire que le googlebot n'indexait plus les pages avec des identifiants de session) puisque quand un bot est reconnu, la session ne demarre pas.

    FB - http://www.msnblockchecker.net
     
  2. jeanluc
    jeanluc WRInaute accro
    Inscrit:
    3 Mai 2004
    Messages:
    2 875
    J'aime reçus:
    0
    Bonjour fbparis,

    Il est totalement inutile d'autoriser le robot à visiter tes pages. L'emploi de cette balise n'a de sens que quand tu veux interdire l'indexation ou le suivi des liens.

    Le robot ne visite pas tes pages "à ta demande", mais quand il en a envie... :wink:

    Le comportement que tu décris est classique. Le robot fera quelques visites de ta page d'accueil avant d'approfondir... Patience, patience...

    Jean-Luc
     
  3. fbparis
    fbparis WRInaute impliqué
    Inscrit:
    1 Février 2005
    Messages:
    520
    J'aime reçus:
    0
    merci c'est exactement ce que je voulais savoir :)
     
Chargement...
Similar Threads - balise meta robots Forum Date
Search Console noindex détecté dans la balise Meta robots Débuter en référencement 21 Mai 2021
Effet de deux balises: meta name="robots" ? Crawl et indexation Google, sitemaps 25 Septembre 2016
Balise <meta name="robots" content="noindex,follow"/> Débuter en référencement 19 Mars 2014
Balise meta robots avec un content vide Débuter en référencement 12 Juin 2013
Referencement naturel : balise meta robots index follow utile ? Débuter en référencement 19 Juillet 2011
Utilisation de la balise meta robots : valeur nosnippet Crawl et indexation Google, sitemaps 15 Décembre 2010
Fichier robots.txt VS balise meta robots Débuter en référencement 24 Août 2010
Emplacement Balises< Meta name="robots" content="" /> Débuter en référencement 20 Octobre 2009
Balise meta robots index,nofollow Débuter en référencement 21 Novembre 2008
La balise meta robots noodp pour contrer la description DMOZ Référencement Google 7 Août 2008
Question sur la balise meta "robots" Débuter en référencement 25 Août 2006
Robots.txt et balise meta robots, incompatibilité ? Problèmes de référencement spécifiques à vos sites 9 Juillet 2005
Balises META et fichier robots txt Débuter en référencement 11 Mars 2005
Balise Meta Robots Débuter en référencement 1 Septembre 2004
Balise meta name description non prise en compte par Google Référencement Google 19 Septembre 2022
Search Console Comment réparer l'affichage de Google dans la mauvaise balise de description Meta ? Problèmes de référencement spécifiques à vos sites 19 Août 2022
Balise méta description : faut-il insérer son mot-clé ? Débuter en référencement 2 Juillet 2022
Changement des balises meta à la volée Rédaction web et référencement 28 Mars 2020
Balise title et meta changent dans SERP selon mots-clés Débuter en référencement 2 Janvier 2020
Désindéxer pages sans en-têtes, ni balises meta Crawl et indexation Google, sitemaps 6 Décembre 2019