Robots.txt obligatoire ?

WRInaute passionné
Bonjour, je voudrais savoir si le fichier robots.txt est obligatoire ou pas, google le visite tout les jours même s'il n'existe pas.. donc je me pose des question :roll:
 
WRInaute occasionnel
Il n'est pas obligatoire, mais pour savoir s'il existe Google est bien obligé de le demander, d'où un hit dans les logs.
 
WRInaute passionné
Je sais bien que google le visite pour savoir ce qu'il doit faire, mais je voudrais savoir s'il c'est obligatoire pour un bon référencement :)
 
WRInaute occasionnel
mahefarivony a dit:
c'est quoi robots.txt ? :mrgreen:
Un bouquin d'Asimov?

XoSt a dit:
Je sais bien que google le visite pour savoir ce qu'il doit faire, mais je voudrais savoir s'il c'est obligatoire pour un bon référencement
A priori, c'est plutôt pour qu'il n'indexe pas des pages plutôt que pour lui dire que les pages sont vachement bien. Donc, non, ca ne change pas grand chose au référencement.
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut