Pourquoi ne pas utiliser le robots.txt pour interdire l'indexation ?

[ungars]

Bonjour,
Je suis en train de lire cet article sur le fichier robots.txt, et je ne comprends pas bien ça :

Si vous souhaitez que certaines pages n’apparaissent pas dans les résultats de recherche, « n’utilisez pas le fichier robots.txt pour masquer votre page Web », détaille Google.

C' est pourtant le but de ce fichier, d' indexer ou non des pages, je ne comprends pas...

Merci pour vos précisions, bonne soirée.

 

[Marie-Aude]

Non, le but de ce fichier est de bloquer ou pas l'exploration par les robots. Pour l'indexation, c'est la meta robots.

 

[WebRankInfo]

Je te conseille de lire mon article différence entre robots.txt et meta robots noindex

 

[ungars]

Bonjour, merci pour vos réponses, je regarde tout ça à mon retour.

 

[ungars]

Re,
Je viens de lire l' article. Effectivement c' est plus clair, il ne faut pas confondre exploration et indexation.

Merci et bonne soirée.

 

[SeoCamel]

Dîtes moi si je me trompe, mais tu peux bloquer le crawl depuis robots.txt si la page n'a pas encore était indexée. Google ne viendra pas la crawl donc ne l'indexera pas. Si elle a été indexée, ça devient problématique.

 

[ungars]

Tu devrais ouvrir ton propre topic

 

[SeoCamel]

Non mais je répondais à ta réflexion ahah

 

[ungars]

Salut, oui je te prie de m' excuser, j' ai lu un peu trop vite.