Robot.txt pour tous ou uniquement pour GG

WRInaute discret
bonjour,
ma question est simple
est-ce que le fichier robot.txt est lu par tous les moteurs de recherche ou uniquement par GG,

car je compte utiliser celui-ci pour paramétrer celui-ci et empêcher ainsi le "non" référencement de certaines pages ou répertoires

merci d'avance pour vos réponses
 
WRInaute discret
ok merci,
en faite en étant plus précis,
le but de cette manipulation est de placer un fichier xml en ligne, qui ne peut-être télécharger ou vu par les moteurs de recherche, afin que personnes ne puissent aller cliquer dessus

je sais que je pourrais placer celui-ci dans un partie de mon hébergement qui n'est pas attaquable de l'extérieur (comme l'emplacement des base de données), mais comme je compte avoir plusieurs fichiers XML dans différents répertoires, c'est plus facile pour moi d'avoir le même non de fichier xml, que de les placer tous dans un même espace avec des noms différents

merci
 
WRInaute passionné
Pour ca, le mieux est d'interdire l'acces avec un mot de passe. Tes scripts pourront toujours y acceder mais ni les robots, ni les visiteurs. Il y a surement d'autres possibilites avec les directives apache.
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut