Robots.txt et pourtant google indexe mes données

WRInaute occasionnel
j'ai un site test mais je ne veux pas que les moteurs de recherche indexe les contenu.
J'ai donc créer 2 fichiers robots.txt et robot.txt que j'ai mis à la racine avec comme contenu
User-agent: *
<meta name="robots" content="noindex, nofollow">
mais rien à faire google indexe mes contenus .Est ce normal cà?

merci pour votre aide
 
WRInaute passionné
Et puis, il ne faut pas confondre noindex avec noarchive... Une directive noindex sans être complétée par un noarchive, c'est comme p... dans un certain instrument en bois. :mrgreen:

La seule véritable protection : htaccess/htpswd
 
WRInaute passionné
Les protections par robots ou noindex, etc, ne restent valables que dans l'hypothèse où le robot est 'safe' et respecte ces directives. Hormis les quelques 'grands', beaucoup ne lisent même pas le robots.txt ou ne tiennent pas compte des nofollow par exemple.

edit: une lettre incongrue changeait la nature d'une phrase...
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut