Les aspirateurs et robots.txt

Youn701

Nouveau WRInaute
Bonjour,

j'aurai aimé savoir si les aspirateurs prennent en compte les fichiers robots.txt?
Si vous avez quelques conseils pour éviter les aspirateurs d'accéder à des dossiers sa serait sympa !

Merci a bientot
 

Discussions similaires

Haut