Au sujet du fichier Robot.txt

[niaslag]

Bonjour

Je dois empecher Google de visiter un sous domaine ou répertoire

C'est un domaine protégé par .htaccess et je veusx empecher google de l'indexer
Si google passe dessus est-ce que lui interdire l'indexage par robot.txt
sera efficace si ce fichier n'est pas dans la racine du site car je ne veux pas non plus qu'il désindex le site racine

Merci pour votre réponse

 

[fredwat]

Je ne sais pas répondre à ta demande..mais il me semble que ton fichier doît se nommer robots.txt
pour le reste tu auras la réponse rapidement
:wink:

 

[yopyop91]

A moins que je me trompe, mais Google ne peut avoir accès au contenu qui se trouve dans le répertoire protégé par un .htaccess car il ne dispose pas du login/mdp. Donc a mon sens aucun risque que le contenu soit indexé.
Avec le robot.txt tu peux tres bien interdire l'accès à un répertoire en particulier sans avoir à interdire tout le site.
Pour Yahoo ton fichier robots.txt aurait la tête suivante :

User-agent:Slurp
Disallow:/ton-répertoire/

 

[yopyop91]

A moins que je me trompe, mais Google ne peut avoir accès au contenu qui se trouve dans le répertoire protégé par un .htaccess car il ne dispose pas du login/mdp. Donc a mon sens aucun risque que le contenu soit indexé.
Avec le robot.txt tu peux tres bien interdire l'accès à un répertoire en particulier sans avoir à interdire tout le site.
Pour Yahoo ton fichier robots.txt aurait la tête suivante :

User-agent:Slurp
Disallow:/ton-répertoire/

 

[Haq]

Oui, ce sera efficace.

 

[olivieri]

Et pour tous les robots:

User-agent: *
Disallow: /dossier/

et le nom de fichiers est bien robots.txt et pas robot.txt

 

[fredwat]

Merci olivieri
par moment il m'arrive de douter.. :wink:

 

[niaslag]

Merci à tous pour vos réponses, je vais pouvoir passer à l'action

 

[niaslag]

Et pour tous les robots:

User-agent: *
Disallow: /dossier/

et le nom de fichiers est bien robots.txt et pas robot.txt

juste une petite chose:

Est-ce que les 2 actions ci-dessous ont le même effet ou bien y a t-il une préférence

A mettre à la racine
User-agent: *
Disallow: /dossier/

A mettre dans le répertoire "dossier"

Merci

Disallow: /