exlucure un dossier dans robots.tx ?

[kinteba]

Bonjour,

comment faut il demander aux robots de ne pas indexer un dossier svp ?

de cette façon :
Disallow: /include/

ou

Disallow: /include

ou encore Disallow: /include/ (avec tous les fichiers du répertoire)

Merci

 

[Thierry Bugs]

Bonjour,

Disallow: /include/
répertoire entier

Disallow: /include.php
page précise

 

[kinteba]

ok merci

Je viens juste de lire une astuce vrai ou pas, j'en sais rien et je demande l'avis. Apparement il faut faire un saut de ligne (ENTER) en bas du fichier robots.txt

Vous en pensez quoi ?

 

[Thierry Bugs]

"ça ne mange pas de pain"
pourquoi pas...

 

[Grantome]

Quel intérêt ?

 

[kinteba]

justement je sais pas l'interré, j'ai lu ça alors je deamnde l'avis.
Dommage que je retrouve pas le topic pour vous montrer.

Bon je vire le saut de ligne au cas où :lol:

 

[Xele]

Y'a pas mal de programme qui demande un saut de ligne à la fin du fichier sous linux par exemple. Ca serait pas étonnant que les robots en ai besoin aussi.

C'est une histoire de lecture ligne par ligne en cherchant un \n, et si y'en a pas à la fin, la dernière ligne est ignorée.

 

[kinteba]

à ok, bon je la met histoire de, comme dit Thierry "ça mange pas de pain"