Exclusion d'un robot

zamal75

WRInaute discret
Bonjour,

Je viens de voir qu'un robot "pompait" pas mal de mes ressources..

Dans mes logs j'ai trouvé cette adresse :

http://www.cuill.com/twiceler/robot.html

Etant novice dans la matiere que dois-je faire ? L'exclure via le robot.txt ou bien par le .htaccess ? Et quel bout de code dois-je écrire ?

Merci de vos réponses.
 

mikaweb

WRInaute discret
Bonjour,

Voila j'ai un petit souci :(
Via mon fichier robots.txt je bloque certains paramètre de mon forum Invision.
Voila par exemple un paramètre de mon fichier texte.

Disallow: /index.php?act=Login
Et lorsque je vais dans mon google sitemap il me signalle pleins d'erreurs : URL restreintes par un fichier robots.txt (253)

Est ce que il signale simplement que certains URL ne sont pas accessible car bloquée ? Ou bien il y a un souci ?
Car quand je voie l'image d'avertissement je me dis que y a surement un truc qui pose souci quelque part ;)

Merci
 

Discussions similaires

Haut