disallow (blocage robots.txt)

  1. M

    500 redirections et 300 disallow

    Bonjour, 500 redirections (directes) dans htaccess et 300 disallow dans robots mais cela juste pour qlqs mois... Ca passe ou ca casse?
    • moutop
    • Discussion
    • code http 500 (erreur interne serveur) crawl (exploration) disallow (blocage robots.txt) fichier robots.txt
    • Réponses: 5
    • Forum: URL Rewriting et .htaccess
  2. S

    Robost.txt : Usage d'un * dans la commande Disallow

    Bonjour, Dans la cadre de la rédaction d'un fichier robots.txt, je tente d'exclure tout type de fichier portant l'extension "php". Langage anciennement utilisé sur mon site et dont les anciennes pages restent - contre toute attente - indexées par Google depuis un an ; ces pages n'existent...
  3. S

    Robots.txt pour phpbb : Disallow de certaines urls

    Salut à tous, Comment puis-je éviter ce genre d'indexation : https://www.google.fr/search?hl=fr&ie=UT ... cher&meta= (posting.php?mode=reply&t=xx) Que dois je ajouter au niveau de mon fichier robots.txt ? Merci. Sébastien.
Haut