1. ✅ Apprenez une METHODE qui marche pour votre SEO ! Formation à distance avec Olivier Duffez et Fabien Facériès + aide pour prise en charge du financement
    Rejeter la notice

Répertoires dans robots.txt

Discussion dans 'Administration d'un site Web' créé par ortolojf, 1 Novembre 2003.

  1. ortolojf
    ortolojf WRInaute accro
    Inscrit:
    14 Août 2002
    Messages:
    3 108
    J'aime reçus:
    12

    Bonjour
    Ma question est simple:

    Dans l'aide de Wri sur la syntaxe du fichiers robots.txt les répertoires figurent sans slashe ( / ) à la fin du pathname.

    Est-il possible ou souhaitable d'écrire, par exemple:
    Code:
    User-agent: *
    Disallow: /images/
    Disallow: /robotstats/
    au lieu de:
    Code:
    User-agent: *
    Disallow: /images
    Disallow: /robotstats
    Cette dernière option est celle indiquée dans l'aide de Wri, mais n'est-il pas plus facile aux crawlers, de distinguer un répertoire d'un fichier, s'il se termine par un slashe ?

    Merci beaucoup de vos réponses.

    Jean Francois Ortolo

     
  2. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 790
    J'aime reçus:
    452
  3. ortolojf
    ortolojf WRInaute accro
    Inscrit:
    14 Août 2002
    Messages:
    3 108
    J'aime reçus:
    12

    Bonjour WebRankInfo

    J'ai regardé ce fichier robots.txt de google.com , et il y a les deux: Avec et sans slashes pour les directories.

    C'est vrai que j'aurais mieux fait de regarder avant de poser ma question, je ne savais pas que le fichier apparaitraît directement.

    Merci beaucoup de ta réponse.

    Jean Francois Ortolo

     
Chargement...
Similar Threads - Répertoires robots Forum Date
WordPress Conseil sur la bonne structure des URL en répertoires Problèmes de référencement spécifiques à vos sites 19 Août 2020
Domaine racine et sous répertoires Référencement international (langues, pays) 22 Avril 2020
Création d'une vue Google Analytics sans sous-répertoires Google Analytics 5 Mars 2020
Francophonie, alias ccTLD vers sous-répertoires dupliqués d'un .com Référencement international (langues, pays) 9 Juin 2018
Sous-domaines ou répertoires pour un gros site multilingue sur un .com ? Référencement international (langues, pays) 23 Février 2018
Passer plusieurs sous-domaine en 301 vers répertoires Débuter en référencement 18 Juillet 2017
Fil d'ariane et page dans des répertoires Débuter en référencement 25 Novembre 2016
Des sous domaines ou des repertoires pour un site multilangue ? Débuter en référencement 25 Novembre 2016
Site multilingue : pas de .com mais un .fr et des répertoires langues Référencement international (langues, pays) 25 Janvier 2016
Duplicata de pages sur différents répertoires de langues Référencement international (langues, pays) 4 Février 2015