Robots.txt: interdire un dossier mais autoriser une page de ce dossier

Discussion dans 'Crawl et indexation Google, sitemaps' créé par niou142, 3 Février 2016.

Tags:
  1. niou142
    niou142 WRInaute occasionnel
    Inscrit:
    5 Octobre 2009
    Messages:
    292
    J'aime reçus:
    0
    Bonjour tout le monde,

    J'ai une petite question concernant un site qui tourne sous Prestashop.

    Dans mon robots.txt, je refuse tout ce qui se trouve dans 'module' ce qui me donne :
    Code:
    Disallow: /*modules/
    Mais j'aimerai tout de même permettre à Google de prendre en compte 2 pages contenues dans ce dossier.

    J'ai tenté ceci:

    Code:
    Allow: /modules/sousdossier/mapage.php
Disallow: /*modules/
    Via Search Console, j'ai testé ce petit bout de code mais cela me dit que ma page est en disallow (j'ai tenté en inversant l'ordre des deux ligne).

    Savez-vous comment procéder pour que cela fonctionne svp ?
     
    #1 niou142, 3 Février 2016
  2. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    11 889
    J'aime reçus:
    75
    C'est l'inverse qu'il convient de faire (et je vois difficilement l'intérêt de l'* dans ce cas) :

    Code:
    Disallow: /modules/
Allow: /modules/sousdossier/mapage.php
     
    #2 UsagiYojimbo, 3 Février 2016
  3. niou142
    niou142 WRInaute occasionnel
    Inscrit:
    5 Octobre 2009
    Messages:
    292
    J'aime reçus:
    0
    Ah d'accord cela provient donc de l'étoile.

    Histoire de ne me coucher moins bête, pouvez-vous svp me dire quelle est la différence entre Disallow: /modules/ et Disallow: /*modules/.

    Merci UsagiYojimbo et Heddy pour votre aide :) !
     
    #3 niou142, 3 Février 2016
  4. Furtif
    Furtif WRInaute accro
    Inscrit:
    9 Août 2005
    Messages:
    2 788
    J'aime reçus:
    232
    #4 Furtif, 3 Février 2016
  5. niou142
    niou142 WRInaute occasionnel
    Inscrit:
    5 Octobre 2009
    Messages:
    292
    J'aime reçus:
    0
    Oui c'est bon ça fonctionne bien merci :)
     
    #5 niou142, 4 Février 2016
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - Robots interdire dossier Forum Date
Interdire l'acces au fichier Robots Débuter en référencement 13 Février 2012
Interdire des pages dynamiques dans robots.txt Débuter en référencement 18 Mai 2010
Robots.txt Interdire une serie d'url issue d'une page avec paramètres Débuter en référencement 29 Avril 2010
Google me dit que ma page est bien indexée mais bloquée par robots.txt Crawl et indexation Google, sitemaps Mercredi à 18:31
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 17 Octobre 2020
lien variable à bloquer sur robots Développement d'un site Web ou d'une appli mobile 3 Mai 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Robots.txt du site Kayak Débuter en référencement 11 Mars 2020
Search Console Indexée malgré le blocage dans robots.txt Crawl et indexation Google, sitemaps 26 Février 2020
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019