Disallow * sauf pour GoogleBot

Discussion dans 'URL Rewriting et .htaccess' créé par mtth, 9 Octobre 2014.

  1. mtth
    mtth WRInaute discret
    Inscrit:
    22 Août 2014
    Messages:
    60
    J'aime reçus:
    0
    Bonjour,

    J'aimerai protéger des fichier avec un document.htaccess pour que les internautes n'arrivent pas a tous les télécharger.
    J'utilise pour le moment un Disallow * ... Mais par contre j'aimerai que Google aie accès a ces document pour référencer son contenu... Mais comment faire??

    Merci beaucoup

    Mtth
     
  2. baud74
    baud74 WRInaute impliqué
    Inscrit:
    21 Juillet 2014
    Messages:
    586
    J'aime reçus:
    0
    quelque chose du style :
    RewriteCond %{REQUEST_URI} ^/.*\.pdf$
    RewriteCond %{HTTP_USER_AGENT} !Googlebot [NC]
    RewriteRule (.*) monfichier.php [L]
     
  3. mtth
    mtth WRInaute discret
    Inscrit:
    22 Août 2014
    Messages:
    60
    J'aime reçus:
    0
    Oooh merci beaucoup [SMILING FACE WITH SMILING EYES] donc si je comprends bien pour toutes les url terminant par .pdf et dont le useragent n'est pas googlebot on la redirige vers mon fichier.php ? Okido et si par exemple le fichier se trouve dans uploads/nom-du-fichier.doxc peut-on le rediriger alors vers /résumés/apercu/nom-du-resume ??

    Merci énormément car cela va vraiment bien améliorer mon référencement (enfin j'espère) :)

    Mtth
     
Chargement...
Similar Threads - Disallow GoogleBot Forum Date
Search Console - Disallow /Feed/ Crawl et indexation Google, sitemaps 7 Juin 2020
J'ai tout Disallow pendant 10 jours! Référencement Google 29 Janvier 2020
Pagination : Disallow, No index, Canoniser - Qu'est-ce qu'on fait ? Référencement Google 15 Octobre 2019
Sites de test indexés malgré Disallow dans robots.txt Crawl et indexation Google, sitemaps 7 Juin 2019
est-il préférable de disallow des pages non indexées Crawl et indexation Google, sitemaps 29 Janvier 2019
Disallow à la place de noindex (optimisation du PageRank interne) Crawl et indexation Google, sitemaps 10 Août 2018
robots.txt avec Disallow:/*.php Débuter en référencement 23 Juin 2018
Problème et couverture de l'index et de Disallow Problèmes de référencement spécifiques à vos sites 2 Mai 2018
Cocon sémantique, nofollow et disallow au troisième niveau Référencement Google 9 Novembre 2017
Robots.txt et syntaxe de Disallow Crawl et indexation Google, sitemaps 2 Juin 2017
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice