Réécriture et robots.txt

Discussion dans 'Débuter en référencement' créé par Beakido177, 10 Octobre 2019.

  1. Beakido177
    Beakido177 WRInaute discret
    Inscrit:
    11 Mars 2013
    Messages:
    54
    J'aime reçus:
    1
    Bonjour,

    Je souhaite exclure de l'index de Google des URL qui comportent un répertoire /node/ depuis le robots.txt avec la commande Disallow: /node*. Seulement, ces URL sont amenées à être réécrites, et donc le répertoire /node/ s'appellera autrement. Est-ce qu'elles continueront d'être exclues après la réécriture ? Ce que je ne souhaite pas.

    Merci :)
     
  2. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 008
    J'aime reçus:
    296
    si c'est le répertoire, la bonne écriture est :
    Disallow: /node/

    ça interdira uniquement le crawl des URL commençant par /node/ donc pas les URL réécrites autrement
     
Chargement...
Similar Threads - Réécriture robots Forum Date
Interaction robots.txt , réecriture d'url Crawl et indexation Google, sitemaps 18 Février 2012
Réécriture HTTPS / WWW / redirect, etc ... URL Rewriting et .htaccess 10 Juin 2019
Réecriture simple qui ne fonctionne pas URL Rewriting et .htaccess 20 Février 2019
Faire une redirection 301 et une réécriture en même temps (.htaccess) URL Rewriting et .htaccess 16 Décembre 2018
Réécriture url et htaccess URL Rewriting et .htaccess 3 Octobre 2018
Réecriture url sur Shopify e-commerce 15 Juin 2017
Réécriture URL supprimer home/annugrbz/public_html URL Rewriting et .htaccess 24 Novembre 2016
Apache => Ngnix - Réécriture RewriteCond URL Rewriting et .htaccess 1 Février 2016
Réécriture d'url directory URL Rewriting et .htaccess 29 Janvier 2016
Réécriture lien URL Rewriting et .htaccess 24 Septembre 2015
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice