Réécriture et robots.txt

Discussion dans 'Débuter en référencement' créé par Beakido177, 10 Octobre 2019.

  1. Beakido177
    Beakido177 WRInaute discret
    Inscrit:
    11 Mars 2013
    Messages:
    58
    J'aime reçus:
    1
    Bonjour,

    Je souhaite exclure de l'index de Google des URL qui comportent un répertoire /node/ depuis le robots.txt avec la commande Disallow: /node*. Seulement, ces URL sont amenées à être réécrites, et donc le répertoire /node/ s'appellera autrement. Est-ce qu'elles continueront d'être exclues après la réécriture ? Ce que je ne souhaite pas.

    Merci :)
     
  2. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 821
    J'aime reçus:
    829
    si c'est le répertoire, la bonne écriture est :
    Disallow: /node/

    ça interdira uniquement le crawl des URL commençant par /node/ donc pas les URL réécrites autrement
     
Chargement...
Similar Threads - Réécriture robots Forum Date
Interaction robots.txt , réecriture d'url Crawl et indexation Google, sitemaps 18 Février 2012
Fichier robots.txt include et réécriture d'url Crawl et indexation Google, sitemaps 12 Septembre 2006
Réecriture d'URL et redirection pages AMP URL Rewriting et .htaccess 29 Mai 2021
WordPress réécriture d'URL domaine.TLD/COUNTRYCODE/ vers domaine.ccTLD URL Rewriting et .htaccess 9 Mai 2021
Comment faire une redirection des URL en + de la réécriture d'URL ? URL Rewriting et .htaccess 13 Septembre 2020
Réécriture d'articles, est-ce une bonne idée de couper ses articles? Rédaction web et référencement 25 Mai 2020
Réécriture HTTPS / WWW / redirect, etc ... URL Rewriting et .htaccess 10 Juin 2019
Réecriture simple qui ne fonctionne pas URL Rewriting et .htaccess 20 Février 2019
Faire une redirection 301 et une réécriture en même temps (.htaccess) URL Rewriting et .htaccess 16 Décembre 2018
Réécriture url et htaccess URL Rewriting et .htaccess 3 Octobre 2018
Réecriture url sur Shopify e-commerce 15 Juin 2017
Réécriture URL supprimer home/annugrbz/public_html URL Rewriting et .htaccess 24 Novembre 2016
Apache => Ngnix - Réécriture RewriteCond URL Rewriting et .htaccess 1 Février 2016
Réécriture d'url directory URL Rewriting et .htaccess 29 Janvier 2016
Réécriture lien URL Rewriting et .htaccess 24 Septembre 2015
Réécriture dynamique URL Rewriting et .htaccess 15 Septembre 2015
réécriture avec query string URL Rewriting et .htaccess 22 Août 2015
Modification d'une régle de réécriture avec redirection URL Rewriting et .htaccess 2 Juin 2015
Réécriture d'URL et référencement naturel Rédaction web et référencement 10 Avril 2015
Erreur 500 après réecriture URL URL Rewriting et .htaccess 30 Décembre 2014